資料散落多個系統,每次分析都要重新撈
核心系統、徵信資料、試算表與外部資料各自存放,欄位定義不一,同一個指標在不同報表出現不同數字。
資料散落在核心系統、試算表與外部來源,格式與口徑不一,每次分析都要重新整理。
把核心系統、外部資料與人工報表整合成一套可治理、可追溯的資料來源。
需要口徑一致、來源可追溯的資料,支援模型驗證與內外部報送。
需要穩定、乾淨的資料,才能把時間花在分析與決策,而不是整理資料。
核心系統、徵信資料、試算表與外部資料各自存放,欄位定義不一,同一個指標在不同報表出現不同數字。
每月的資料蒐集、彙整與報表製作靠人工完成,耗時且容易出錯,人員異動時流程就中斷。
缺漏值、重複資料、單位不一致與離群值未經處理,就直接進入模型與報表。
模擬、回測與大量統計運算耗時,既有主機難以依需求彈性擴充。
每一步的方法、假設與限制都會寫成文件,讓結果可以被檢驗、也說得清楚。
盤點資料來源、欄位定義與更新頻率,建立資料字典與指標口徑說明,作為後續所有分析的共同語言。
以軟體機器人或既有匯出介面排程擷取各系統與外部資料,每次執行都留下紀錄,異常時可追查。
處理缺漏值與重複值,統一單位與格式,標記離群值,並在每次更新後產出品質檢核結果。
依原始層、清理層、分析層分層儲存,設定存取權限與版本,供報表與模型一致取用。
常用統計運算封裝為 API,大量運算改以背景任務執行,分析人員不必等待。
4 項子功能,可單獨導入,也可依需求組合。
以軟體機器人取代重複性人工作業,自動跨系統擷取、輸入與彙整資料,降低人為錯誤並釋放人力,讓資料準備全程自動化。
提供可彈性擴充的雲端算力,依運算負載自動調整資源,支撐大規模統計運算與模型訓練,免去自建機房的成本與維運負擔。
自動偵測並去除雜訊、補齊缺漏值並進行標準化,確保進入分析流程的資料品質一致、結果可被信任。
建置結構化的資料倉儲,將清理後的資料集中治理、分層儲存,提供統一介面供分析與報表即時取用。
以分階段的方式進行,每個階段結束時確認成果再往下走;實際時程依資料狀況與需求範圍而定。
確認要支援的報表、模型與決策,以及資安與資料分級規範。
列出資料來源、欄位與更新頻率,評估品質與取得方式。
建置擷取、清理與倉儲流程,撰寫清理規則文件。
與既有報表數字比對,確認口徑一致後再切換。
交付文件與教育訓練,約定後續維運方式。
資料來源、欄位定義、更新頻率與指標口徑。
擷取與彙整流程、排程設定與執行紀錄。
逐項清理規則文件與每次更新的檢核結果。
分層資料結構、權限設定與查詢介面。
讓貴單位人員能自行維運與擴充。
以下圖表以模擬資料繪製,用來說明資料監控與品質報表的呈現方式,不代表任何實際處理量或客戶資料。
不一定。會依貴單位的資安規範與資料分級,規劃地端、私有雲或混合架構;需要留在內部網路的資料,可以在內部環境建置與處理。
多數情況不需要。RPA 以模擬人工操作或既有的匯出功能擷取資料,不必修改核心系統程式;若系統已提供 API,會優先以 API 串接。
由博山提出建議規則,與業務及資料負責人逐項確認後寫入文件。之後每次執行都依同一套規則,結果可以重現,也方便稽核。
可由貴單位資訊人員接手,博山提供操作手冊與教育訓練;也可以另行約定由博山提供維運支援。