資料指標體系如何搭建才最有效,從0到1帶你快速入門丨02期直播回顧
一、指標管理背景介紹
大資料時代數字化轉型背景下,企業所需要的往往不單單是資料,而是資料背後對映的業務洞察,相比較資料我們更加關心的是其體現的業務價值以及覆蓋的業務場景。
龐大的資料只有和業務相結合轉化為資訊,經過處理呈現才能真正體現他們的價值。指標作為資料計算的結果,是直接反映衡量業務效果的依據,應用在企業的方方面面,如資料報表、分析平臺及日常取數等。
資料指標作為資料計算的結果,是企業資料價值的直觀體現,在業務擴張、指標計算需求的暴增背景下,隨之而來的指標管理問題也越來越多,例如指標管理不統一、指標口徑不一致、指標流程不規範等,這些問題造成指標管理混亂,資料價值未得到充分發揮。
要解決以上問題,幫助企業建立指標體系,我們需要充以下三個方面入手:
● 指標平臺
建立統一的指標管理平臺,集中管理資料指標,沉澱指標資產
● 指標體系
有一套標準規範的指標搭建方法論,搭建企業級資料指標體系
● 流程管理
搭載統一的流程控制機制,全面把控資料指標的生命週期
二、指標體系建設方法論
如何幫助企業搭建指標體系,我們主要從以下五步驟入手,從0到1幫助搭建指標體系
搭建目標
搭建指標體系的第一步就是明確搭建目標,大部分企業由於目標不清晰造成指標管理混亂,通過指標體系的搭建,我們要實現“一個指標、一個口徑、一次加工、多次使用”,做到統一指標口徑,減少重複工作,結果統一輸出。
● 統一關鍵指標
建立公司級統一的關鍵指標,幫助企業通過統一的指標框架來助力業務業務擴張。
● 減少重複工作
為每一個成員提供統一的平臺來協同,瞭解企業整體資料業務情況,減少資料團隊重複性工作和時間花費
● 結果統一輸出
針對指標結果,提供一套能將指標和上層應用結合起來的輸出方式,發揮資料指標最大的價值
需求分析
明確目標之後,我們開始著手去構建指標體系,在設計指標之前,我們首先要進行需求分析。
同一個企業,不同的業務線、不同的部門,甚至是同一部門的不同人員,提出來的指標計算需求都會有所不同。所以在需求分析的階段,我們要做到基於不同行業的業務情況,分析資料指標需求,合理劃分主題,才能更好地為後續指標設計提供業務支撐。
指標設計
明確需求後,我們要進行指標體系構建的核心——指標設計,指標設計可分為基礎、組成、分類、落地這四個方面,下面我們就來詳細介紹:
● 指標設計基礎
針對業務需求現狀,明確指標的使用者,建立指標分層意識,按照從上往下的方式建立三層指標,層層分解,業務溯源。
● 指標設計組成
指標設計的組成包含維度、度量、統計週期及過濾條件。
● 指標設計分類
指標可分為原子指標、派生指標、符合指標和自定義指標。
● 指標設計落地
最終我們基於上面的方法論,將業務資料指標進行完整地規劃落地。
指標開發
設計明確後,我們就要進行指標的開發工作,真正將我們設計的指標邏輯落實到實處,有輸出有應用。指標開發整體包括開發指標和日常運維兩部分。
指標呈現
指標開發完就是指標的上層應用呈現了,也就是上文提到的【多次使用】,一個業務指標,可以根據不同的應用場景,呈現在業務使用的方方面面。
三、指標體系案例解析
在上文中我們介紹了指標體系建設的方法論,接下來我們將結合實際的專案來為大家分享指標體系建設如何在實際的專案中落地。首先我們為大家介紹下指標管理產品:
一站式指標綜合開發管理平臺(EasyIndex),覆蓋了指標規範定義到開發落地的過程,同時提供上層的綜合查詢、共享服務、取數分析等應用。消除資料的二義性,降低業務和技術的溝通成本,搭建企業級資料指標體系,沉澱企業指標資產,支撐業務場景分析,精準輔助決策。
接下來我們以某銀行客戶的案例,來為大家介紹指標體系建設的實際應用。
某銀行客戶在初期已完成底層數倉表的建設,但由於業務擴張,資料體量擴大,存在各種大量的資料計算,臨時取數的場景,同時存在一些零散的業務指標,需要基於不同的業務場景合理規劃雜亂的指標內容
● 客戶痛點
1、指標體系:指標定義混亂,沒有完整的指標規劃體系,存在同名不同義、同義不同名等情況
2、指標開發:業務取數需求頻繁,資料開發每天需要做大量的臨時取數工作,開發資源緊張,開發門檻高,過程不可視
3、指標運維:資料計算任務單獨維護,無法保證計算結果
4、指標管理:不同部門的指標分散管理,重複建設,指標之間的關係不清晰無法溯源等
● 建設方案
1、構建完善的指標體系,合理規劃現有指標內容
2、提供一個便捷低開發門檻的開發方式,提高指標開發效率
3、提供一個統一串起來的排程運維入口
4、提供一個統一的指標開放平臺,能夠看到當前所有的指標資產
● 建設流程
1、需求分析階段
業務需求調研,瞭解指標搭建的具體業務使用場景,和業務就整體的搭建思路進行溝通
2、指標設計階段
圍繞著業務場景,按照原子、派生、複合的建設方法論,進行指標的設計,評審通過後落地
3、指標開發階段
進行資料探查和清洗,明確指標設計對應的具體資料邏輯,對指標進行開發,落地指標計算結果
4、指標驗證階段
對於開發完成的指標進行驗證,包括邏輯一致性的驗證,資料準確性的驗證,場景適用度的驗證
5、指標上線應用
上線驗證完成的指標內容,提供指標服務供業務系統獲取指標資料,在使用過程中不斷迭代指標
● 業務效果
1、績效考核指標資產沉澱
-
4大主題分類,包括存款業務、貸款業務、理財業務、網路金融
-
5大主題物件,圍繞著賬號、客戶、客戶經理、機構、產品五大物件進行的指標體系設計
-
300+指標資產的沉澱輸出
-
75%的臨時取數覆蓋率,釋放了開發資源
-
開發效率的提高,10個指標的開發時間平均從5人天縮短到1人天,結果複用率提高
2、指標服務提供給業務系統的指標來源
-
20+指標API提供服務供上層業務系統呼叫獲取指標資訊
-
業務門戶展示指標資產
- 他來了!袋鼠雲大資料基礎平臺EasyMR正式上線
- ChunJun&OceanBase聯合方案首次釋出:構建一體化資料整合方案
- 開源專案丨ChengYing 1.1版本重磅釋出:新增超多功能,全新優化體驗!
- 開源交流丨一站式大資料平臺運維管家ChengYing安裝原理剖析
- 終於有人把不同標籤的加工內容與落庫講明白了丨DTVision分析洞察篇
- ChunJun Meetup演講分享 | 基於袋鼠雲開源框架的數倉一體化建設探索
- 開源交流丨任務or例項 詳解大資料DAG排程系統Taier任務排程
- 從Multirepo到Monorepo 袋鼠雲數棧前端研發效率提升探索之路
- 袋鼠雲思樞:數棧DTinsight,創新升級,全新出發,駛入數智轉型新賽道
- 開源交流丨批流一體資料整合框架ChunJun資料傳輸模組詳解分享
- Hi,我是ChunJun,一個有趣好用的開源專案
- 袋鼠雲申杭:數雁EasyDigit,致力成為金融行業資料洞察平臺供應商的“領頭雁”
- 開源專案丨一文詳解一站式大資料平臺運維管家ChengYing如何部署Hadoop叢集
- 從洞察到決策,一文解讀標籤畫像體系建設方法論丨DTVision分析洞察篇
- 想要精準營銷,從學習搭建一套對的標籤體系開始丨DTVision分析洞察篇
- 袋鼠雲思樞:數駒DTengine,助力企業構建高效的流批一體資料湖計算平臺
- DataOps不是工具,而是幫助企業實現資料價值的最佳實踐
- 開源專案丨Taier1.2版本釋出,新增工作流、租戶繫結簡化等多項功能
- 當我們在聊「開源大資料排程系統Taier」的資料開發功能時,到底在討論什麼?
- 開源交流丨批流一體資料整合工具ChunJun同步Hive事務表原理詳解及實戰分享