低代碼指標(biāo)平臺(tái)，構(gòu)建人人可用的敏捷指標(biāo)工具（低代碼啥意思）

導(dǎo)讀 在現(xiàn)代數(shù)據(jù)服務(wù)體系中，指標(biāo)平臺(tái)或者說基于指標(biāo)的服務(wù)和應(yīng)用是其中關(guān)鍵的要素之一。麥肯錫《2025數(shù)據(jù)驅(qū)動(dòng)企業(yè)》報(bào)告當(dāng)中有一個(gè)重要觀點(diǎn)：到 2025 年，絕大多數(shù)人將會(huì)使用數(shù)據(jù)來優(yōu)化他們工作的幾乎各個(gè)方面。這里的“絕大多數(shù)人”，不僅包括業(yè)務(wù)決策人員，也有數(shù)據(jù)分析師和工程師等，而大家所在的行業(yè)領(lǐng)域以及相關(guān)的背景、經(jīng)驗(yàn)和技術(shù)程度都有所不同，因此低代碼和低代碼所衍生出的自動(dòng)化就有著重要的價(jià)值。本文將從指標(biāo)平臺(tái)應(yīng)用建設(shè)的角度，分享如何發(fā)揮低代碼的作用，去構(gòu)建人人可用的敏捷指標(biāo)工具。

主要內(nèi)容包括以下幾大部分：

1. 數(shù)字化轉(zhuǎn)型與指標(biāo)建設(shè)的挑戰(zhàn)：低效價(jià)值轉(zhuǎn)化

2. Kyligence Zen 一站式指標(biāo)平臺(tái)

3. 低代碼指標(biāo)服務(wù)的核心價(jià)值

4. 從數(shù)據(jù)驅(qū)動(dòng)到指標(biāo)驅(qū)動(dòng)

分享嘉賓｜宗正 Kyligence 資深技術(shù)布道師

編輯整理｜楊文鑄 哈爾濱理工大學(xué)

出品社區(qū)｜DataFun

01

數(shù)字化轉(zhuǎn)型與指標(biāo)建設(shè)的挑戰(zhàn)：低效價(jià)值轉(zhuǎn)化

很多行業(yè)和領(lǐng)域的企業(yè)都在建設(shè)自身的指標(biāo)平臺(tái)或以指標(biāo)為核心的數(shù)據(jù)應(yīng)用，在此過程中不可避免地會(huì)遇到一些問題。

我們先轉(zhuǎn)到數(shù)據(jù)治理的視角來看，指標(biāo)其實(shí)是一個(gè)通用的數(shù)據(jù)語言，可以跨越人和人之間以及人和數(shù)據(jù)之間的溝通。

（1）數(shù)倉/數(shù)據(jù)湖的架構(gòu)范式

無論是數(shù)倉還是云上數(shù)據(jù)湖的建設(shè)，已經(jīng)從數(shù)據(jù)歸集轉(zhuǎn)變?yōu)閿?shù)據(jù)聯(lián)結(jié)的模式。首先，數(shù)據(jù)采集可能來自于不同的源頭如各種傳感器等；另外，各種上云的業(yè)務(wù)受制于數(shù)據(jù)傳輸?shù)脑埔?guī)范或合規(guī)要求，因此各個(gè)平臺(tái)之間或者說各個(gè)數(shù)據(jù)應(yīng)用之間需要有一個(gè)通用的溝通方式。這種溝通方式不僅僅是跨越數(shù)據(jù)應(yīng)用的，也是在不同角色之間的一個(gè)通用交流方式。這種交流方式其實(shí)是為了我們更好地聚焦到指標(biāo)上。

（2）聚焦指標(biāo)

過去的溝通更多的是以報(bào)表為載體，但對(duì)于業(yè)務(wù)人員來說，可能對(duì)一張表或者一份數(shù)據(jù)并沒有特別的感知。而以指標(biāo)形式呈現(xiàn)出來的數(shù)字立刻就會(huì)有一種親切感，助力相關(guān)人員更快更準(zhǔn)確地做出決策。

（3）可信和效率

如果以指標(biāo)作為通用數(shù)據(jù)語言，那么可信和效率就會(huì)變得尤為關(guān)鍵。因?yàn)閷?duì)于指標(biāo)來說，最終是以單個(gè)或者多個(gè)數(shù)字來呈現(xiàn)的，這些數(shù)字背后的計(jì)算邏輯、計(jì)算口徑、是否來自于可信數(shù)據(jù)源、整個(gè)數(shù)據(jù)處理鏈路是不是被各方接受等等，是這個(gè)最終指標(biāo)結(jié)果數(shù)值是否可信的基礎(chǔ)。而整個(gè)協(xié)作和數(shù)據(jù)鏈路中的效率也是非常關(guān)鍵的，有很多指標(biāo)具有一定的時(shí)效性，過期之后就失去了其作用。

接下來就回頭看一下數(shù)字化轉(zhuǎn)型和指標(biāo)建設(shè)中所面臨的挑戰(zhàn)。

1. 指標(biāo)孤島

我們經(jīng)常會(huì)聽到數(shù)據(jù)孤島，實(shí)際上指標(biāo)也會(huì)存在孤島的情況。

從上圖左邊可以看到，過去大量的指標(biāo)建設(shè)和應(yīng)用的過程都會(huì)直接把指標(biāo)落在 BI 報(bào)表/數(shù)據(jù)應(yīng)用分析工具上，或者說大量的指標(biāo)會(huì)散落在整個(gè) ETL 處理鏈路上。在不同的分析工具如 SaaS、自研 BI 應(yīng)用之中存在著很多相同的指標(biāo)，但這些指標(biāo)可能來自于不同的數(shù)據(jù)源，其計(jì)算口徑可能不一樣，計(jì)算邏輯可能跨越了多個(gè)寬表，一些計(jì)算方式可能會(huì)因?yàn)榫S護(hù)不到位而丟失，最終就很難判定在哪個(gè)平臺(tái)上的指標(biāo)是最可信的。

而整個(gè)趨勢(shì)就是從指標(biāo)孤島轉(zhuǎn)變?yōu)榻ㄔO(shè)統(tǒng)一指標(biāo)目錄：這個(gè)指標(biāo)目錄就類似于圖中右側(cè)所展示的，對(duì)于終端應(yīng)用或平臺(tái)所使用的指標(biāo)，抽取其定義和計(jì)算口徑，統(tǒng)一放在一個(gè)指標(biāo)目錄中。

2. 低效價(jià)值轉(zhuǎn)化

剛才的問題是在一個(gè)切面上，現(xiàn)在我們把視角拉到整個(gè)數(shù)據(jù)處理的鏈路上。過去從業(yè)務(wù)方提出需求開始，到最終一些有價(jià)值的內(nèi)容可以回饋給業(yè)務(wù)方，會(huì)經(jīng)歷一個(gè)相當(dāng)長的過程，數(shù)據(jù)價(jià)值轉(zhuǎn)化的效率很低，而且很可能會(huì)發(fā)生復(fù)用不足、成本居高不下的情況。

下面以一個(gè)實(shí)際的例子來說明，這是我們和一家頭部股份制銀行開展的基于用戶行為分析的場(chǎng)景建設(shè)指標(biāo)平臺(tái)的過程。

圖中可以看到，上下兩個(gè)流程中參與的角色都是類似的，有業(yè)務(wù)方和 IT 方。在過去常規(guī)的流程下，業(yè)務(wù)方提出指標(biāo)需求，IT 方需要去做大量的需求溝通，接下來是很長一段時(shí)間的指標(biāo)開發(fā)，最終呈現(xiàn)的載體是報(bào)表，將來有新的指標(biāo)開發(fā)又會(huì)是一張新的報(bào)表。整個(gè)過程的復(fù)用性和效率都很低。

換一種方式，在業(yè)務(wù)方提出需求后，如果有一個(gè)指標(biāo)目錄作為載體，基礎(chǔ)指標(biāo)已經(jīng)存在，衍生指標(biāo)可以通過對(duì)基礎(chǔ)指標(biāo)二次加工得到，所以可能實(shí)際只有極少數(shù)的指標(biāo)需要開發(fā)，這樣就可以很好地控制成本。而最終的產(chǎn)出從報(bào)表回到了指標(biāo)目錄上，也就是說，大家集中精力不斷迭代更新當(dāng)前的指標(biāo)目錄，從而使其可以滿足更多的業(yè)務(wù)要求。上層的消費(fèi)端不管是 BI 工具、表、報(bào)表還是 SaaS 等都可以直接調(diào)取指標(biāo)目錄中統(tǒng)一管理的指標(biāo)。這樣業(yè)務(wù)也可以很好地參與進(jìn)來，也就是我們常常聽到的“人人都是分析師”。

在這樣的平臺(tái)建設(shè)下，經(jīng)過兩年左右的時(shí)間已經(jīng)取得了非常顯著的成果，以指標(biāo)為基礎(chǔ)，可以看到活躍指標(biāo)數(shù)、分析維度有了顯著的提升。最終指標(biāo)的開發(fā)周期明顯縮短、查詢性能有效提高，同時(shí)也通過指標(biāo)復(fù)用等大幅提升了整體工作效率。

02

Kyligence Zen 一站式指標(biāo)平臺(tái)

基于前文中提到的問題和挑戰(zhàn)，我們一起來看一下什么樣的指標(biāo)平臺(tái)可以做到很好的承接。

1. 指標(biāo)平臺(tái)的介紹

指標(biāo)平臺(tái)通過指標(biāo)來驅(qū)動(dòng)管理與決策，它是集業(yè)務(wù)模型、指標(biāo)管理、指標(biāo)加工和數(shù)據(jù)服務(wù)于一體的完整解決方案。

指標(biāo)平臺(tái)可以分為兩大部分：第一部分是指標(biāo)應(yīng)用，包括指標(biāo)定義、口徑計(jì)算管理等，這部分是以界面的形式開放出來的，通過自助的、低代碼的形式；第二部分是計(jì)算引擎，指標(biāo)模型涉及的數(shù)據(jù)計(jì)算、加工等都需要計(jì)算引擎來承擔(dān)，以自動(dòng)化、無感知的形式呈現(xiàn)。即在界面上對(duì)指標(biāo)進(jìn)行定義和管理時(shí)，平臺(tái)自動(dòng)化地完成了大量背后的建模動(dòng)作。

Kyligence Zen 一站式指標(biāo)平臺(tái)就具備了這樣的核心要素。從下圖可以看到，第一部分就是前面提到的指標(biāo)目錄，在指標(biāo)目錄之下可以做到指標(biāo)自動(dòng)化、指標(biāo)治理，從而實(shí)現(xiàn)了以低代碼自助式的形式開放給業(yè)務(wù)用戶以及數(shù)據(jù)工程師。

2. Kyligence Zen 關(guān)鍵能力和核心價(jià)值

（1）指標(biāo)目錄

下圖是 Kyligence Zen 的主體界面，可以看到，它不再是以表的形式呈現(xiàn)，而是通過業(yè)務(wù)人員直接可以感知到的指標(biāo)名稱、指標(biāo)數(shù)值、以及簡單圖例來呈現(xiàn)。在右邊的列表中可以看到一些基礎(chǔ)指標(biāo)，也有基于基礎(chǔ)指標(biāo)的衍生指標(biāo)，整個(gè)指標(biāo)目錄聚焦于指標(biāo)之上，自動(dòng)化地呈現(xiàn)和管理一個(gè)指標(biāo)體系，這樣的指標(biāo)體系對(duì)業(yè)務(wù)人員是非常友好的，能夠高效地賦能業(yè)務(wù)自主用數(shù)。

（2）歸因分析

當(dāng)然，指標(biāo)目錄只是一個(gè)載體。不同的指標(biāo)可以做不同維度的洞察，而這些洞察中很關(guān)鍵的就是當(dāng)指標(biāo)有異動(dòng)的時(shí)候需要去做歸因分析。過去我們做歸因分析需要和業(yè)務(wù)溝通、進(jìn)而由數(shù)據(jù)工程師去建模、多維度的匹配判定、以及繁瑣的取數(shù)計(jì)算等，一旦關(guān)注的維度、時(shí)間周期發(fā)生變化，整套流程就需要重新構(gòu)建。

現(xiàn)在在下圖界面中可以看到，比如對(duì)于關(guān)注的凈利潤指標(biāo)，只需給出時(shí)間區(qū)間和關(guān)注的維度等，平臺(tái)就可以快速自動(dòng)化地為業(yè)務(wù)方給出按不同維度的歸因分析報(bào)告，幫助他們更精準(zhǔn)、更快速地決策。

（3）指標(biāo)自動(dòng)化

再來看一下活躍客戶數(shù)的例子。統(tǒng)計(jì)活躍客戶數(shù)需要做去重的操作，當(dāng)數(shù)據(jù)量較大時(shí)會(huì)是非常耗時(shí)的。這里我們可以引入緩存，對(duì)非常關(guān)注的、有價(jià)值的、可能經(jīng)常使用相對(duì)熱門的指標(biāo)進(jìn)行自動(dòng)加速，這個(gè)加速過程是通過計(jì)算引擎來實(shí)現(xiàn)的，包括對(duì)應(yīng)模型建立、索引匹配和優(yōu)化等。而在界面上只需要進(jìn)行相應(yīng)的點(diǎn)選就可以，這也是低代碼的重要體現(xiàn)。

（4）目標(biāo)管理

上面更多是為業(yè)務(wù)分析師、數(shù)據(jù)工程師服務(wù)的一些能力，接下來從決策方的角度來看下。決策方更關(guān)注的是指標(biāo)帶來的價(jià)值是否與業(yè)務(wù)目標(biāo)相匹配。

Kyligence Zen 中引入了目標(biāo)管理，這也是我們認(rèn)為非常重要的指標(biāo)管理的方向。因?yàn)橹笜?biāo)需要和業(yè)務(wù)目標(biāo)關(guān)聯(lián)起來，并且能夠去主動(dòng)識(shí)別它的狀態(tài)、風(fēng)險(xiǎn)，并進(jìn)行相應(yīng)的預(yù)警，這樣的指標(biāo)應(yīng)用才能發(fā)揮其在決策層面的價(jià)值。

（5）開放 APIs

指標(biāo)平臺(tái)如果要和內(nèi)部其它應(yīng)用實(shí)現(xiàn)鏈路上的打通、做集成，就需要非常良好的開放能力。這種開放能力不僅包括界面上所展示的，所有功能以標(biāo)準(zhǔn) API 形式開放，也包括與已經(jīng)形成固有習(xí)慣的消費(fèi)端的融合，比如對(duì)接 Excel、WPS 等，在充分保留習(xí)慣的基礎(chǔ)上去增強(qiáng)現(xiàn)有的分析方式。

（6）總結(jié)

通過以上介紹可以看到，涉及到的功能和場(chǎng)景在 Kyligence Zen 指標(biāo)平臺(tái)上都是通過自助式的方式去完成，實(shí)現(xiàn)了以低代碼的服務(wù)去賦能指標(biāo)平臺(tái)，助力提升從數(shù)據(jù)到?jīng)Q策的時(shí)效性。其優(yōu)勢(shì)可以總結(jié)為：

① 高效率交付指標(biāo)：對(duì)于數(shù)據(jù)生產(chǎn)方，比如數(shù)據(jù)工程師角色，門檻可以大幅降低，IT 團(tuán)隊(duì)和業(yè)務(wù)方之間的溝通是以更形象的數(shù)據(jù)指標(biāo)目錄的形式來實(shí)現(xiàn)，可以更快地將價(jià)值交付于業(yè)務(wù)方，整個(gè)數(shù)據(jù)加工鏈路也可以大幅簡化；

② 自助式消費(fèi)指標(biāo)：業(yè)務(wù)團(tuán)隊(duì)可以自助式的消費(fèi)指標(biāo)，大幅減少對(duì)數(shù)據(jù) IT 團(tuán)隊(duì)的依賴，快速高效輸出可信洞察和決策；

③ 體系化管理指標(biāo)：從運(yùn)維和管理的角度，通過體系化的數(shù)據(jù)指標(biāo)目錄進(jìn)行統(tǒng)一口徑管理及復(fù)用，避免重復(fù)建設(shè)和資源耗費(fèi)，提升數(shù)據(jù)價(jià)值轉(zhuǎn)化率。

03

低代碼指標(biāo)服務(wù)的核心價(jià)值

通過上述內(nèi)容，我們看到了非常多的低代碼和自動(dòng)化的呈現(xiàn)，接下來我們繼續(xù)深入探討這兩方面。

1. 低代碼服務(wù)

指標(biāo)平臺(tái)通常對(duì)應(yīng)多方角色：

（1）一方是業(yè)務(wù)，包括決策人員、一線業(yè)務(wù)人員和業(yè)務(wù)分析師等；

（2）一方是數(shù)據(jù)團(tuán)隊(duì)，包括數(shù)據(jù)工程師等。

指標(biāo)平臺(tái)通過低代碼的服務(wù)，將技術(shù)表達(dá)轉(zhuǎn)換到了業(yè)務(wù)表達(dá)。過去我們以表、報(bào)表為基礎(chǔ)，需要手工處理大量模型；現(xiàn)在則聚焦于指標(biāo)。過去我們以表、報(bào)表來作為數(shù)據(jù)運(yùn)作中的核心要素；而現(xiàn)在更細(xì)粒度地去看，指標(biāo)才是數(shù)據(jù)處理鏈路上最核心的資產(chǎn)。

指標(biāo)對(duì)業(yè)務(wù)人員來說更具親和力，可以讓決策層基于數(shù)據(jù)感知更快地做出決策，幫助業(yè)務(wù)團(tuán)隊(duì)提升數(shù)據(jù)解讀能力；而對(duì)于數(shù)據(jù)團(tuán)隊(duì)而言，可以減少重復(fù)性生產(chǎn)，降低建模門檻，充分發(fā)揮生產(chǎn)力，降低數(shù)據(jù)開發(fā)成本，從而為業(yè)務(wù)和數(shù)據(jù)團(tuán)隊(duì)帶來“雙贏”。

2. 自動(dòng)化服務(wù)

前面提到，指標(biāo)平臺(tái)的上層是指標(biāo)應(yīng)用，下層是計(jì)算引擎。在 Kyligence Zen 上所對(duì)接的是以 Apache Kylin 為核心的商用化的 Kyligence OLAP 引擎。

如下圖所示，左邊以數(shù)據(jù)團(tuán)隊(duì)為源頭進(jìn)行數(shù)據(jù)的加工，右邊業(yè)務(wù)團(tuán)隊(duì)去消費(fèi)指標(biāo)。中間過程實(shí)際上是業(yè)務(wù)和數(shù)據(jù)團(tuán)隊(duì)最多的聯(lián)動(dòng)點(diǎn)，通過低代碼、自動(dòng)化的方式，業(yè)務(wù)人員可以以熟悉的方式看到指標(biāo)，并通過自助點(diǎn)選基礎(chǔ)指標(biāo)去生成衍生、復(fù)合指標(biāo)，而不需要再把需求二次給到數(shù)據(jù)團(tuán)隊(duì)；而數(shù)據(jù)團(tuán)隊(duì)通過多維 OLAP 引擎來承載指標(biāo)目錄的建設(shè)，包括指標(biāo)相關(guān)的建模、歸因分析需要的模型加工、模型關(guān)聯(lián)等、以及根據(jù)主動(dòng)元數(shù)據(jù)分析熱門指標(biāo)、高價(jià)值指標(biāo)和低效指標(biāo)等的優(yōu)化管理，這些都可以通過簡單配置方式來實(shí)現(xiàn)，從而有效降低重復(fù)的、低附加值的工作，提高生產(chǎn)力。

04

從數(shù)據(jù)驅(qū)動(dòng)到指標(biāo)驅(qū)動(dòng)

我們很有幸和大家一起看到這個(gè)時(shí)代經(jīng)歷的非常多的變化，這也包括在數(shù)據(jù)服務(wù)體系中，指標(biāo)服務(wù)正在從以表和報(bào)表為基礎(chǔ)的數(shù)據(jù)驅(qū)動(dòng)轉(zhuǎn)向?yàn)橹笜?biāo)驅(qū)動(dòng)。

下圖中可以看到數(shù)據(jù)驅(qū)動(dòng)和指標(biāo)驅(qū)動(dòng)的對(duì)比。面對(duì)表，業(yè)務(wù)人員可能并不知道下一步要做什么，對(duì)數(shù)據(jù)分析師來說要做大量的建模、ETL 工作；而基于 Kyligence Zen 一站式指標(biāo)平臺(tái)，業(yè)務(wù)人員可以輕松使用指標(biāo)，完成業(yè)務(wù)決策。

我們聚焦在指標(biāo)之上，因?yàn)橹笜?biāo)是從數(shù)據(jù)到業(yè)務(wù)洞察、決策的最佳通道，是對(duì)于業(yè)務(wù)團(tuán)隊(duì)最親切的數(shù)據(jù)呈現(xiàn)形式，最終通過指標(biāo)平臺(tái)的驅(qū)動(dòng)以低代碼、自助化的方式對(duì)接到計(jì)算引擎，充分發(fā)揮數(shù)據(jù)和 IT 團(tuán)隊(duì)生產(chǎn)力，高效挖掘數(shù)據(jù)價(jià)值。

以上就是本次分享的內(nèi)容，也歡迎大家來試用和體驗(yàn) Kyligence Zen，謝謝大家！