HENGSHI SENSE 4.3 發布,BI PaaS 再升級

引言|智能源于數據,AI 助推 BI
人工智能的拐點或許已經來到,這不是因為 GPT 技術線的成熟,而是因為由其帶來的共識。
業界共識才是工程創新真正的推動條件,當有技術路線的階段性成果成為共識,資源的投入就會迅速趨于集中,后面獲得突破的基礎概率就會暴增。這就好像有人確定性告訴你一道題是可解的,你的破解策略馬上就不同了,因為你本來要花費大量的精力去驗證可行性,畢竟大多數情況下題本身就是錯的,這才是 ChatGPT 真正的意義,即給到業界一個相對確定性的方向,相比于其他更不明朗的方向而言。
但是當我們把眼光聚焦當下,就還是得現實一些,任何智能的訓練模型都誕生于優質的數據集,我們離智能化的階段,依然得務實的走過業務數字化和過程數據化的階段,我們很多行業的客戶,第一步都還沒有邁出呢,因此企業軟件和服務市場的主流節奏并沒有改變,依然是傳統行業的數字化轉型。
有觀點認為,ChatGPT 會讓 BI 消失,這是因為把 BI 錯誤的理解為一個技術項。我們有時會認為從 BI 到 AI 是一個跨越和進步,但實際上,BI(Business Intelligence)才是愿景和目的,我們追求的并不是技術成果,而是商業成果,商業智能意味為更精準、更有預測性、更有擴展性的現代化企業運營狀態,因此 AI 才是通向 BI 的路徑。隨著 AI 技術在接下來幾年內的普及和形成共識,基于 AI 技術支撐的商業智能,才將真正成為現實,這才是商業智能的春天。
創新概述
指標中臺能力|給業務人員的分析視角
衡石在過去三年的商業化進程中,陸續服務了過百家 SaaS 和 ISV 的伙伴,我們非常欣喜地看到大家都開啟了一個新階段:零代碼的靈活滿足客戶在數據報表和分析指標上的個性化需求。這極大的提升了客戶的滿意度,同時保護了在產研和服務成本上的過量投入,做到了降本增效。
下一個階段,則是將數據分析的能力如何低門檻的暴露給 SaaS 伙伴的客戶,這需要進一步降低分析的門檻。我們設計指標管理的能力,是因為從業務的視角更加友好,去掉數據和 BI 分析的相關技術概念,只需要關注業務層面的語言,讓分析的起點從數據變成業務指標體系。
在基于指標的能力加持下,分析工作更加分明的形成兩個部分,一部分是基于數據敏捷構建業務指標庫,另一部分則是基于業務指標庫靈活構建看板。后面這部分,不管是開放給業務側自助分析,還是開放給客戶側自助分析,以及后面我們演變為更加智能化的生成式看板,都做好了往前一步的基礎準備。
數據虛擬化|更符合 ELT 架構要求的簡化演變
HENGSHI SENSE 的使用路徑里沒有明確的數倉痕跡,但在各種功能下面用到了數倉的全套能力,也就是說我們刻意不暴露一個數據倉庫的概念,客戶對此幾乎沒有感知。HENGSHI SENSE 將優秀的數倉平臺產品視作一種必須的能力,自然的在功能里按需引用,這是衡石理解的數據虛擬化。我們支持適配主流的各種最先進的數據計算平臺,盡量發揮每一種平臺的獨特優勢,并努力不將這種管理壓力和復雜度上傳到業務使用方。
這樣的演變基于一個客觀原因,ELT 架構的要求下分析工作更多的后置到了指標管理層(更偏業務導向),而不再是數倉傳統的 ETL 階段(更偏 IT 導向)。前面的數倉更多是專注發揮兩大核心作用,匯集多源異構數據和承載即時分析的運算下推壓力。這對于上層客戶視角而言,壓力減輕很多,理解起來也容易了很多。
數據虛擬化是為了理解上的簡潔,當客戶想要建立一個企業級的數據分析和 BI 看板流程(甚至是構建一個數據中臺),基于衡石平臺需要做的工作僅僅是:梳理必要的業務數據來源進行連接,定義好數據和數據之間的關聯關系,定義和維護要關注的業務指標,創建看板發布出去。這樣是不是清爽了很多?
亮點功能一覽
HENGSHI SENSE 4.3 發布了。該版本在指標中臺、數據填報、數據連接、可視化分析、嵌入分享、租戶管理、任務管理等方面增加了很多亮點功能。下面讓我們一起來了解這些新功能:
指標中臺
數據填報
數據連接
數據管理
可視化分析
嵌入分享
租戶管理
應用管理
系統管理
指標中臺
HENGSHI SENSE 指標中臺服務基于指標能力快速構建業務指標體系,對業務指標進行中心化管理, 并通過預置指標分析模板和業務場景結合快速形成業務指標分析看板。指標中臺大幅降低了數據分析成本和使用門檻。
業務指標中心化管理
真正面對業務變化的部分在于指標的計算邏輯的靈活定義,能夠把這部分通過公式的形態做好集中管理,加強指標的表達能力,就可以在不進行大量預計算的前提下實現業務指標體系的建設。
HENGSHI SENSE 4.3 搭建了業務指標體系,對指標進行統一的創建、管理。指標使用公式進行定義,可增設維度信息構建不同的業務分析場景,對多指標建立關聯提升分析效率。
業務指標創建包括指標定義和指標配置。使用公式進行指標定義,可包含字段、參數、用戶屬性。配置時可設置以下選項:
- 設置指標限定條件,生成特定條件下的業務指標。
- 定義分析維度,形成特定業務場景下的指標,根據維度進行業務分析。
- 在路徑歸因中設置關聯指標,分析業務時對關聯指標一同進行分析。
基于指標的自助分析
用戶可以將反應業務變化的指標數據,通過可視化展示,來查看業務的變化,了解業務發展趨勢。HENGSHI SENSE 同步推出了自助分析模塊,為業務指標定制了可視化分析看板。內置多種業務指標模板,用戶拖拽業務指標到畫布區立即生成圖表,通過點選操作完成圖表類型切換,整個過程無需對指標數據進行再加工處理,操作簡單易上手。業務指標自助分析能力,對分析人員沒有數據建模能力的要求,降低了 BI 使用門檻,使更多用戶參與到數據分析中來。
自助分析看板操作簡單,拖拽指標即可生成圖表,同一指標通過點選操作可對不同業務場景分析。
- 支持多種圖表類型,可自由切換。
- 支持選擇指標以及其分析維度,系統將自動推薦維度最佳的圖表形式,展現該維度對指標的影響。
- 通過路徑歸因分析將所有關聯指標一鍵生成關聯圖表,揭示指標之間的影響。
- 支持多指標對比分析,同一圖表中可拖入多個指標進行分析。
數據填報
HENGSHI SENSE 4.3 增加數據填報模塊,提供數據錄入功能,收集并存儲數據到衡石數倉,結合平臺其他模塊一站式完成數據收集、數據建模、數據分析、可視化呈現等分析工作。
數據填報適用場景廣泛,如問卷調查、在線報名、目標設定、狀態統計、掃碼簽到等,其結構化數據入庫能力,可以收集業務場景中所有數據。
數據填報模塊擁有豐富的組件庫,提供了數字、文本、日期、單選、郵箱、手機、電話等常用的組件,零代碼搭建表單,降低使用門檻。錄入的數據以字段形式存儲,方便查看。
表單填報過程靈活可控。填報開啟后可隨時暫停填報,停止信息錄入;填報時可以實名收集信息,也支持匿名填報;可同時在 PC 、移動多端進行填報;支持使用鏈接、二維碼等多種形式進行表單分享。
數據連接
建表屬性實現數據分布設置
4.3 增加了建表屬性功能,在數據表創建過程中自定義分區字段和索引字段,對數據進行分散存儲,實現冷熱數據分區、數據均勻分布等功能。同時在數據讀取過程中可根據分區字段、索引字段快速查詢使用數據,提升數據查詢性能。
建表屬性適用數據集成輸出節點、批量同步輸出表、更新開啟加速引擎的數據集等場景。目前支持數據源有 Greenplum、Doris、ClickHouse、StarRocks 。
增加內置引擎類型
HENGSHI SENSE 提供內置加速引擎功能,用戶可以將數據導入引擎,提升數據處理速度。4.3 擴充加速引擎類型,在 Greenplum 基礎上增加了 Apache Doris。Doris 比 Greenplum 的數據查詢性能快,Greenplum 更加穩定,用戶根據數據處理的要求選擇合適的加速引擎。
擴展數據源種類
HENGSHI SENSE 不斷擴充數據源類型,4.3 迎來了人大金倉 KES、聚水潭和易倉 ERP,豐富了數據源種類。
流式同步擴展來源數據
流式同步來源數據連接在 MySQL 和 PostgreSQL 的基礎上,新增加對 Oracle 和 SQL Server 數據源的實時監聽、流式同步處理。
數據管理
數據模型添加過濾功能
數據模型建立關聯關系后,可以對模型設置過濾條件,獲取更精準的模型數據。過濾功能支持簡單條件過濾和表達式過濾。
數據集行列權限優化
數據集行列權限設置時對用戶信息進行嚴格檢查,沒有填寫用戶或用戶信息不正確,會給出提示信息,直到修改正確才能保存,避免設置無效規則。
可視化分析
動態樹支持動態層級信息
樹形過濾器用于展示固定層級關系的字段信息,如“國家-省份-城市”、“年-月-日”并進行過濾功能, 但是當層級關系動態變化時,如部門架構調整,三級部門變成四級部門,普通樹形過濾器無法識別這種變化,需要重建過濾器。基于此,4.3 推出了動態樹過濾器, 拖入本級字段和上級字段,建立動態父子層級關系。當數據結構的層級發生變化時,動態樹會自動跟隨結構層級變化,不用重新編輯。
日期過濾器優化
當日期過濾器使用范圍展示時,對日期開始和結束選項進行優化,兩個選項分開設置,滿足更多過濾場景。
- 僅設置開始日期,過濾出日期大于開始日期的數據。
- 僅設置結束日期,過濾出日期小于結束日期的數據。
- 同時設置開始、結束日期,過濾日期在開始和結束日期之間的數據。
- 開始日期、結束日期留空,不進行數據過濾。
畫布表格提升展示性能
4.3 增加畫布表格控件,與表格控件功能類似。畫布表格以整個圖表作為一個節點進行渲染,渲染速度快,性能好,用戶側重展示性能時可使用畫布表格。但畫布表格在樣式展示上相比表格缺少行列轉置、折疊展示、維度卷起、表頭過濾、圖片插入等功能,用戶側重展示樣式時應選擇表格控件。
表格維度上卷設置
表格維度列展示時,某些場景下僅需要展示維度列的最高層級,其他維度列需要的時候進行展開。表格增加維度列上卷層級設置功能滿足用戶使用場景。設置維度卷起層數,這些維度默認情況下不展示,需要時可通過下鉆按鈕逐層展示。
小計支持獨立計算
4.3 優化小計計算方式,支持小計獨立進行計算。小計是對度量信息按照某一維度或某幾個維度進行統計,小計的計算方式不一定和度量保持一致。如訂單信息的計算方式是求和,添加小計想識別出銷售訂單中最低的訂單金額。在小計計算方式中選擇最小值即可篩選出最低訂單金額。
嵌入分享
JS SDK 嵌入
HENGSHI SENSE 支持使用 iframe 對平臺進行分層級嵌入,包括平臺整體嵌入、單模塊嵌入、單應用嵌入、單圖表嵌入等。使用 iframe 嵌入時,瀏覽器會進行二次渲染,對性能有一定影響,當一個頁面嵌入多個圖表時,頁面加載速度變慢,影響展示效果。
為了更好地解決儀表盤和圖表的嵌入性能問題,HENGSHI SENSE 推出 JS SDK 嵌入,直接在嵌入頁面內進行繪制。每個嵌入頁面只加載一次靜態資源,當在同一頁面嵌入多個儀表盤或者圖表時,大大提升了渲染速度。JS SDK 嵌入時支持動態調整嵌入頁面的樣式和交互,使嵌入方式更加靈活。
租戶管理
優化租戶方數據連接分類展示
4.3 對租戶方的數據連接分類展示進行優化,將平臺授權的連接獨立出來,與企業連接并行展示,用戶能夠清晰的區分內部、外部數據,方便查找和使用數據。
租戶方支持使用平臺方圖表庫
4.3 將平臺的圖表庫功能開放給租戶使用。租戶在數據分析過程中可以直接引用平臺方圖表庫中的圖表,節省數據設計工作,提升了分析效率。
應用管理
應用暫停服務
當系統進行升級維護或故障處理,例如底層數據進行遷移時,部分已發布的應用會受到影響從而報錯,此時我們是不希望用戶訪問到相關的儀表盤的。針對這種情況 4.3 版本增加了應用暫停服務的功能。當系統進行維護時,對應用進行暫停服務,已發布的應用打開時會展示維護中等提示信息,讓用戶了解應用的狀態。當系統問題處理完可對應用恢復服務,用戶可以正常訪問應用。
深度搜索功能
我的創作界面中的搜索功能僅搜索當前路徑下的內容,不能深入到文件夾內部進行搜索,無法滿足用戶文件夾層級搜索需求。4.3 增加了深度搜索功能,該功能不僅可以在文件夾層級內逐層進行搜索,查找對應的內容,還可以進入應用內部,對儀表盤和數據集進行搜索匹配,實現多層級穿透搜索,快速定位到查找內容。數據集市、應用創作、應用集市都支持深度搜索。
此外,在應用內儀表盤頁面也增加了搜索功能,在應用內儀表盤較多時,可以使用搜索功能查找儀表盤。
系統管理
優化任務管理方式
4.3 之前任務調度僅支持定時調度,缺少任務之間依賴關系的設置,當任務越來越多、任務之間關系越來越復雜,會出現以下情況:
- 任務依賴關系管理困難,數據在前置依賴未完成情況下觸發更新了。
- 觸發時機相互沖突時,任務出現漏調度或重復調度。
- 當有錯誤數據更新時,數據重新更新成本較高。
HENGSHI SENSE 4.3 對任務調度進行以下優化,解決多任務調度問題。
- 增加前置任務依賴設置,可設置多個前置任務,設置任務的等待時間。
- 增加任務優先級設置,有效解決觸發沖突場景,支持動態調整優先級。
任務管理增加了 DAG 圖表,支持一鍵重跑。DAG 圖表展示了任務當前狀態、任務之間依賴關系圖和任務鏈中上下游任務運行情況。一鍵重跑快速啟動當前任務和下游任務。
結語
HENGSHI SENSE 4.3 探索了數據分析新領域,增加了指標中臺、數據填報兩大模塊,突破了嵌入場景的性能問題,解決了任務調度的依賴管理關系,優化了應用管理策略,還有更多貼心的用戶體驗提升,歡迎來試用!
HENGSHI SENSE 4.4 正在萌發生長,繼續夯實數據分析底層計算能力,構建數據分析上層業務場景。更多精彩功能,敬請期待!
