BI PaaS 如何賦能伙伴成為“垂直 BI 廠商?”
導讀
近期，衡石成功舉辦了 HENGSHI SENSE 4.2 新版本發布線上分享會，分享會上衡石 CEO 劉誠忠及衡石首席數據科學家陳家耀圍繞整個數據分析產業的發展、行業趨勢和衡石的創新進行深度探討和分享。本期推文我們就先來看看衡石 CEO 劉誠忠帶來的《Powered by BI PaaS - 讓商業分析即刻上線》分享。
為賦能伙伴而生的 BI PaaS
衡石近期發布了 4.2 新版本，此次發版更加明確提出了 BI PaaS 的定位，這也是業內極具差異化創新的產品形態。實際上在今年 4.0 版本發布后，這個定位已經陸續在衡石與目前數百家 SaaS 和軟件 ISV 伙伴的合作中得到驗證。
數據分析產業的核心矛盾
下圖呈現的是經典的數據分析和 BI 架構，數據通常通過 ETL 到達數倉，做完各種建模和轉換，再通過 BI 工具進行報表分析。但當前的趨勢是，商務運營端介入到數據分析的階段會越來越深入，這就對數據分析的靈活性提出了高要求。這與 BI 經典架構存在很大的矛盾。
數據分析產業的核心目標
企業遭遇的挑戰是如何真正降低業務人員的分析門檻。其中有兩個比較核心的點。一是業務人員通常不具備 IT 背景，這就要求 BI 產品必須對業務人員使用友好，需要適配運營的靈活性，更加貼合業務的場景化分析；二是在云端和大數據的發展下，數據環境和來源更加多樣，數據底層越來越復雜。所以在數據分析中，既要搞定底層數據的環境復雜性又不能影響到對業務的友好性，這是兩個很高的挑戰，并且相互矛盾。從中美的企業服務市場來看，兩邊在如何應對挑戰的路徑上有很大的差異性。
美國是通過工具的生態分層來應對這個核心挑戰。首先在 BI 可視化層面，這些 BI 工具越來越傾向于對業務友好、自助分析、開箱即用的形態；在中間層，類似 Looker、DBT、Transform 等語義層、數據管道、指標集市工具互相配合，補充運營能力的短板，讓業務人員能進入到分析過程中；在基礎框架層，美國的 BI 廠商基于 Snowflake、Databricks 等新一代云原生的數據基礎設施來屏蔽數據環境的復雜性，也大幅降低了運算成本。
但在國內，一方面缺乏成熟完善的云原生數倉生態，這意味著作為分析平臺的廠商，經常需要自己去應對這方面的要求；另一方面，國內還沒有足夠豐富的產品生態互相打配合，中國的企服市場還是一個以解決方案為主流的市場，工具廠商的生態還沒有發展起來 ，當然近五年來已經大有進步了。
這意味著衡石在當下服務客戶需要構建端到端的產品，覆蓋全棧的分析管道，才能同時應對這兩個層面的要求：既對業務足夠友好，又能應對數據環境的復雜性。另外對運營和指標的重視，也需要體現在產品的進化中，因此在國內做這個事情其實是面臨比在美國更大挑戰。
HENGSHI SENSE BI PaaS 架構的形成
在數年的產品打磨中，衡石始終圍繞“做專業伙伴的 BI 引擎”進行產品研發和迭代，HENGSHI SENSE 最終形成如上圖呈現的一站式架構：從數據的多源異構，到中間虛擬湖倉（湖倉一體的管理框架），再到語義建模層，最后到可規模化的數據服務，BI 是數據服務中的一種。
首先，衡石通過自研具有強大表達能力的分析語義層，實現 ELT+Embed 的現代分析架構，將分析與數據解耦，規避經典 BI 架構中業務人員過于依賴 ETL 數倉的問題，降低 ETL 的工作量。當然，HENGSHI SENSE 并沒有拋棄傳統的 ETL，而是 ETL 和 ELT 相結合，這種模式最大的創新在于能夠讓業務人員真正參與到分析過程中，滿足業務對于分析靈活性的要求。
其次，由于國內沒有成熟的如 Snowflake 這樣的框架性產品，衡石重度投入創新架構 in-datalake（內置虛擬湖倉）的研發，對應用層面呈現完整的數倉能力，屏蔽底層復雜的數據環境，多源異構的數據也能夠在 HENGSHI SENSE 中輕松整合，并且能夠實時同步和加速，彈性應對計算的算力要求。此外，衡石科技與國內優秀的新一代云數倉廠商一直保持深度的產研合作，后期會適配引入各種云原生的數倉能力。
第三，對指標的高度重視是全球分析的主流趨勢，衡石自研了中心化的指標管理模塊，在 BI 工具的形態之外對外呈現指標中臺的形態，讓運營人員得到充分發揮，這個其實是整個 BI 產業對互聯網大廠的敏捷指標以及相關的運營方法論的一次集中學習。
最后，HENGSHI SENSE 是一個端到端架構，通過這樣的架構把 PaaS 級平臺與各行業 SaaS/ISV 產品結合，讓數據分析在各垂直場景高效落地。衡石只專注于提供數據能力，擁有行業 know-how 的 SaaS/ISV 廠商基于 HENGSHI SENSE，搭建出貼合業務的應用場景方案。
這種合作模式，最終讓客戶在業務場景中可以快速直接的開展探索，對于 SaaS/ISV 伙伴來說節省巨大的研發成本，也節省大量的開發周期，對于衡石來說可以專注于做好通用的標準化產品。這是一個邊界清晰且多方共贏的新型供給關系，也改變了整個數據分析的場景體驗，有利于推動數據分析和 BI 快速普及到各種行業，幫助客戶加速數字化轉型的進程。
Powered by HENGSHI BI PaaS
數據分析是行業 Know-How 高度相關的業務領域高級工作。衡石一直秉承一個明確的“Powered by HENGSHI ”的合作理念，讓行業的歸行業，數據的歸數據，賦能每一家 SaaS 和 ISV 廠商都能成為“垂直 BI 廠商”，成為專業領域內的“分析場景”解決方案提供商。
如何定義 BI PaaS ？
PaaS 層產品是多個能力的組合，在某個領域內不需要開發去應對個性化的需求。HENGSHI SENSE BI PaaS 是一個在數據分析和 BI 應用的全棧數據能力組合，主要包含了：
-
數據多源的適配和運算下推。在4.2的版本中，不管是 Mongo 的原生語法、Clickhouse 的物化視圖，還是部分 SaaS 應用 API，HENGSHI SENSE 都做了適配
-
數據歸集的 datalake 能力，能夠滿足多源數據的匯聚、聚合和加速。HENGSHI SENSE 本身能夠提供一定程度的 datalake 能力，同時還跟國內外一些數據湖、云廠商緊密結合，并在 PaaS 層進行引擎自由選擇配置
-
數據準備、數據科學、任務調度的數倉能力，HENGSHI SENSE 能夠完成數倉的常規建模處理任務
-
承載計算的多引擎適配能力，并且足夠的封裝和透明。HENGSHI SENSE 兼容各種各樣的引擎，包括 Hadoop，Hive，Impala，Doris，Clickhouse 等高性能引擎，默認配置好一些客戶常用的引擎，平臺用戶只需要進行配置調用即可
-
指標的中心化管理的中臺能力
-
標準的語義層和在全數據源范圍內的翻譯執行
-
豐富交互操作的可視化儀表盤
-
社交和協作、強大的發布和嵌入，API 的完整管理能力
-
企業級支持：用戶/租戶管理、單點登錄認證、權限管理、彈性擴展、集群管理等
HENGSHI SENSE 對于伙伴而言，就是這一組可被自由調用的正交的能力，也就是我們定義的“BI PaaS”。伙伴基于這種能力，結合其對行業的理解，可以極低的研發投入把分析場景做出來，并且輕松地根據客戶需求變化隨需而變。
從“自助式”分析到“自主式”分析，衡石與伙伴共享場景化分析普及的藍海增長
衡石與 SaaS/ISV 廠商的合作，能夠陪伴伙伴完成數據分析完整的成熟路徑。從服務能力看，會從標準分析模板的構建，到個性化報表分析、再到終端客戶業務側的自助分析，最后到終端客戶分析師的專業分析，逐步完成從數字化轉型到數據驅動的過程。
衡石和伙伴的聯手，大大降低了數據分析的門檻。一方面，由于客戶的數據更多來自于標準的 SaaS API 接口，對客戶來說數據準備的工作量大大降低；另一方面，客戶需要在特定的場景下關注業務效果、關注 KPI，所以分析是在明確的場景下進行探索的，這是相對有限域的范圍，而不是一個完全開放的域，分析也會因為有明確的目的性易于檢驗。
這些有利條件都進一步推動了終端客戶的個性化分析和自助分析成為必然趨勢。我們深深的意識到，有效的分析最終只能來自于行業專家們的深刻洞見，衡石提供相對成熟的企業級工具平臺，是為了讓那些洞悉行業本質、深度服務客戶的產品廠商不再受困于研發投入的泥潭風險，充分發揮自己的業務優勢，從專業的行業應用服務商提升為更專業的數據智能服務商。
