網(wǎng)易猛犸為考拉提供了性價比更高的大數(shù)據(jù)服務(wù)
業(yè)務(wù)背景
考拉從誕生之日起,作為跨境電商的第一品牌,面臨著業(yè)務(wù)需要快速迭代和高并發(fā)的需求。為了應(yīng)對業(yè)務(wù)的高速發(fā)展,考拉海購在開發(fā)過程中面臨著以下的問題: 1、提交代碼頻繁出現(xiàn)大量沖突,開發(fā)不獨立,項目初期是一單體應(yīng)用,幾百人開發(fā)一個模塊,使用GIT做代碼管理,經(jīng)常會遇到的事情就是代碼提交沖突。 2、小功能要積累到大版本才能上線,上線開總監(jiān)級別大會,上線不獨立。拆分微服務(wù)之前,單次上線的需求列表非常長,風(fēng)險比較大,可能小功能的錯誤會導(dǎo)致大功能的上線不正常,這樣上線時間長,影響范圍大。迭代速度慢。 3、橫向擴展流程復(fù)雜,主要業(yè)務(wù)和次要業(yè)務(wù)耦合,有的業(yè)務(wù)是需要擴容的,例如下單和支付,有的業(yè)務(wù)是不需要擴容的,例如注冊。若一起擴容,由于配置復(fù)雜,在同一個工程里面,一些邊角的業(yè)務(wù),也需要對配置進行詳細審核,否則不敢貿(mào)然擴容。 4、熔斷降級全靠if-else,在高并發(fā)場景下,我們希望一個請求如果不成功,應(yīng)該盡快失敗,盡快返回,而且希望當(dāng)一些邊角的業(yè)務(wù)不正常的情況下,主要業(yè)務(wù)流程不受影響。如果核心業(yè)務(wù)流程和邊角業(yè)務(wù)流程在同一個進程中,就需要使用大量的if-else語句,根據(jù)下發(fā)的配置來判斷是否熔斷或者降級,這會使得配置異常復(fù)雜,難以維護。 隨著考拉海購業(yè)務(wù)的快速發(fā)展,尤其是從跨境電商逐步發(fā)展成為綜合電商平臺,在大數(shù)據(jù)技術(shù)方向有了新的需求: 1、數(shù)倉搭建、智能推薦、搜索算法、安全風(fēng)控等數(shù)據(jù)應(yīng)用提出了更高的要求; 2、需要數(shù)據(jù)平臺支持不同的存儲方案和計算方案、靈活滿足客戶的各類場景; 3、數(shù)據(jù)應(yīng)用開發(fā); 4、數(shù)據(jù)時效性要求。 除此以外,考拉同樣面臨著大量的數(shù)據(jù)分析工作,從商品分析、會員分析、銷售分析等業(yè)務(wù)需求出發(fā)來支撐考拉大規(guī)模業(yè)務(wù)的背后,需要很大的數(shù)據(jù)分析團隊支撐,而這需要消耗大量的時間和人力成本。
解決方案
網(wǎng)易猛犸為考拉提供了性價比更高的大數(shù)據(jù)服務(wù),提供了SQL開發(fā)、依賴配置與調(diào)度管理、交互式查詢等,協(xié)助管理開發(fā)過程,提高開發(fā)效率。 提供了更便捷、更智能的數(shù)據(jù)分析服務(wù)。網(wǎng)易有數(shù)以私有化部署的方式,重點提供以下解決方案: 1、提供高性能MPP,支持各種大數(shù)據(jù)存儲系統(tǒng)、傳統(tǒng)數(shù)據(jù)庫以及EXCEL文件等數(shù)據(jù)源,支持異構(gòu)數(shù)據(jù)源集成,完美支撐考拉大數(shù)據(jù)高性能的要求; 2、通過拖拽操作即可快速完成數(shù)據(jù)建模,一次建模多次應(yīng)用; 3、自助式分析,業(yè)務(wù)人員無需編寫繁瑣的代碼,只要簡單地拖拽,就能輕松制作出豐富的圖表,靈活地進行數(shù)據(jù)分析; 4、多終端展示,隨時隨地填報數(shù)據(jù),數(shù)據(jù)自動匯總管理,與有數(shù)分析無縫銜接,并且可隨時通過手機、郵件,隨時隨地分享給相關(guān)業(yè)務(wù)人員。
帶來的收益
借助網(wǎng)易易數(shù):
1、基于網(wǎng)易猛犸,收集并計算全站數(shù)據(jù),并進行高效的ETL開發(fā)和數(shù)據(jù)倉庫建設(shè)。
2、基于受眾定向技術(shù)產(chǎn)生的海量算法規(guī)則標(biāo)簽,進行高性能的用戶畫像查詢和探索。
3、基于個性化技術(shù),實現(xiàn)海量個性化營銷方案自動部署實施和AB效果追蹤,滿足業(yè)務(wù)發(fā)展的訴求。 4、采用網(wǎng)易有數(shù)代替自研數(shù)據(jù)門戶,報表分析速度提升20多倍 。
客戶評價
考拉海購?fù)ㄟ^網(wǎng)易猛犸、網(wǎng)易有數(shù),搭建了更加符合要求的大數(shù)據(jù)平臺和數(shù)據(jù)分析平臺,解決了以下四個問題:一是跨境電商的產(chǎn)銷流程和倉儲供應(yīng)鏈都相對復(fù)雜,且受到政策,比如稅改方面的影響更大;二是數(shù)據(jù)時效性,近年電商平臺的大小促銷活動頻繁,業(yè)務(wù)方對數(shù)據(jù)實時或準(zhǔn)實時要求增多;三是海量數(shù)據(jù)產(chǎn)生的大量計算,元數(shù)據(jù)管理問題;四是數(shù)據(jù)質(zhì)量,包括埋點的管理等。 未來,考拉技術(shù)的方向是實時化推進、算法特征數(shù)據(jù)倉庫建設(shè)、營銷業(yè)務(wù)程序化投放和算法實驗效果平臺,雙方將繼續(xù)開展深入合作。