網(wǎng)易猛犸為考拉提供了性價(jià)比更高的大數(shù)據(jù)服務(wù)
業(yè)務(wù)背景
考拉從誕生之日起,作為跨境電商的第一品牌,面臨著業(yè)務(wù)需要快速迭代和高并發(fā)的需求。為了應(yīng)對(duì)業(yè)務(wù)的高速發(fā)展,考拉海購(gòu)在開(kāi)發(fā)過(guò)程中面臨著以下的問(wèn)題: 1、提交代碼頻繁出現(xiàn)大量沖突,開(kāi)發(fā)不獨(dú)立,項(xiàng)目初期是一單體應(yīng)用,幾百人開(kāi)發(fā)一個(gè)模塊,使用GIT做代碼管理,經(jīng)常會(huì)遇到的事情就是代碼提交沖突。 2、小功能要積累到大版本才能上線,上線開(kāi)總監(jiān)級(jí)別大會(huì),上線不獨(dú)立。拆分微服務(wù)之前,單次上線的需求列表非常長(zhǎng),風(fēng)險(xiǎn)比較大,可能小功能的錯(cuò)誤會(huì)導(dǎo)致大功能的上線不正常,這樣上線時(shí)間長(zhǎng),影響范圍大。迭代速度慢。 3、橫向擴(kuò)展流程復(fù)雜,主要業(yè)務(wù)和次要業(yè)務(wù)耦合,有的業(yè)務(wù)是需要擴(kuò)容的,例如下單和支付,有的業(yè)務(wù)是不需要擴(kuò)容的,例如注冊(cè)。若一起擴(kuò)容,由于配置復(fù)雜,在同一個(gè)工程里面,一些邊角的業(yè)務(wù),也需要對(duì)配置進(jìn)行詳細(xì)審核,否則不敢貿(mào)然擴(kuò)容。 4、熔斷降級(jí)全靠if-else,在高并發(fā)場(chǎng)景下,我們希望一個(gè)請(qǐng)求如果不成功,應(yīng)該盡快失敗,盡快返回,而且希望當(dāng)一些邊角的業(yè)務(wù)不正常的情況下,主要業(yè)務(wù)流程不受影響。如果核心業(yè)務(wù)流程和邊角業(yè)務(wù)流程在同一個(gè)進(jìn)程中,就需要使用大量的if-else語(yǔ)句,根據(jù)下發(fā)的配置來(lái)判斷是否熔斷或者降級(jí),這會(huì)使得配置異常復(fù)雜,難以維護(hù)。 隨著考拉海購(gòu)業(yè)務(wù)的快速發(fā)展,尤其是從跨境電商逐步發(fā)展成為綜合電商平臺(tái),在大數(shù)據(jù)技術(shù)方向有了新的需求: 1、數(shù)倉(cāng)搭建、智能推薦、搜索算法、安全風(fēng)控等數(shù)據(jù)應(yīng)用提出了更高的要求; 2、需要數(shù)據(jù)平臺(tái)支持不同的存儲(chǔ)方案和計(jì)算方案、靈活滿足客戶的各類場(chǎng)景; 3、數(shù)據(jù)應(yīng)用開(kāi)發(fā); 4、數(shù)據(jù)時(shí)效性要求。 除此以外,考拉同樣面臨著大量的數(shù)據(jù)分析工作,從商品分析、會(huì)員分析、銷售分析等業(yè)務(wù)需求出發(fā)來(lái)支撐考拉大規(guī)模業(yè)務(wù)的背后,需要很大的數(shù)據(jù)分析團(tuán)隊(duì)支撐,而這需要消耗大量的時(shí)間和人力成本。
解決方案
網(wǎng)易猛犸為考拉提供了性價(jià)比更高的大數(shù)據(jù)服務(wù),提供了SQL開(kāi)發(fā)、依賴配置與調(diào)度管理、交互式查詢等,協(xié)助管理開(kāi)發(fā)過(guò)程,提高開(kāi)發(fā)效率。 提供了更便捷、更智能的數(shù)據(jù)分析服務(wù)。網(wǎng)易有數(shù)以私有化部署的方式,重點(diǎn)提供以下解決方案: 1、提供高性能MPP,支持各種大數(shù)據(jù)存儲(chǔ)系統(tǒng)、傳統(tǒng)數(shù)據(jù)庫(kù)以及EXCEL文件等數(shù)據(jù)源,支持異構(gòu)數(shù)據(jù)源集成,完美支撐考拉大數(shù)據(jù)高性能的要求; 2、通過(guò)拖拽操作即可快速完成數(shù)據(jù)建模,一次建模多次應(yīng)用; 3、自助式分析,業(yè)務(wù)人員無(wú)需編寫(xiě)繁瑣的代碼,只要簡(jiǎn)單地拖拽,就能輕松制作出豐富的圖表,靈活地進(jìn)行數(shù)據(jù)分析; 4、多終端展示,隨時(shí)隨地填報(bào)數(shù)據(jù),數(shù)據(jù)自動(dòng)匯總管理,與有數(shù)分析無(wú)縫銜接,并且可隨時(shí)通過(guò)手機(jī)、郵件,隨時(shí)隨地分享給相關(guān)業(yè)務(wù)人員。
帶來(lái)的收益
借助網(wǎng)易易數(shù):
1、基于網(wǎng)易猛犸,收集并計(jì)算全站數(shù)據(jù),并進(jìn)行高效的ETL開(kāi)發(fā)和數(shù)據(jù)倉(cāng)庫(kù)建設(shè)。
2、基于受眾定向技術(shù)產(chǎn)生的海量算法規(guī)則標(biāo)簽,進(jìn)行高性能的用戶畫(huà)像查詢和探索。
3、基于個(gè)性化技術(shù),實(shí)現(xiàn)海量個(gè)性化營(yíng)銷方案自動(dòng)部署實(shí)施和AB效果追蹤,滿足業(yè)務(wù)發(fā)展的訴求。 4、采用網(wǎng)易有數(shù)代替自研數(shù)據(jù)門(mén)戶,報(bào)表分析速度提升20多倍 。
客戶評(píng)價(jià)
考拉海購(gòu)?fù)ㄟ^(guò)網(wǎng)易猛犸、網(wǎng)易有數(shù),搭建了更加符合要求的大數(shù)據(jù)平臺(tái)和數(shù)據(jù)分析平臺(tái),解決了以下四個(gè)問(wèn)題:一是跨境電商的產(chǎn)銷流程和倉(cāng)儲(chǔ)供應(yīng)鏈都相對(duì)復(fù)雜,且受到政策,比如稅改方面的影響更大;二是數(shù)據(jù)時(shí)效性,近年電商平臺(tái)的大小促銷活動(dòng)頻繁,業(yè)務(wù)方對(duì)數(shù)據(jù)實(shí)時(shí)或準(zhǔn)實(shí)時(shí)要求增多;三是海量數(shù)據(jù)產(chǎn)生的大量計(jì)算,元數(shù)據(jù)管理問(wèn)題;四是數(shù)據(jù)質(zhì)量,包括埋點(diǎn)的管理等。 未來(lái),考拉技術(shù)的方向是實(shí)時(shí)化推進(jìn)、算法特征數(shù)據(jù)倉(cāng)庫(kù)建設(shè)、營(yíng)銷業(yè)務(wù)程序化投放和算法實(shí)驗(yàn)效果平臺(tái),雙方將繼續(xù)開(kāi)展深入合作。