項目意義

隨著信用卡中心業(yè)務(wù)規(guī)模地不斷擴大，以及相關(guān)產(chǎn)品和服務(wù)種類地迅速增加，卡中心自身的數(shù)據(jù)總量在劇烈膨脹、數(shù)據(jù)類型也在不斷增多。與此同時，隨著我國金融市場的逐步開放，以互聯(lián)網(wǎng)為代表的現(xiàn)代信息科技，特別是，門戶網(wǎng)站、社區(qū)論壇、微博、微信等新型傳播方式的蓬勃發(fā)展，移動支付、搜索引擎和云計算的廣泛應(yīng)用，構(gòu)建起了全新的虛擬客戶信息體系，并將改變現(xiàn)代金融運營模式。數(shù)據(jù)海量化、多樣化、快速化和價值化等特征，將給商業(yè)銀行市場競爭帶來全新的機遇與挑戰(zhàn)，將改變其經(jīng)營理念和服務(wù)方式。可預(yù)見，隨著分布式計算相關(guān)技術(shù)的成熟、應(yīng)用和發(fā)展，將為銀行業(yè)務(wù)轉(zhuǎn)型和產(chǎn)品創(chuàng)新創(chuàng)造了條件，銀行業(yè)服務(wù)及管理模式都將發(fā)生根本性改變，未來的銀行不僅應(yīng)是數(shù)據(jù)大行，更應(yīng)是數(shù)據(jù)分析、數(shù)據(jù)解讀的優(yōu)秀銀行，要能夠從數(shù)據(jù)中獲得洞察力，從數(shù)據(jù)中攫取價值，從數(shù)據(jù)中贏得未來。

卡中心當前數(shù)據(jù)分析平臺體系（包含基礎(chǔ)平臺、分析集市、分析倉庫等）積累了豐富的數(shù)據(jù)，為信用卡各項業(yè)務(wù)發(fā)展提供穩(wěn)定高效的數(shù)據(jù)支持。然而，隨著大數(shù)據(jù)時代的到來，基礎(chǔ)數(shù)據(jù)正向著大量、多樣、高速、價值方向轉(zhuǎn)化，傳統(tǒng)數(shù)據(jù)處理技術(shù)已漸漸無法滿足未來數(shù)據(jù)的變化及發(fā)展趨勢，現(xiàn)有數(shù)據(jù)基礎(chǔ)平臺面臨如下的困難及挑戰(zhàn)：

（一）對于互聯(lián)網(wǎng)半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)，無法有效存儲、清洗和分析使用。隨著銀行業(yè)務(wù)的互聯(lián)網(wǎng)化，產(chǎn)生大量非結(jié)構(gòu)化數(shù)據(jù)，比如微信數(shù)據(jù)、信用卡APP數(shù)據(jù)等。此類數(shù)據(jù)若利用現(xiàn)有數(shù)據(jù)平臺解析處理成本高、效率低，亟需一個大數(shù)據(jù)基礎(chǔ)平臺來采集處理此類異構(gòu)數(shù)據(jù)，作為傳統(tǒng)架構(gòu)的補充及完善。

（二）客戶行為數(shù)據(jù)無從采集，無法深入了解客戶，挖掘其客戶行為偏好。目前,卡中心缺乏獲取客戶互聯(lián)網(wǎng)行為的渠道及平臺，無法進一步深入了解客戶的行為偏好，而此類客戶行為數(shù)據(jù)恰恰卻是卡中心深入了解客戶最為缺乏的寶貴資源。因此，亟需一個大數(shù)據(jù)基礎(chǔ)平臺采集、整理客戶行為數(shù)據(jù)，并利用大數(shù)據(jù)技術(shù)挖掘客戶行為偏好，深入了解客戶內(nèi)心真正的需求。

（三）現(xiàn)有平臺數(shù)據(jù)源已包含大部分業(yè)務(wù)數(shù)據(jù)，傳統(tǒng)技術(shù)無法拓展新型數(shù)據(jù)源。隨著大數(shù)據(jù)技術(shù)的發(fā)展，只有不斷發(fā)現(xiàn)及引入新的數(shù)據(jù)源才是提升數(shù)據(jù)整體價值的關(guān)鍵，而隨著新業(yè)務(wù)系統(tǒng)不斷建設(shè)落地，亟需一個大數(shù)據(jù)基礎(chǔ)平臺進一步拓寬新型數(shù)據(jù)源，作為傳統(tǒng)基礎(chǔ)平臺數(shù)據(jù)源的補充，通過傳統(tǒng)及大數(shù)據(jù)相結(jié)合的方式拓展卡中心基礎(chǔ)數(shù)據(jù)的廣度及深度。

項目目標

搭建互聯(lián)網(wǎng)渠道非結(jié)構(gòu)化數(shù)據(jù)采集、處理、存儲的大數(shù)據(jù)基礎(chǔ)平臺，本著“統(tǒng)一規(guī)劃，分步實施，循序漸進，迭代上升”的理念，同時參考同業(yè)卡中心相關(guān)平臺落地的實施步驟，本期項目以基礎(chǔ)平臺搭建為主，建立分布式處理框架，重點實現(xiàn)異構(gòu)數(shù)據(jù)采集、處理和存儲，并探索挖掘客戶互聯(lián)網(wǎng)行為標簽。

業(yè)務(wù)功能

• 搭建信用卡歷史數(shù)據(jù)查詢及互聯(lián)網(wǎng)渠道數(shù)據(jù)分析應(yīng)用系統(tǒng)，實現(xiàn)基于分布式技術(shù)的數(shù)據(jù)處理架構(gòu)。
• 搭建該平臺的可視化管理平臺，實現(xiàn)基于分布式計算技術(shù)的可視化的作業(yè)管理、作業(yè)監(jiān)控、數(shù)據(jù)監(jiān)控、平臺監(jiān)控、組件管理、配置管理、用戶管理、權(quán)限管理、審計管理等。
• 搭建該平臺的交互式界面，提供通用、高效、友好的數(shù)據(jù)展現(xiàn)方式，實現(xiàn)展示（統(tǒng)計圖表：餅圖、折線、柱狀）。
• 實現(xiàn)各生產(chǎn)數(shù)據(jù)到分布式數(shù)據(jù)分析平臺可視化的數(shù)據(jù)導(dǎo)入、清洗、轉(zhuǎn)換、存儲，并根據(jù)上層數(shù)據(jù)應(yīng)用的需求，建立數(shù)據(jù)模型。
• 實現(xiàn)基于微信、信用卡APP等非結(jié)構(gòu)化數(shù)據(jù)處理場景，能統(tǒng)一接入并存儲各類“新”數(shù)據(jù)，并提供合適的技術(shù)手段進行后續(xù)分析處理。
• 根據(jù)采集處理后的互聯(lián)網(wǎng)客戶行為數(shù)據(jù)，充分利用分布式挖掘技術(shù)，初步實現(xiàn)客戶行為標簽等應(yīng)用場景。