常見問題

• 大數(shù)據(jù)是什么意思?

  從一般意義上講，大數(shù)據(jù)是指無法在有限時間內(nèi)用常規(guī)軟件工具對其進行獲取、存儲、管理和處理的數(shù)據(jù)集合。“大數(shù)據(jù)”概念最早由維克托·邁爾·舍恩伯格和肯尼斯·庫克耶在編寫《大數(shù)據(jù)時代》中提出，指不用隨機分析法（抽樣調(diào)查）的捷徑，而是采用所有數(shù)據(jù)進行分析處理。
  大數(shù)據(jù)的特征

• 大數(shù)據(jù)的特征

  大數(shù)據(jù)具備 Volume、Velocity、Variety 和 Value 四個特征，簡稱“4V”，即數(shù)據(jù)體量巨大、數(shù)據(jù)速度快、數(shù)據(jù)類型繁多和數(shù)據(jù)價值密度低。
  1、Volume：表示大數(shù)據(jù)的數(shù)據(jù)體量巨大
  數(shù)據(jù)集合的規(guī)模不斷擴大，已經(jīng)從 GB 級增加到 TB 級再增加到 PB 級，近年來，數(shù)據(jù)量甚至開始以 EB 和 ZB 來計數(shù)。
  2、Velocity：表示大數(shù)據(jù)的數(shù)據(jù)產(chǎn)生、處理和分析的速度在持續(xù)加快
  加速的原因是數(shù)據(jù)創(chuàng)建的實時性特點，以及將流數(shù)據(jù)結(jié)合到業(yè)務(wù)流程和決策過程中的需求。數(shù)據(jù)處理速度快，處理模式已經(jīng)開始從批處理轉(zhuǎn)向流處理。
  3、Variety：表示大數(shù)據(jù)的數(shù)據(jù)類型繁多
  傳統(tǒng) IT 產(chǎn)業(yè)產(chǎn)生和處理的數(shù)據(jù)類型較為單一，大部分是結(jié)構(gòu)化數(shù)據(jù)。隨著傳感器、智能設(shè)備、社交網(wǎng)絡(luò)、物聯(lián)網(wǎng)、移動計算、在線廣告等新的渠道和技術(shù)不斷涌現(xiàn)，產(chǎn)生的數(shù)據(jù)類型無以計數(shù)。
  4、Value：表示大數(shù)據(jù)的數(shù)據(jù)價值密度低
  大數(shù)據(jù)由于體量不斷加大，單位數(shù)據(jù)的價值密 度在不斷降低，然而數(shù)據(jù)的整體價值在提高。以監(jiān)控視頻為例，在一小時的視頻中，有用的數(shù)據(jù)可能僅僅只有一兩秒，但是卻會非常重要。現(xiàn)在許多專家已經(jīng)將大數(shù)據(jù)等同于黃金和石油，這表示大數(shù)據(jù)當中蘊含了無限的商業(yè)價值。

• 大數(shù)據(jù)未來發(fā)展趨勢

  隨著市場整體的日漸成熟和新興技術(shù)的不斷融合發(fā)展，未來大數(shù)據(jù)市場將呈現(xiàn)穩(wěn)步發(fā)展的態(tài)勢，增速維持在 14%左右。
  在未來5G技術(shù)的加持下，大數(shù)據(jù)正引來越來越多的關(guān)注，未來科技發(fā)達，信息流通，大數(shù)據(jù)就是這個高科技時代的產(chǎn)物。阿里巴巴創(chuàng)辦人馬云曾多次在演講中提到，未來的時代將不是IT時代，而是DT的時代，大數(shù)據(jù)對當代社會發(fā)展舉足輕重的影響顯而易見，其就業(yè)前景更加不可估量。

• 大數(shù)據(jù)分析平臺有哪些？

  1、領(lǐng)英
  領(lǐng)英人才解決方案于2014年落地中國，在本地化發(fā)展上已經(jīng)獲得諸多成果。 針對中國客戶的需求，中國團隊提供全面、定制化的服務(wù)。針對中國客戶對工作效率要求非常高的特點，領(lǐng)英中國設(shè)立了專門的2B 客戶虛擬電話。此外，領(lǐng)英為中國客戶提供線上和線下培訓(xùn)，向企業(yè)提供定制化一對一培訓(xùn)，讓更多客戶分享交流經(jīng)驗，提升中國客戶使用能效。領(lǐng)英人才解決方案中國團隊每年發(fā)布數(shù)份重磅數(shù)據(jù)報告，為企業(yè)提供人才趨勢和行業(yè)勞動力洞察，領(lǐng)英行業(yè)大數(shù)據(jù)報告已被瀏覽超過10萬次。
  2、元年智答
  元年智答是一款智能數(shù)據(jù)分析“助手”，拉近人與數(shù)據(jù)的距離，輕松對話的形式獲取數(shù)據(jù)可視化圖表，在企業(yè)內(nèi)部高效傳遞數(shù)據(jù)洞見。提供對話式數(shù)據(jù)分析、智能數(shù)據(jù)可視化引擎、企業(yè)級數(shù)據(jù)權(quán)限控制、異常監(jiān)控實時預(yù)警、數(shù)據(jù)變動歸因溯源和智能化數(shù)據(jù)報告功能。
  3、先勝業(yè)財
  先勝業(yè)財是一家專注于業(yè)務(wù)-財務(wù)一體化領(lǐng)域的數(shù)據(jù)智能服務(wù)商。取義于孫子兵法“先勝而后戰(zhàn)”，先勝業(yè)財以提升企業(yè)決策力和執(zhí)行力為使命，致力于利用領(lǐng)先的數(shù)據(jù)智能洞察能力，為企業(yè)構(gòu)建透明、快速、動態(tài)、智能的業(yè)財一體化專業(yè)能力。
  4、百度智能云
  百度智能云于2015年正式對外開放運營，是基于百度多年技術(shù)沉淀打造的智能云計算品牌，致力于為客戶提供全球領(lǐng)先的人工智能、大數(shù)據(jù)和云計算服務(wù)。憑借先進的技術(shù)和豐富的解決方案，全面賦能各行業(yè)，加速產(chǎn)業(yè)智能化。
  5、米印盒子
  深圳市云寶騰達科技有限公司深耕電子發(fā)票、智能打印多年，擁有在物聯(lián)網(wǎng)、云計算、智能硬件、等領(lǐng)域的資深技術(shù)人才多名，公司主營專注于電子發(fā)票服務(wù)領(lǐng)域。提供基于大數(shù)據(jù)云計算的智能在線式服務(wù)，旨在讓廣大企事業(yè)單位的電子發(fā)票報銷工作更精確更高效的完成，米印盒子®是隸屬于公司的注冊商標。為客戶提供高品質(zhì)、高附加值的專業(yè)化在線服務(wù)。

• 大數(shù)據(jù)技術(shù)有哪些?

  1.分析預(yù)測技巧
  那是大數(shù)據(jù)的一個主要功能。通過對大數(shù)據(jù)源的分析，預(yù)測分析使企業(yè)能夠發(fā)現(xiàn)、評估、優(yōu)化和部署預(yù)測模型，從而改善業(yè)務(wù)業(yè)績或減少風險。而對大數(shù)據(jù)進行預(yù)測分析，則與我們的生活息息相關(guān)。淘寶網(wǎng)會預(yù)測你每一次購物都可能要買的東西，愛奇藝正在預(yù)測你想看的東西，百合網(wǎng)和其他約會網(wǎng)站甚至嘗試預(yù)測你會愛上誰…
  2.NoSQL數(shù)據(jù)庫
  NoSQL,NotOnlySQL，意思是“不只是SQL”，而是非關(guān)系型數(shù)據(jù)庫。與關(guān)系數(shù)據(jù)庫相比，NoSQL數(shù)據(jù)庫提供了一種更加靈活、可擴展、廉價的選擇，從而打破了傳統(tǒng)數(shù)據(jù)庫市場一統(tǒng)天下的格局。同時，NoSQL數(shù)據(jù)庫可以更好地滿足大型應(yīng)用程序的需求。通用NoSQL數(shù)據(jù)庫有HBase、Redis、MongoDB、Couchbase、LevelDB等。
  3.搜索和知識發(fā)現(xiàn)
  對從多個數(shù)據(jù)源(如文件系統(tǒng)、數(shù)據(jù)庫、流程、api和其他平臺和應(yīng)用程序)中自助提取信息的各種工具和技術(shù)提供支持。比如，數(shù)據(jù)挖掘技術(shù)和各種大數(shù)據(jù)平臺。
  4.大數(shù)據(jù)流計算引擎
  框架能夠過濾、聚合、豐富和分析來自多個完全不同的活動數(shù)據(jù)源的高吞吐量數(shù)據(jù)，并且可以使用任何數(shù)據(jù)格式。SparkStreaming和Flink是當今流行的流式計算引擎。
  5.記憶數(shù)據(jù)結(jié)構(gòu)
  采用分布式計算機系統(tǒng)中動態(tài)隨機存取存儲器(DRAM)、閃存或SSD分配數(shù)據(jù)，實現(xiàn)了低延遲存取和大量數(shù)據(jù)處理。
  6.分布式文件存儲
  為確保文件的可靠性和訪問性能，數(shù)據(jù)經(jīng)常以拷貝的方式存儲在多個節(jié)點的計算機網(wǎng)絡(luò)中。通用分布式文件系統(tǒng)有GFS、HDFS、Lustre、Ceph等。
  7.數(shù)據(jù)虛擬化
  DataVirtualization是一種數(shù)據(jù)管理方法，它使應(yīng)用程序能夠在無需考慮數(shù)據(jù)的技術(shù)細節(jié)的情況下檢索和操縱數(shù)據(jù)，例如源文件中的數(shù)據(jù)格式，或者數(shù)據(jù)存儲的物理位置，以及一個客戶用戶視圖。
  8.數(shù)據(jù)整合
  諸如AmazonElasticMapReduce(EMR)、ApacheHive、ApachePig、ApacheSpark、MapReduce、Couchbase、Hadoop和MongoDB等等，用于跨解決方案進行數(shù)據(jù)編排的工具。
  9.編制資料
  軟件減少了獲取、形成、清理和共享各種混亂數(shù)據(jù)集的負擔，從而加快數(shù)據(jù)對分析的有效性。
  10.數(shù)據(jù)質(zhì)量
  利用分布式數(shù)據(jù)存儲和數(shù)據(jù)庫中的并行操作，對大型高速數(shù)據(jù)集進行數(shù)據(jù)清理和充實。

• 大數(shù)據(jù)應(yīng)用在哪些方面?

  一、廣告行業(yè)
  比如你最近想買一個商品，然后在百度、京東或淘寶中搜索了某個關(guān)鍵字，其實這些行為數(shù)據(jù)都被收集起來了，因為有很多人的行為數(shù)據(jù)，所有后臺要進行大量的數(shù)據(jù)分析，構(gòu)建用戶畫像和使用一些推薦算法，然后進行個性化的推薦，當你登錄到一些網(wǎng)站上時，你會發(fā)現(xiàn)有一些廣告，推薦的一些正好是你要買的一些商品。
  二、內(nèi)容推薦
  比如你刷今日頭條，頭條會收集你以前的瀏覽行為數(shù)據(jù)，然后根據(jù)你的喜好構(gòu)建一個你專屬的用戶畫像或一類人的畫像，然后給你推薦你喜歡的新聞，比如你以前點擊過詹姆斯相關(guān)的新聞，就給你推薦NAB相關(guān)的新聞。由于頭條用戶很多，要分析的數(shù)據(jù)量就非常大，所有要使用大數(shù)據(jù)的手段來處理。
  三、餐飲行業(yè)
  快餐業(yè)的視頻分析。該公司通過視頻分析等候隊列的長度，然后自動變化電子菜單顯示的內(nèi)容。如果隊列較長，則顯示可以快速供給的食物；如果隊列較短，則顯示那些利潤較高但準備時間相對長的食品。
  四、教育領(lǐng)域應(yīng)用
  百度大腦PK人腦：大數(shù)據(jù)押高考作文題。為了幫助考生更好地備考，百度高考作文預(yù)測通過對過去八年高考作文題及作文范文、海量年度搜索風云熱詞、歷年新聞熱點等原始數(shù)據(jù)與實時更新的“活數(shù)據(jù)”進行深度挖掘分析，以“概率主題模型”模擬人腦思考，反向推導(dǎo)出作文主題及關(guān)聯(lián)詞匯，為考生預(yù)測出高考作文的命題方向。
  五、醫(yī)療領(lǐng)域
  智慧淮醫(yī)。淮安市采用IBM大型主機作為淮安市區(qū)域衛(wèi)生信息平臺基礎(chǔ)架構(gòu)支撐，滿足了淮安市在市級區(qū)域衛(wèi)生信息平臺基礎(chǔ)平臺建設(shè)和居民健康檔案信息系統(tǒng)建設(shè)進程中的需求，支撐淮安市級數(shù)據(jù)中心、居民健康檔案數(shù)據(jù)庫等一系列淮安市衛(wèi)生信息化應(yīng)用，支持淮安成為全國“智慧醫(yī)療”的典范。
  六、農(nóng)牧大數(shù)據(jù)
  大數(shù)據(jù)在農(nóng)業(yè)應(yīng)用主要是指依據(jù)未來商業(yè)需求的預(yù)測來進行農(nóng)牧產(chǎn)品生產(chǎn)，降低菜賤傷農(nóng)的概率。同時大數(shù)據(jù)的分析將會更見精確預(yù)測未來的天氣氣候，幫助農(nóng)牧民做好自然災(zāi)害的預(yù)防工作。大數(shù)據(jù)同時也會幫助農(nóng)民依據(jù)消費者消費習慣決定來增加哪些品種的種植，減少哪些品種農(nóng)作物的生產(chǎn)，提高單位種植面積的產(chǎn)值，同時有助于快速銷售農(nóng)產(chǎn)品，完成資金回流。牧民可以通過大數(shù)據(jù)分析來安排放牧范圍，有效利用牧場。漁民可以利用大數(shù)據(jù)安排休漁期、定位捕魚范圍等。