天天看點

如何準确又通俗易懂地解釋大資料及其應用價值?

本文來自網易雲社群。

大資料的概念,是指無法在一定時間内用正常軟體工具對其内容進行抓取、管理和處理的資料集合,是存儲在各種存儲媒體中的海量的各種形态資料,具有 5V 特點,即:Volume (大量)、Velocity (高速)、Variety (多樣)、Value (價值密度)、Veracity(真實性)。

大資料概念的産生就是因為資料量和資料類型急劇增加,以至于原有的資料存儲、傳輸、處理以及管理技術不能勝任,需要全新的技術工具和手段。大資料,顧名思義,“大”該是應有之義,大資料的定義最初與容量有關系。業界有幾種對大資料的定義,其中一個共同點就是資料的容量超出了原有的存儲、管理和處理能力。适用于大資料的技術,包括大規模并行處理(MPP)資料庫,資料挖掘電網,分布式檔案系統,分布式資料庫,雲計算平台,網際網路,和可擴充的存儲系統。

對于“多大容量的資料才算大資料”,大資料的規模并沒有具體的标準,僅僅規模大也不能算作大資料。規模大學身也要從兩個次元來衡量,一是從時間序列累積大量的資料,二是在深度上更加細化的資料。

大資料之“大”,不僅在于其“大容量”,更在于其“大價值”,并已成為除人力、土地、财務、技術之外的另一種重要的資源。

在網購盛行的時代,“雙11”、“6.18”等促銷日總能掀起網購熱潮。網購消費者基本都被精準推送過廣告資訊,如曾浏覽過電鍋的消費者,很長一段時間内會在登入頁面後看到各品牌電鍋資訊。阿裡、京東、360等網際網路平台接觸消費者衆多,也是以獲得了很多資料。但是正如精準推送一樣,不對這些資料進行處理、挖掘就沒法産生價值。

大資料作為重要的基礎性戰略資源,核心價值在于應用,在于其指派和賦能作用,在于對大量資料的分析和挖掘後所帶來的決策支撐,能夠為我們的生産生活、經營管理、社會治理、民生服務等各方面帶來高效、便捷、精準的服務。

大資料概念正是來自資訊技術的飛速發展和應用,特别是随着雲計算、物聯網、移動網際網路的應用,資料量迅猛增長。資料來源有兩種,一種與人有關,比如政府、企業等為人們服務時産生的資料;另一種與物有關,萬物互聯時代,物聯網應用的浪潮将帶動資料量爆發式增長。

随着大資料的發展,企業也越來越重視資料相關的開發和應用,進而擷取更多的市場機會。一方面,大資料能夠明顯提升企業資料的準确性和及時性;此外還能夠降低企業的交易摩擦成本;更為關鍵的是,大資料能夠幫助企業分析大量資料而進一步挖掘細分市場的機會,最終能夠縮短企業産品研發時間、提升企業在商業模式、産品和服務上的創新力,大幅提升企業的商業決策水準,降低了企業經營的風險。

繼網際網路之後,真正能夠對企業産生重大影響的就是大資料。同時,要将大資料與其他技術相結合。現在人工智能潮正在到來,在可見時間内,人工智能真正能夠發揮作用的就是資料智能,即大資料。因為人工智能簡單來說可分為兩大類,一類是模型人腦工作機制、行為方式,是仿腦類腦的技術;另一類是快速的認識,因為人腦對大資料的認識本身沒有那麼快,但擷取資料的速度極強,可以從資料中分析出人類認識問題特定的方式方法,這就是資料智能,也叫人工智能。

要使大資料真正産生價值,就必須要研究資料的關聯、資料的聚類以及全樣本問題。建立在相關關系分析法基礎上的預測是大資料的核心,通過找出關聯物并監控它,就能預測未來。

大資料無處不在,已經被應用到了各個行業,包括金融、汽車、餐飲、電信、能源、體能和娛樂等在内的社會各行各業都已經融入了大資料的印迹。

制造業,利用工業大資料提升制造業水準,包括産品故障診斷與預測、分析工藝流程、改進生産工藝,優化生産過程能耗、工業供應鍊分析與優化、生産計劃與排程。

金融行業,大資料在高頻交易、社交情緒分析和信貸風險分析三大金融創新領域發揮重大作用。

汽車行業,利用大資料和物聯網技術的無人駕駛汽車,在不遠的未來将走入我們的日常生活。

網際網路行業,借助于大資料技術,可以分析客戶行為,進行商品推薦和針對性廣告投放。

餐飲行業,利用大資料實作餐飲O2O模式,徹底改變傳統餐飲經營方式。

電信行業,利用大資料技術實作客戶離網分析,及時掌握客戶離網傾向,出台客戶挽留措施。

能源行業,随着智能電網的發展,電力公司可以掌握海量的使用者用電資訊,利用大資料技術分析使用者用電模式,可以改進電網運作,合理設計電力需求響應系統,確定電網運作安全。

物流行業,利用大資料優化物流網絡,提高物流效率,降低物流成本。

城市管理,可以利用大資料實作智能交通、環保監測、城市規劃和智能安防。

生物醫學,大資料可以幫助我們實作流行病預測、智慧醫療、健康管理,同時還可以幫助我們解讀DNA,了解更多的生命奧秘。

體育娛樂,大資料可以幫助我們訓練球隊,決定投拍哪種題材的影視作品,以及預測比賽結果。

安全領域,政府可以利用大資料技術建構起強大的國家安全保障體系,企業可以利用大資料抵禦網絡攻擊,警察可以借助大資料來預防犯罪。

個人生活, 大資料還可以應用于個人生活,利用與每個人相關聯的“個人大資料”,分析個人生活行為習慣,為其提供更加周到的個性化服務。

資料的價值,遠遠不止于此,大資料對各行各業的滲透,大大推動了社會生産和生活,未來必将産生重大而深遠的影響。

網易猛犸大資料平台作為一站式的應用開發和資料管理平台,通過大資料開發套件,将資料開發、任務運維、自助分析、資料管理、項目管理等工作通過工作流的方式有效的串聯起來,提供靈活易用的使用者操作界面,降低了大資料分析的使用門檻,顯著地提高了資料開發工程師和資料分析師的工作效率。猛犸大資料平台在電商、音樂、雲課堂學習、企業工業制造等領域已廣泛應用,基于持續的需求驅動,通過多行業的業務驗證,同時豐富全面的元件,提供完善的平台能力,滿足不同類型的業務需求。點選這裡可免費試用。

原文:如何準确又通俗易懂地解釋大資料及其應用價值?

繼續閱讀