天天看點

快速完成智能資料建構,Dataphin公共雲版本全面解讀

公測兩個月,Dataphin公共雲版本已經受到了阿裡雲上衆多輕量級使用者的關注。事實上,Dataphin作為一款大資料智能建構與管理的産品,其核心功能是面向各行各業大資料建設、管理及應用訴求,一站式提供從資料接入到資料消費全鍊路的智能資料建構與管理的大資料能力,包括産品、技術和方法論,助力企業打造标準統一、融會貫通、資産化、服務化、閉環自優化的智能資料體系,以驅動業務創新。

日前,基于公測期間使用者關注的諸多問題,Dataphin團隊在阿裡雲上啟動了首場Dataphin公共雲産品直播。針對性地解讀了這一版本在性能和使用上的亮點。

1、Dataphin可以解決什麼問題?

近年來大資料領域最熱門的詞非“資料中台”莫屬,很多資料服務商都轉型為“資料中台”的搭建者。然而與“資料中台”的建構密切相關的産品Dataphin現已正式上線阿裡雲公共雲環境。緻力于幫助更多企業完成智能資料建構與管理的期望。

“資料中台”在媒體報道中,俨然成為了一個新的風口,那麼“資料中台”也像之前的“物聯網”、“O2O”一樣隻是概念嗎?其實“資料中台”是一個經過實踐驗證後被提出的能力,阿裡巴巴早在2015年就已确定資料中台為戰略方向。今天終于可完整的攜帶方法論、技術、産品對集團外進行能力輸出。

阿裡巴巴的資料中台是滋生于業務的,實實在在解決着業務中的痛點,對于正在進行數字化轉型的企業來說,不同的崗位角色有着不同的困惑。

快速完成智能資料建構,Dataphin公共雲版本全面解讀

在資料使用上遇到一些現實問題,大緻可以從業務視角和技術視角兩方面來看:

首先是業務角度,由于資料标準不統一,命名不規範,口徑不一緻,導緻不同業務方對于同一個業務的認知有所不同;又因為由于團隊之間的壁壘,導緻每個團隊能夠使用的資料非常有限,資料孤島化嚴重;而從資料加工處理的流程來看,各業務之間互相調用,逐漸形成網狀依賴,加劇了資料重複建設以及管理失效的現狀;

其次是技術角度,煙囪式的開發導緻開發周期長、效率低下,研發資源浪費,技術标準的差異則帶來維護成本奇高,同時資料垂直開發,導緻生産鍊路複雜且長,重複計算多,資料産出時效性差;

快速完成智能資料建構,Dataphin公共雲版本全面解讀

綜合整個大資料技術及應用發展曆史,資料建構與管理要落地企業長效發展過程中,最大的挑戰可以抽象為以下四類:

  • 業務了解上,“資料名額不一緻”;舉個簡單的例子,就是一家企業的CEO,訂立銷售目标是1個億,結果他的5個業務負責人根據各自的算法所得的業績資料都超過2千萬,所有業務leader的任務都完成了,唯獨CEO的業績卻沒有完成!聽起來可能是個玩笑,但是口徑不一緻的問題經常會出現我們的業務中;
  • 需求支援上,“研發難”;一般地,一個需求提出到響應給到業務方,一般要一周時間,這還不算業務方拿到需求發現與實際業務中感覺有所差異,不斷地與開發者進行對齊的時間;
  • 财務賬單上,“資源消耗高,财務成本重”;舉個簡單的例子,我們寫個複雜的查詢,如果沒有注意到全表掃描和主鍵唯一校驗問題,就有可能掃描一張數十億行的資料,就有可能執行超長的時間,消耗大量的資源;
  • 資料價值透出上,則需要快速響應、靈活開發;舉個簡單的例子,模型做的非常好了,但是模型師不愛寫文檔,或者文檔太久沒有更新,對于一個應用開發者或者服務開發者而言,他需要不斷地去看模型的代碼,去探查資料驗證自己的了解和判斷,直到找出所需要的資料。同樣,另外一個業務開發者也需要在不同的應用中使用這份資料,如果幸運地知道别人已經開發過了,可以做到一定程度的複用,但是如果不知道這個服務的存在,這位開發者還要重新來過一遍;
快速完成智能資料建構,Dataphin公共雲版本全面解讀

2、同類市場上,Dataphin的特點與優勢在哪裡?

Dataphin的原創性核心能力:

第一:“資料規範定義”。百分百消除二義性,所謂二義性就是兩個同名的名額名稱但是計算口徑卻是不同的,Dataphin通過規範定義與自動化模組化的方式消除了這種二義性的存在;這一能力打破的是概念設計與邏輯設計之間的鴻溝;

第二:“設計即開發”。簡單地說就是,實作了可視化配置後的代碼自動生成,這一能力打破的是邏輯設計與實體設計之間的差異;

第三:“資料資産化管理”。資料建構完成後,需要系統化地管理與營運,讓資料資産得以高品質、低成本、安全産出,更重要的是高效流通,快速價值化;

第四:“主題式查詢”。簡單地講就是,面向資料使用者的不再是實體模型中分散的資料表,而是以主題組織的模型;對于使用者而言,将省去大量的溝通、了解成本。

快速完成智能資料建構,Dataphin公共雲版本全面解讀

3、中型企業、輕量級使用者是否适合使用Dataphin嗎?

我們經常會用到這張圖,形象化地描述,如果你是一家小型企業,現在開始規範化建設你的資料,将來自然生長為一個大型規範的資料中心;如果您是一家大型企業,還沒有建設資料中台,提前規劃,提前儲備,一步到位建設資料中台。公共雲版本正是在中小企業成長過程中既滿足使用者的需求,同時又相比獨立部署價更加經濟的選擇。

快速完成智能資料建構,Dataphin公共雲版本全面解讀

檢視産品:

智能資料建構與管理 Dataphin

一圖快速了解:

釋出核心、場景、優勢、接入、更多!

直播回顧:

Dataphin公共雲重磅釋出

點選了解:

“阿裡雲新品釋出會頻道”

立即訂閱:

阿裡雲新品釋出會·周刊