“我們選擇數加平台的主要目的是數加平台本身大資料應用的能力和平台的成熟度,當然背後還有很多能陪我們一起996戰鬥的數加兄弟們,無論是技術能力的判斷,還是從商業合作的角度,這是選擇數加的考慮。”“可以毫不保留的來講,我們現在内部團隊具備的大資料處理的能力相當于阿裡巴巴的處理能力,是以我們能夠很快速、便捷的給我們的品牌提供多樣化的豐富的完整閉環的大資料的營銷和解決方案的能力”熊大如是說。<b></b>
<b>關于網聚寶</b>
上海雲貝網絡科技有限公司正式成立于2011年,是一家專注于全域大資料應用的服務商,多元化的産品矩陣,專業團隊協同運作,為企業提供專業“大資料+”更新服務,幫助企業建構數字化商業能力,實作大資料變現。網聚寶是上海雲貝網絡科技有限公司旗下大資料品牌,目前服務于奔馳、杜蕾斯、馬克華菲、絲芙蘭、豐趣海淘、韋伯英語、美亞保險等品牌商,覆寫零售、快消、線下服務業、金融等行業,總共服務3000家品牌,觸達5億消費者,為品牌連接配接所有管道的消費者資料資産,建構品牌的全域大資料中心,實作全景式的消費者人群畫像洞察,在每個消費觸點上提供個性化的購買體驗,實作全局的場景化精準營銷和多端場景化互動。網聚寶始終秉持‘資料讓生意更簡單’的理念,用資料驅動,提升消費者的複購率和品牌黏性。 “網聚寶為品牌提供真正的基于大資料的可落地的最後一公裡的服務”,網聚寶創始人兼ceo熊大(熊曉東)如是說。
<b></b>
<b>挑戰</b>
網聚寶作為企業的大資料解決方案服務商,如何利用大資料成就客戶、幫助企業洞察更多的商業價值是公司的頭等大事。正如熊大所講,作為一個快速發展中的創業團隊,大部分精力必須集中在為客戶提供資料應用的能力,這對于我們來說既是挑戰也是機遇。網聚寶在大資料應用方面存在的主要挑戰有:
1.海量資料的處理分析能力。對于品牌商來講,随着移動支付和整個電商的更大規模覆寫,品牌已經能夠積累足夠多海量的資料。如何快速有效的對海量資料進行處理分析,是一個很大的挑戰。
2.“天下武功,無堅不摧,唯快不破”的靈活大資料分析能力。熊大表示,“随着各行各業競争的加劇,品牌對實時性的需求也越來越大,在原來的銷售模式中,一個報表三四天出來給到決策部門也沒有問題,但是在市場瞬息萬變的當下,品牌商需要上一秒交易,這一秒可能就要出報告分析。”如何幫助品牌商快速應變、靈活決策,也是一個很大的挑戰。
3.大資料的業務洞察能力。熊大表示,大資料更大的挑戰在于未來對商業智能的應用場景,怎麼樣使用大資料幫助品牌商洞察出更多“意料之外,情理之中”的商業價值,更加關鍵。舉例來說,有個洗車機的客戶,其本身定位是二三線的有車一族,但通過資料洞察,發現買洗車機的都是農民,他們更多是買回去洗蕃薯,這證明大資料可以幫助客戶分析出潛在的商機,這裡存在的挑戰就是如何幫助客戶将資料背後的價值和金礦釋放出來,為品牌賦能。
4.即懂大資料,又懂業務的複合性人才。熊大說:“對于任何創業公司來說,人才是一個不得不面臨的問題,是以對于我們來說,招業務還是技術上有深入鑽研的人并沒有什麼好糾結的。現在,網聚寶零dba,零運維,需要更多懂大資料,懂業務的綜合能力的人才”。
<b>為什麼選擇阿裡雲數加</b>
網聚寶在2011年創業之初,通過托管機器的方式研究過開源大資料平台hadoop。但是由于創業公司人力财力有限,如果隻招一個兩個人肯定不夠,搭建、運維、開發這些工作,至少也得五六個人才能滿足需求。當時,相對于擁有十五六個專業hadoop人才的競争對手來講非常被動,客戶資料隻需放在自己的機房中,這些對當時的客戶來說有着很大的吸引力。
但是,在阿裡雲的強力配合和支援下,網聚寶還是堅持了下來,放棄了原有的hadoop。而随後,到了當今雲變成了類似于水電煤基礎設施的時代,對于創業公司來說雲服務已經比hadoop這些開源軟體成熟,雲計算将公司從複雜的it運維開發中解放出來,使得公司更專注于業務創新。這時就會顯現出,這些應用阿裡雲的公司,業務創新能力是那些使用hadoop的許多倍,可更直接的為客戶産生業務價值,而客戶最需要的就是這些。對于原來的那些對手,hadoop已成為累贅,積累全在上面,丢掉則放棄了原有的競争力,不丢掉毫無競争優勢。現在網聚寶30個人的技術團隊,就能pk擁有hadoop技術團隊的百人公司,員工具備業務思維,看得懂背後的需求和需求背後的價值。
“dt和it的差別就好比汽車與馬車的生産力差別,誰勝誰負取決于市場現狀,幾年前,雲還沒有那麼完善,跑在泥土路上的汽車日子顯然沒有馬車好過,然而随着阿裡等有能力的網際網路公司建立了足夠好的道路後,汽車服務提供商給使用者帶來的速度與體驗顯然超過了以往”,熊大如是說。
創始人熊大說:“我們選擇數加平台的主要目的是數加平台本身大資料應用的能力和平台的成熟度,當然背後還有很多能陪我們一起996戰鬥的數加兄弟們,無論是技術能力的判斷,還是從商業合作的角度,這是選擇數加的考慮。”
“在使用雲服務做架構時,底層基礎能力對使用者來說相當于一個黑盒,這樣我們就可以把注意力放到業務的價值模型和技術的架構模型的統一上,這樣做之後對市場反應的速度會遠超他人。雲服務有一個非常明顯的特性,他會将底層能力與上層應用切割,同時将通用能力與具體業務邏輯分開,是以在未來開發中,很适合創業團隊根據業務的需求去快速搭建自己的系統。”網聚寶首席架構師機器貓從技術角度闡述使用數加的原因。
<b>解決方案及架構</b>
網聚寶大資料的主要應用場景為:
1.整合品牌全域資料。
2.為品牌提供大資料可視化以及大資料洞察能力。
3.為品牌提供業務資料的應用能力,如品牌大資料精準營銷以及消費者多端互動等。
網聚寶基于阿裡雲數加及基礎雲服務等産品,向客戶提供全域大資料saas應用,向二次開發者、內建商及合作夥伴提供paas api以及daas api,進而為客戶、合作夥伴、內建商、二次開發者進行全面的大資料賦能。網聚寶現在整體的大資料解決方案架構如頁面下方架構圖所示。
方案涵蓋的阿裡雲數加産品群組件主要有:
<b>收益</b>
1.通過普惠大資料,阿裡雲數加為網聚寶這樣的創業公司提供了應用大資料的核心能力。“可以毫不保留的來講,我們現在内部團隊具備的大資料處理的能力相當于阿裡巴巴的處理能力,是以我們能夠很快速、便捷的給我們的品牌提供多樣化的豐富的完整閉環的大資料的營銷和解決方案的能力”熊大如是說。
2.阿裡雲數加為網聚寶掃清了大資料的技術壁壘,可以将資源聚焦于客戶的業務價值提升,進而為網聚寶帶來核心競争力的提升。無論是海量資料的離線處理,還是線上大規模資料的實時計算,通過阿裡雲數加平台都能夠快速完美的解決,是以網聚寶無需對大資料投入太多的人力和精力,一方面節省了成本,另一方面可以将節省的人力用于幫助品牌提供業務資料的應用能力之上來,進而為網聚寶帶來競争優勢。
3.最重要的是,通過基于阿裡雲數加的網聚寶saas應用,客戶的業務洞察能力大大提升,并且幫助客戶直接帶來銷售提升。杜蕾斯,通過大資料的深度營銷和應用,提升老客戶複購,直接帶來銷售提升。某日化品牌,有上千萬會員,通過3個月的應用落地,業績直接提升3%+。
<b>架構圖</b>
<b>架構解讀</b>
資料來源。底層是可以連接配接到的資料來源,資料來源非常廣泛,包括三大類資料源:第三方自有的平台,可以與客戶自己的系統對接;公共的電商平台,可以和這些平台做資料同步;公開的資訊平台,例如百度貼吧、微網誌等。
資料采集服務。通過幾十個資料采集服務分别将這些資料采集到資料中心。
資料中心。主要包括oltp資料庫、資料加工服務、olap資料庫、資料分析引擎、特定業務資料中心5部分:
oltp資料庫。采集到資料以後,強關系型資料會進入分布式關系型資料庫drds;同時,采用了大量的高性能的非關系型資料存儲,使用了阿裡雲4種産品,分别對應了快和慢,以及資料結構的規範和零散。
資料加工服務。通過數加提供的dataide來做資料加工的服務,主要目的是為了上層的資料分析。
olap資料庫。主要用作資料分析,資料分析包括兩大類:離線報表分析和實時資料分析。
資料分析引擎。主要使用了阿裡雲數加的一些特有服務,公衆趨勢分析,推薦引擎以及資料內建引擎(用于多資料源的資料內建)。
特定業務資料中心。主要包括中體量全鍊路資料中心(用于不是特别大體量下做全鍊路的資料處理)、greenplum生态資料中心、私有金融資料中心(對安全要求特别高的資料服務)。
資料類服務群。由資料分析類和資料應用類服務組成。資料分析類服務具有很強的資料聚合、處理、分析等特性,比如效果分析、透視表、報告關聯、商品分析等。資料應用類服務是作為資料的應用,如推廣管理、負面評價管理、知識庫等。不同的服務解決不同的問題,但最終解決的問題是有一定方向性的,最終組成最終saas産品的鍊路。
上海雲貝全域大資料産品(saas)。由資料類服務按照不同的業務應用場景組合而成。
paas 及daas api。這些api是非常細粒度的服務,支撐特定次元下的特定資料的相關服務,可以給二次開發者,內建商和合作夥伴使用。