2016杭州雲栖大會在雲栖小鎮召開,本屆大會以“飛天・進化”為主題,内容規模比去年翻倍,從原本2天的議程增加至4天,從10月13日持續到16日,超過400場主題演講使開發者們對阿裡雲計算生态發展和應用趨勢、前沿技術和産品有了更深刻的了解。
在2016杭州雲栖大會第四天的“開源大資料技術專場”分會場上,阿裡雲進階技術專家無謂、阿裡雲技術專家封神、阿裡巴巴中間件技術部進階技術專家天梧、阿裡巴巴中間件技術部資深技術專家紀君祥對開源大資料技術的有關方面做了詳細介紹。
無謂:hadoop過去現在未來從阿裡雲梯到e-mapreduce
無謂的演講主要包含了:
1、雲計算和大資料時代背景介紹
2、hadoop生态圈10年發展曆程
3、hadoop應用範圍的擴充
4、雲上e-mapreduce發展現狀
5、未來雲上hadoop發展展望
封神:阿裡巴巴spark的一些實踐與spark探索
封神主要講述了阿裡這幾年spark的經過,spark on yarn模式,spark現在及後續的發展。
天梧:阿裡巴巴hbase的一些實踐與探索
本次主題中,天梧介紹了hbase的特點與使用案例,分享了過去五年阿裡hbase在大量業務錘煉過程的一些經驗與優化,并展望了hbase在資料領域的未來。
紀君祥:阿裡巴巴實時計算平台 jstorm turbo
紀君祥的本次分享,着重介紹了:
jstorm turbo 支撐着哪些實時計算業務。
底層實時計算引擎新特性。
中間層資料計算因子層設計和實作。
未來 storm 和 jstorm 的趨勢。