天天看點

Flink 的經典場景和業務故事有哪些?看看他們就知道了

在大資料的日常場景中,從資料生産者,到資料收集、資料處理、資料應用(BI+AI),整個大資料 + AI 全棧的每個環節,Flink 均可應用于其中。作為新一代開源大資料計算引擎,Flink 不僅滿足了工業界對實時性的需求,還能夠打通端到端的資料價值挖掘全鍊路。

如今,Flink 在大資料各個環節的應用幾何?究竟能帶來怎樣重大的價值?未來,Flink 還會朝着哪些方面進化?

Flink 的經典場景和業務故事有哪些?看看他們就知道了
4月25-26日,全球首個 Apache 頂級項目線上會議 Flink Forward 中文精華版将正式開播,聚焦 Alibaba、 Google、AWS、Uber、Netflix、DellEMC、微網誌、滴滴等各大網際網路公司實時計算的經典場景和業務故事,以超強陣容、優質議題普惠全球開發者!精華版内容均為中文,由 Flink 核心貢獻者們對原版英文 talk 進行翻譯和解說,您可免費線上觀看。

大會亮點:

  1. 全程中文詳細解說,多位 Flink PMC、Committer、一線技術專家等重量級嘉賓對 18 個優質 talk 進行中文解說,讓您了解更清晰、透徹。
  2. 多角度了解 Flink 最新動向,大會内容從技術深度、社群生态、未來發展等方面擴充,與您分享 Flink 長期規劃的 Roadmap。
  3. 豐富的國内外一線企業經典場景與業務故事,生産環境的寶貴實戰經驗分享。
  4. 多種 Flink 周邊禮品,參與直播互動即可赢取社群周邊大禮包。

此前,小松鼠已詳細介紹了4月25日上午北京場、下午杭州場的直播議程,以下将分享4月26日上海場有哪些值得期待的内容。

4/26,上海場直播看什麼

圓桌 | Keynote: Stream analytics made real with Pravega and Apache Flink

随着流式應用程式的發展,其支援系統也不斷更新疊代。當今的應用程式不再是孤島,而都是生态系統的一部分。是以市場對于流系統和平台提供的功能期望比以往更加嚴格。考慮到這些要求,我們設計并建構了 Pravega。

Pravega 是以流作為核心的原生流存儲系統。Pravega 能夠支援應用程式通過靈活且一緻的方式注入和存儲無限的資料流。将 Pravega 與 Apache Flink 相結合,我們可以建構資料流水線去同時跟蹤和處理曆史和實時資料,并且滿足端到端的 exactly-once 語義。Pravega 和 Apache Flink 已成為 Dell Technologies 的 Streaming Data Platform 産品重要組成部分。本次演講我們将和大家分享相關實踐經驗,包括實時視訊流分析,自動駕駛的真實用例。

分享嘉賓:Srikanth Satya,Dell Technologies Vice President,Engineering。

解說嘉賓:滕昱,戴爾科技集團軟體開發總監。

圓桌 | Google: 機器學習工作流的分布式處理

生産環境下機器學習流程通常需要非常大的計算和系統資源,需要在叢集上進行分布式處理。本地或基于雲基礎架構的成本需要最大程度地高效利用資源,這使得諸如 Apache Flink 之類的分布式處理管道架構非常适合機器學習的工作流。

與此同時,生産環境下機器學習還必須解決現代軟體方法論問題以及一些特有問題;不同類型的機器學習有不同的要求,通常是由不同的資料生命周期和事實來源驅動;實作常常遭受子產品化,可伸縮性和可擴充性的限制。本次演講中,我們會讨論生産環境下機器學習的應用程式,并回顧TensorFlow Extended(TFX),Flink,Apache Beam 和 Google 在生産中使用機器學習的經驗。

分享嘉賓:

  • Ahmet Altay,Google 進階軟體工程師,Apache Beam PMC。
  • Reza Rokni,Google Cloud Dataflow 和 Apache Beam 的開發倡導者。
  • Robert Crowe,Google 資料科學家和 TensorFlow 愛好者。

解說嘉賓:秦江傑,Apache Flink PMC,阿裡巴巴進階技術專家。

圓桌 | AWS: 如何在全托管 Apache Flink 服務中提供應用高可用

AWS 為客戶提供了一個完全托管的服務,用于運作 Apache Flink 應用程式 Amazon kinisis Data Analytics。在為客戶提供服務的過程中,我們也面臨着獨特的挑戰。其中一個挑戰就是問題歸屬。如何确定運作時錯誤是由客戶代碼中的錯誤引起的,還是由底層基礎結構的問題引起的?

在本次演講中,我們将描述如何自動分類錯誤,以及如何通過程式設計或手動幹預來恢複應用程式可用性。這對于我們確定 AWS 服務所期望的應用程式的可用性以及維護可持續的操作是至關重要的。我們還将回顧如何設計改進 Apache Flink 引擎以消除歧義,以及如何確定 Apache Flink 應用程式的高可用性。

  • Ryan Nienhuis,AWS 開發工程師。
  • Tirtha Chatterjee,AWS 開發工程師。

解說嘉賓:章劍鋒(簡鋒),Apache Member,阿裡巴巴進階技術專家。

演講 | Production-Ready Flink and Hive Integration - what story you can tell now?

本次演講主要分享 Flink 1.10 中釋出的完整 Flink-Hive 內建。将介紹一些常見的用例,其中 Flink 使用者需要讀寫 Hive 資料以及引用 Hive UDF 的功能。為了說明使用者如何輕松解決這些問題,我将通過示例詳細介紹 Flink-Hive 內建。與會者将能夠學習:

  • 如何在 Flink 中本地讀取和寫入 Hive 資料(表,視圖,分區)
  • Flink 支援的文法和 SQL 指令
  • Flink 內建到 Hive 上的優化
  • 如何在 Flink中 重用 Hive UDF

分享嘉賓:李博聞,阿裡巴巴技術專家。

解說嘉賓:李銳(天離),Apache HBase PMC,阿裡巴巴技術專家

Flink Forward 全球線上會議中文精華版

最佳觀看方式

本次直播将在 Flink Forward 中文版大會官網進行,點選「閱讀原文」或複制下方官網連結了解更多詳情,注冊登陸後即可預約直播觀看。屆時,社群将提前以短信通知的形式提醒大家參與。

大會官網直播預約: https://developer.aliyun.com/live/2594?spm=a2c6h.14242504.J_6074706160.2.3fca361fwj9lT3
Flink 的經典場景和業務故事有哪些?看看他們就知道了

預約成功後顯示如下:

Flink 的經典場景和業務故事有哪些?看看他們就知道了

Tips:社群已準備豐富的周邊禮品,參與直播互動、提問即可領取,還有驚喜抽獎環節哦~

完整版議程

Flink Forward 全球直播精華版共分為 Keynote 重點議題、Flink 最佳實踐、深度技術應用、社群生态四部分,形式上由北京、上海、杭州三地輪流直播,在這裡您将通過多樣化場景的實踐案例了解 Flink 核心優勢及未來發展。

■ 直播時間:4月25-26日

■ 分享嘉賓:

  • Apache Member、Flink PMC
  • Apache Flink 核心貢獻者
  • 大廠一線技術專家

■ 詳細議程:

Flink 的經典場景和業務故事有哪些?看看他們就知道了

(最終議題以實際為準)

4月25-26日,鎖定 Flink Forward 全球直播中文精華版!了解更多大會詳情,可釘釘掃描下方二維碼進群咨詢~

Flink 的經典場景和業務故事有哪些?看看他們就知道了

如果您對大會實時英文直播感興趣,點選下方連結可了解 Flink Forward Virtual Conference 2020 大會完整版議程詳情及注冊預約!

https://www.flink-forward.org/sf-2020/conference-program