伴随着海量資料的沖擊,資料處理分析能力在業務中的價值與日俱增,各行各業對于資料處理時效性的探索也在不斷深入,作為主打實時計算的計算引擎 - Apache Flink 應運而生。
為給行業帶來更多實時計算賦能實踐的思路,鼓勵廣大熱愛技術的開發者加深對 Flink 的掌握,Apache Flink 社群聯手阿裡雲、英特爾、阿裡巴巴人工智能治理與可持續發展實驗室 (AAIG)、Occlum 聯合舉辦 "第三屆 Apache Flink 極客挑戰賽暨 AAIG CUP" 活動,即日起正式啟動。
劃重點:作為全球首個基于推薦系統的流量攻擊實時檢測比賽,我們首次公開了 100 萬流量作弊識别真實資料集!并應用 Intel SGX 加密技術保障風控模型資料安全。
👉
點選了解更多賽事資訊 👈過去兩年,阿裡雲和英特爾、Apache Flink 社群聯合舉辦了第一屆和第二屆 Flink 極客挑戰賽,運用 Flink,Analytics Zoo,Proxima 等平台和技術,引導選手在垃圾分類,實時疫情追蹤等熱點民生問題上進行了思考和創新;阿裡巴巴人工智能治理與可持續發展實驗室 (AAIG) 主辦了七期安全 AI 挑戰者計劃,如人臉識别對抗賽、辱罵文本對抗賽、防禦模型白盒以及無限制對抗賽等,勇闖 AI 對抗無人區,并發起 AI 治理多學科交叉結合的新項目 AAIG-CUP。
今年的第三屆 Flink 極客挑戰大賽暨 AAIG CUP,利用了第三代英特爾®至強®可擴充處理器的 Intel® SGX 技術,引導選手在隐私保護的機器學習方面進行探索和開發。本屆比賽将繼續面向全社會開放,個人、高等院校、科研機關、企業、創客團隊等人員均可報名參賽。
賽題背景
随着網際網路的發展,網購成為越來越多人的選擇,據阿裡巴巴财報顯示,2020 财年阿裡巴巴網站成交總額突破一萬億美元,全球年度活躍消費者達 9.60 億。
為了滿足不同使用者的個性化需求,電商平台會根據使用者的興趣愛好推薦合适的商品,進而實作商品排序的千人千面需求。為了擷取更多的平台流量曝光,将自己的商品展現在更多的消費者面前,部分商家通過 HACK 平台的推薦機制進而增加商品的曝光機會。其中一種典型的手法為 "抱大腿" 攻擊,該方法通過雇傭一批惡意使用者協同點選目标商品和爆款商品,進而建立目标商品與爆款商品之間的關聯關系,提升目标商品與爆款商品之間的 I2I 關聯分。
商家通過這種方式誘導使用者以爆款的心理預期購買名不符實的商品,不僅損害了消費者的利益,降低其購物體驗,還影響了平台和其他商家的信譽,嚴重擾亂了平台的公平性。實時攔截此類行為,有助于在保證推薦的時效性的同時,保護實時推薦系統不受惡意攻擊影響。
如何準确、高效地識别這類型的惡意流量攻擊,實時過濾惡意的點選資料是推薦系統中迫切需要解決的問題。
除此之外,此類實時風控系統對資料安全的要求較高。如果系統的攔截算法意外洩漏,HACK 平台将得以針對性地加強惡意流量的僞裝能力,增大平台監控惡意流量的難度。是以,此類系統有必要部署在加密的可信環境中。
本賽題要求選手基于 Flink,Analytics Zoo/BigDL 等元件,在 Occlum 環境中搭建保護資料安全的 PPML (Privacy Preserving Machine Learning) 應用,實作對惡意流量的實時識别。
賽程安排
本次大賽分為初賽、複賽和決賽三個階段,時間安排如下:
初賽階段
參賽隊伍将采用 docker 鏡像的送出方式,由選手送出打包好的代碼鏡像來運作得出搭建結果;參賽隊伍通過天池平台下載下傳小型訓練集和測試集,用于本地訓練和調試算法;最終完成的代碼鏡像送出到天池平台後,由評測系統在完整資料集上訓練與預測。
複賽階段
進入複賽後,将會進一步要求選手在半監督資料集上訓練深度學習模型,同時鼓勵選手在工程上做一些優化與創新。
決賽階段
最終的決賽将以答辯會的形式進行,晉級決賽團隊需提前按照要求準備答辯 PPT,而在場評委将根據選手的技術思路、理論深度現場表現進行綜合評分。
活動激勵
據悉,本次大賽最終将産生:
- 冠軍隊伍 1 支,獎金 10 萬人民币;
- 亞軍隊伍 2 支,獎金各 5 萬人民币;
- 季軍隊伍 3 支,獎金各 2 萬人民币;
- 優勝獎隊伍 4 支,獎金 1 萬人民币。
同時,本次大賽在報名階段還将延續上一屆的 "鼓勵師計劃" 玩法,成功邀請小夥伴參賽即可成為鼓勵師赢取豐厚的禮品!
彩蛋:本次比賽頒獎典禮預計将于 12 月 Flink Forward Asia 2021 (近期正式上線) 主論壇舉辦,活動資訊擷取歡迎關注 “Flink 中文社群” 公衆号,更多參賽秘籍等你 Get~!
更多 Flink 相關技術問題,可掃碼加入社群釘釘交流群
第一時間擷取最新技術文章和社群動态,請關注公衆号~
活動推薦
阿裡雲基于 Apache Flink 建構的企業級産品-實時計算Flink版現開啟活動:
99 元試用
實時計算Flink版(包年包月、10CU)即有機會獲得 Flink 獨家定制T恤;另包 3 個月及以上還有 85 折優惠!
了解活動詳情:
https://www.aliyun.com/product/bigdata/sc