一年標星翻倍,它憑什麼成為GitHub最活躍大數據項目之一?_風聞
大数据文摘-大数据文摘官方账号-2020-08-20 13:08
大數據文摘出品
2015年,阿里搜索算法團隊遇到了一個問題。
整個淘寶和天貓的商品都需要實時更新到在線的搜索和推薦引擎中,以及要根據用户在在線行為進行實時個性化的搜索排序和推薦。
在這樣挑戰的業務需求大背景下,阿里搜索團隊迫切需要找到一個能承受巨大計算量並且實時化的計算引擎。
通過綜合多方面因素的權衡和判斷,阿里最終選擇了Flink作為實時計算引擎。
之後也正如我們所見,阿里集團頂住了包括雙十一、618等全年不斷的大大小小促銷活動。
作為一個14年才進入Apache的年輕項目,當時的Flink是如何吸引了阿里搜索團隊的注意的呢?
阿里巴巴資深技術專家,實時計算負責人,也是Flink中文社區發起人王峯 (莫問)告訴我們,團隊首先看中的是Flink的架構設計,尤其是作為一個純流式思想來做大數據處理,不僅可以基於Kappa結構來做流式數據處理,還可以基於流為核心做批流融合的計算能力。
也正因如此,作為備受矚目的新一代開源大數據計算引擎,Flink項目已成為Apache基金會和GitHub最為活躍的項目之一。在去年年底Flink Forward Asia 2019上透露,僅僅是2019年一年的時間,Flink在GitHub上的star數量就翻了一倍,貢獻者數量也呈現出持續增長的態勢。
為了讓更多技術從業者瞭解Flink,Apache Flink Committer執筆,四位PMC成員審核,將Flink 9大技術版塊詳細拆分,突出重點內容並搭配全面的學習素材。
看完這份知識圖譜,才算真的搞懂Flink!
▽ Flink 知識圖譜概覽 ▽
點擊**“閲讀原文”或掃描文末二維碼**報名《開源Flink極客訓練營》並加入配套釘釘羣,即可馬上下載高清版知識圖譜,知識圖譜PDF版本內含大量補充鏈接,一鍵點擊即可查看相關擴展素材!
各版塊知識點詳解
Streaming Processing Concepts(common concepts for stream processing)
Architecture
State Management
DataStream
Libraries
Table API & SQL
Deployment and Operations
Debugging and Monitoring
Ecosystem
Use Cases
重磅福利:阿里大數據訓練營重磅開啓!
不過,一個人惡補“圖譜”容易半途而廢,配合這份知識圖譜,文摘菌在這裏也安利一波阿里下週開營的**《開源技術Flink極客訓練營》**,0基礎也能入門,7次課即刻快速上手。
課程目錄如下👇
更重要的是,課程現在報名免費,名額有限,先到先得哦!
除了Flink,這次訓練營還有8大課程供你挑選,從第一期實時計算Flink開始,到離線和實時一體化的數倉MaxCompute和Hologres,也包括開源大數據的全家桶,EMR、ElasticSearch,Flink,以及靈活的機器學習平台PAI和數據綜合治理平台DataWorks。
每個訓練營的課程時間3-7天不等,線上視頻教學,總共超過40節課,覆蓋大數據領域方方面面。
無論是你對數倉、數據湖、大數據建模,還是機器學習、搜索引擎以及其他的數據智能各種應用感興趣,總會有一款適合你的訓練營內容。
“大數據文摘”作為“九營齊開”計劃的合作媒體,為讀者們爭取到了免費的參與名額,與行業一線團隊和技術專家面對面交流。
除了直播課程和實戰平台,每期訓練營出品人將圍繞某一核心技術及訓練營直播課程規劃課外閲讀資料,提供從入門到上手的全套學習教材,保障實操演示與擴展閲讀同步進行,讓您免於“想自學沒資料想實操沒人教”的各種煩惱。
戳**“閲讀原文”立刻報名,你可以選擇一個或者多個**參與,報名免費,參與名額有限,文摘菌只能幫你到這裏了!
最後,Flink社區知識圖譜免費下載方式也來啦~點擊**“閲讀原文”或掃描海報二維碼**,報名《開源Flink極客訓練營》,並加入配套釘釘羣,還有直播課程詳解知識圖譜的正確打開方式,讓你一圖在手,學好Flink不用愁!
知識圖譜作者介紹:
程鶴羣(軍長),Apache Flink Committer,阿里巴巴技術專家,2015年4月加入阿里巴巴,從事主搜離線相關開發。2016年開始參與Flink SQL相關的研發。2018年開始核心參與Flink Table API相關的研發。