李沐大模型公司細節曝光,項目GitHub空倉標星超500_風聞
量子位-量子位官方账号-昨天 15:50
衡宇 發自 凹非寺
量子位 | 公眾號 QbitAI
AI大神李沐大模型創業方向,終於“水落石出”:
利用大模型能力,做遊戲引擎,且是面向4A遊戲。

關於4A遊戲這個概念,目前業內沒有統一的“名詞解釋”,但通常理解為比3A遊戲更強大一點的遊戲(doge)。
被曝從亞馬遜首席科學家的職務上離職後,李沐聯手其導師、另一位亞馬遜出身AI大牛Alex Smola的創業公司Boson.ai既沒有高調露面,也沒有什麼隱秘爆料跟上。
外界只能從領英和公司極簡風的官網上得知,公司方向是“scalable foundation models”(可擴展基礎模型)。
而且是面向所有人(for everyone)那種。
現在,“大家的李沐老師”正在做的事情逐步清晰,AIGC for 遊戲。
以及來自投資市場的消息,為了順利推進這個目標,Boson.ai後來招賢納士,吸納了一位遊戲方面的大牛坐鎮公司聯創。
——畢竟粗掃一遍發現,在過去,李沐和Smola沒什麼與遊戲技術直接緊密關聯的經歷。

目前尚不清楚Boson.ai選擇這條創業路線的準確原因,但大模型在遊戲引擎上能夠釋放的能力,還是很明晰的。
比如最直給的創意生成和編輯能力,還有語音指令控制能力;
又或者是為遊戲NPC賦予AI的靈魂,形成一個個獨特的Agent,增強玩家的互動性和可玩空間等等。
……
總之,它能夠讓開發者對前端框架知識的門檻降低、效率提升。
而且要知道,上述例子僅僅是“大模型助力遊戲引擎”已經露出水面的一角,還有很多水面下的故事值得挖掘。
話説回來,這家創業10個多月還神神秘秘的公司,為什麼值得關注和期待?
為什麼值得持續關注?
原因之一,就是李沐和Alex Smola都是AI領域裏有技術、有名氣的大牛。
AI 2.0時代,創業賽道上眾星雲集,李沐和Alex Smola棄亞馬遜入大模型,屬於是有名氣、有技術的人投身最明星的賽道,當然格外耀眼。
李沐,二者之間大家比較熟悉的那一位。
自己有很厲害的經歷,加上在小破站傳道授業,打下了響噹噹的知名度。

而Alex Smola,更是一個AI屆的神級大牛。
直接上數據:
Smola在Google Scholar上的被引用次數,超過17萬次。
其中,被引次數前三的所著論文,被引數統統破萬。

除了是ML著作《動手學深度學習》的主要作者外,Smola這些年的履歷也很值得好好了解一番——
1996年,Smola在慕尼黑工業大學完成碩士學業,而後又在柏林工業大學拿下計算機科學博士學位。
博士畢業後,他先後去往柏林GMD軟件工程和計算機體系結構研究所、NICTA(澳大利亞信息與通信技術研究中心)工作。
2004年起,Smola在NICTA的統計機器學習項目中,擔任高級首席研究員和項目負責人;到了2008年,Smola選擇入職雅虎研究院。
2012年春天到2014年年底,2年多的時間裏,Smola的工作地點是谷歌研究院。
期間,他開始擔任CMU的教授。也是這個時候,他成為了李沐的博士導師,二人結緣。

2016年7月,Smola成為了亞馬遜的一員,致力於構建AI和機器學習工具。
他的首要任務之一,是讓AWS和開發者社區建立和保持聯繫。
具體來説,他的工作是讓更多的開發者共同建設亞馬遜深度學習庫MXNet。
離職創業前,Smola在亞馬遜擔任的職位是傑出科學家和副總裁。

值得一提的是,由於Smola在分佈式深度學習框架領域曾提出並行LDA(Latent Dirichlet Allocation)的框架——這是參數服務器概念的最早來源,因此,Smola也被業界稱為參數服務器之父。
參數服務器,以共享的形式實現不同節點之間數據交互的通信模式。
其採用了一種將模型參數中心化管理的方式,來實現模型參數的分佈式存儲和更新。
它的作用在於存儲一些多節點共享的數據,常適用於存在數據共享的應用場景。
在大模型當道的現在,我們也可以説參數服務器的提出對大模型訓練的性能和效果發揮着重要作用。

另一個值得期待的原因,就是李沐和Smola師徒二人,此前有過一次還算成功的創業經歷。
Smola是李沐在CMU讀博期間的導師,那時候兩人曾一同創辦數據分析算法公司Marianas Labs,Smola任CEO,李沐任CTO。
李沐在《博士這五年》一文中提到,那次創業,他們拿了幾十萬投資,風風火火幹了好一陣,最後把公司賣給了一家小上市公司。
結束這段創業經歷後,兩人才先後踏入亞馬遜公司的大門。
直到今年2月,Smola在領英宣佈離職,成立新公司並擔任CEO。
他在領英資料裏提到:
我們正在建造一個大項目……請繼續關注。如果你想在可擴展基礎模型上工作,請告訴我。
隨後傳出消息,這個“大項目”就是Smola和李沐的二次聯手創業。
不過直到現在,除了悄悄招人擴大團隊以外,Boson.ai沒有再多的公開大動作。
包括李沐的領英,最新動態仍然停留在他的亞馬遜經歷。
One More Thing
因此,在得知李沐老師要用大模型能力做遊戲引擎後,我們第一時間興奮地衝向了Boson.ai的GitHub主頁。
有點遺憾,GitHub倉庫和幾個月前官宣時一樣,沒有什麼新變化,也沒有任何與遊戲相關的蛛絲馬跡。
但是就這麼一個什麼也沒有的主頁,已經有近500顆星了……
