今天小編分享的科學經驗:又雙叒一清華系團隊入局大模型創業!螞蟻領投,主打多模态,歡迎閱讀。
清華計算機系教授朱軍,終于正式站在了大模型創業賽的擂台上。
多方消息證實,他帶領新團隊成立新的 AI 公司,衝進大模型混戰場——這是朱軍繼瑞萊智慧後,帶領的第二支創業團隊。
新公司生數科技,基于底層多模态通用大模型,面向影像創作、3D 資產創建等場景打造垂類應用。
量子位進一步獲悉,它剛剛曝出完成了近億元天使輪投資,目前市場估值達1 億美金。
螞蟻集團是這次融資的領投方,BV 百度風投和清華系專看 AI 的 VC 卓源資本緊随其後。
這是 ChatGPT 誕生後,螞蟻集團第一次下手投資大模型公司,也是自今年 1 月 7 日阿裡從螞蟻集團實際控制人 " 身退 " 之後,螞蟻集團對外曝光出的與 AI 初創公司第一次親密接觸。
(哪怕阿裡和螞蟻集團剛剛合作提出了 VideoComposer,通過組合式生成範式,在視頻領網域同時實現時間和空間雙維度的可控性,狗頭 .jpg)
打造可控多模态通用大模型
量子位進一步獲悉,生數科技這家公司,由螞蟻、BV 百度風投,以及朱軍第一次創業時成立的瑞萊智慧 RealAI聯合孵化而來。
目标是 " 致力于成為全球領先的生成式人工智能基礎設施及應用建設者 "。
據悉,生數科技研究團隊主要來自清華大學人工智能研究院,主要來自朱軍帶領的課題組。
該課題組致力于貝葉斯機器學習的理論和算法研究,是國際上最早研究深度概率生成模型的團隊之一
工作主要面向針對深度生成式模型的骨幹網絡、高速采樣、可控生成、大模型訓練等全棧底層原創研發。
而目前推進中的業務,是聚焦 AIGC,打造可控的多模态通用大模型,覆蓋文本、影像、3D 模型、音視頻等多個模态。
要覆蓋的商業場景,包括藝術設計、遊戲制作、影視後期、内容社交等。
生數科技大模型目前已處于迭代中,現階段已經開始落地實踐影像生成、3D 内容生成和視頻生成等業務。
業務水平究竟怎樣?
面對量子位的上門追問,生數科技給出如下回答:
論視頻生成,團隊目前聚焦于文本的視頻自動化編輯。
△生數科技視頻生成效果(中)和 Runway 生成效果(右)
論3D 生成,團隊提出新算法ProlifcDreamer,從貝葉斯建模和變分推斷的角度,重新形式化了 text-to-3D 問題。
該技術能夠在無需任何 3D 訓練數據的前提下,通過文本描述,自動生成高質量帶紋理的三維網格與 NeRF 圖。
包括生成復雜效果和 360 ° 場景、根據同樣的描述生成不同形式的 3D 内容。
以及首個實現了基于三視圖自動生成高質量的 3D 内容," 是目前業内最接近產業級應用的 3D 生成效果 "。
論影像生成,團隊旗下多模态大模型UniDiffuser,今年 3 月開源,是首個基于 Transformer 的多模态擴散大模型。
能夠很好地在構圖、風格、畫面精準度等方面把握用戶意圖。
現狀,是 " 正自研新一版的產業級模型,其中,影像生成效果已超過 Stable Diffusion 最新版基礎模型水平 ";
計劃,是 " 将于年内趕超 Midjourney 最新版本 "。
并且透露道,過去兩年,生數科技團隊在 ICML、NeurIPS、ICLR 等計算機頂會發了 20 多篇相關論文,擴散模型是團隊的主要發力陣地。
先後提出的采樣算法 Analytic-DPM、DPM-Solver 等成果,被 DALL · E、Stable Diffusion 等應用。
論文成果頗豐,生數科技接下來的任務,就是把基礎科研推向應用市場。
生數科技背後團隊
生數科技領兵衝刺的帶頭人朱軍,IEEE Fellow,現任清華大學計算機系教授。
同時也是清華人工智能研究院副院長,清華智能技術與系統國家重點實驗室主任,智源首席科學家。
求學期間,他在清華計算機系拿下本科和博士學位,師從中國科學院院士、清華計算機系教授張钹。
△朱軍
2011 年,在張钹的邀請下,朱軍回到清華計算機系任教。
去年,師徒二人圍繞擴散概率模型合作的工作《Analytic-DPM: an Analytic Estimate of the Optimal Reverse Variance in Diffusion Probabilistic Models》,拿下 ICLR 2022 傑出論文獎。
朱軍長期從事機器學習、貝葉斯方法、深度學習、數據挖掘等方面的研究,在頂會 ICML、NIPS、IJCAI、AAAI、 JMLR、PAMI 等發表論文 100 餘篇,連續多年擔任 ICML、NeurIPS 領網域主席。
(貝葉斯方法是自然語言處理、機器學習、影像識别等 AI 領網域的重要基礎。)
2020 年,朱軍團隊發布深度強化學習平台Tianshou 天授。
這是一個針對強化學習的靈活可靠的基礎設施,能夠以極簡代碼極速實現強化學習的諸多算法和功能,在 GitHub 上有用 6.4k+ 星星。
話說回來,生數科技不是朱軍在科研和產業之間的第一次嘗試。
他的首次創業要回溯到 2018 年。當時,他支持自己的學生田天創辦了公司瑞萊智慧 RealAI,專注提升人工智能的安全性。
并且和張钹共同擔任該公司的首席科學家。
這一次正式入局大模型,朱軍再次選擇站在新公司 " 運籌帷幄 " 的位置上。
而根據企查查 App 資料,成立于 3 月的生數科技,在 4 月時進行了一次法人變動,從 " 田天 " 變更為 " 唐家渝 "。
唐家渝其人,現在是生數科技的聯合創始人兼 CEO。
他同樣畢業自清華大學計算機系,師從 NLP 組教授孫茂松。
此前,對唐家渝外界的主要公開身份是瑞萊智慧的副總裁,先後負責公司產品團隊、AI 安全產研團隊及業務。
而從再往前的簡歷可以看到,唐家渝曾在騰訊優圖實驗室工作。
△唐家渝
最新能公開的消息是,生數科技團隊近期在擴散模型工作上,提出了一種新的訓練策略,能夠盡可能用較少的标注,持續優化多模态生成效果。
如此看來,生數科技的多模态大模型可能武力值要再 +1 了?
以及不得不感慨一句,清華系 AI 初創公司在這一波大模型創業中,真的是風頭無兩。
哪怕單純從數量上說,生數科技也已經是又雙叒叕一個了~
參考鏈接:
[ 1 ] https://github.com/thu-ml/tianshou
[ 2 ] https://www.cs.tsinghua.edu.cn/info/1121/3551.htm
[ 3 ] https://www.qcc.com/firm/3903aa13076b2df3918d75f504bb9395.html
— 聯系作者 —
>