又雙叒一清華系團隊入局大模型創業！螞蟻領投，主打多模態

衡宇 2023-06-19 17:27:35 來源：量子位

衡宇 發自 凹非寺

量子位 | 公眾號 QbitAI

清華計算機系教授朱軍，終于正式站在了大模型創業賽的擂臺上。

多方消息證實，他帶領新團隊成立新的AI公司，沖進大模型混戰場——這是朱軍繼瑞萊智慧后，帶領的第二支創業團隊。

新公司生數科技，基于底層多模態通用大模型，面向圖像創作、3D資產創建等場景打造垂類應用。

量子位進一步獲悉，它剛剛曝出完成了近億元天使輪投資，目前市場估值達1億美金。

螞蟻集團是這次融資的領投方，BV百度風投和清華系?？碅I的VC卓源資本緊隨其后。

這是ChatGPT誕生后，螞蟻集團第一次下手投資大模型公司，也是自今年1月7日阿里從螞蟻集團實際控制人“身退”之后，螞蟻集團對外曝光出的與AI初創公司第一次親密接觸。

（哪怕阿里和螞蟻集團剛剛合作提出了VideoComposer，通過組合式生成范式，在視頻領域同時實現時間和空間雙維度的可控性，狗頭.jpg）

打造可控多模態通用大模型

量子位進一步獲悉，生數科技這家公司，由螞蟻、BV百度風投，以及朱軍第一次創業時成立的瑞萊智慧RealAI聯合孵化而來。

目標是“致力于成為全球領先的生成式人工智能基礎設施及應用建設者”。

據悉，生數科技研究團隊主要來自清華大學人工智能研究院，主要來自朱軍帶領的課題組。

該課題組致力于貝葉斯機器學習的理論和算法研究，是國際上最早研究深度概率生成模型的團隊之一

工作主要面向針對深度生成式模型的骨干網絡、高速采樣、可控生成、大模型訓練等全棧底層原創研發。

而目前推進中的業務，是聚焦AIGC，打造可控的多模態通用大模型，覆蓋文本、圖像、3D模型、音視頻等多個模態。

要覆蓋的商業場景，包括藝術設計、游戲制作、影視后期、內容社交等。

生數科技大模型目前已處于迭代中，現階段已經開始落地實踐圖像生成、3D內容生成和視頻生成等業務。

業務水平究竟怎樣？

面對量子位的上門追問，生數科技給出如下回答：

論視頻生成，團隊目前聚焦于文本的視頻自動化編輯。

△生數科技視頻生成效果（中）和Runway生成效果（右）

論3D生成，團隊提出新算法ProlifcDreamer，從貝葉斯建模和變分推斷的角度，重新形式化了text-to-3D問題。

該技術能夠在無需任何3D訓練數據的前提下，通過文本描述，自動生成高質量帶紋理的三維網格與NeRF圖。

包括生成復雜效果和360°場景、根據同樣的描述生成不同形式的3D內容。

以及首個實現了基于三視圖自動生成高質量的3D內容，“是目前業內最接近產業級應用的3D生成效果”。

論圖像生成，團隊旗下多模態大模型UniDiffuser，今年3月開源，是首個基于Transformer的多模態擴散大模型。

能夠很好地在構圖、風格、畫面精準度等方面把握用戶意圖。

現狀，是“正自研新一版的產業級模型，其中，圖像生成效果已超過Stable Diffusion最新版基礎模型水平”；

計劃，是“將于年內趕超Midjourney最新版本”。

并且透露道，過去兩年，生數科技團隊在ICML、NeurIPS、ICLR等計算機頂會發了20多篇相關論文，擴散模型是團隊的主要發力陣地。

先后提出的采樣算法Analytic-DPM、DPM-Solver等成果，被DALL·E、Stable Diffusion等應用。

論文成果頗豐，生數科技接下來的任務，就是把基礎科研推向應用市場。

生數科技背后團隊

生數科技領兵沖刺的帶頭人朱軍，IEEE Fellow，現任清華大學計算機系教授。

同時也是清華人工智能研究院副院長，清華智能技術與系統國家重點實驗室主任，智源首席科學家。

求學期間，他在清華計算機系拿下本科和博士學位，師從中國科學院院士、清華計算機系教授張鈸。

△朱軍

2011年，在張鈸的邀請下，朱軍回到清華計算機系任教。

去年，師徒二人圍繞擴散概率模型合作的工作《Analytic-DPM: an Analytic Estimate of the Optimal Reverse Variance in Diffusion Probabilistic Models》，拿下ICLR 2022杰出論文獎。

朱軍長期從事機器學習、貝葉斯方法、深度學習、數據挖掘等方面的研究，在頂會ICML、NIPS、IJCAI、AAAI、 JMLR、PAMI等發表論文100余篇，連續多年擔任ICML、NeurIPS領域主席。

（貝葉斯方法是自然語言處理、機器學習、圖像識別等AI領域的重要基礎。）

2020年，朱軍團隊發布深度強化學習平臺Tianshou天授。

這是一個針對強化學習的靈活可靠的基礎設施，能夠以極簡代碼極速實現強化學習的諸多算法和功能，在GitHub上有用6.4k+星星。

話說回來，生數科技不是朱軍在科研和產業之間的第一次嘗試。

他的首次創業要回溯到2018年。當時，他支持自己的學生田天創辦了公司瑞萊智慧RealAI，專注提升人工智能的安全性。

并且和張鈸共同擔任該公司的首席科學家。

這一次正式入局大模型，朱軍再次選擇站在新公司“運籌帷幄”的位置上。

而根據企查查App資料，成立于3月的生數科技，在4月時進行了一次法人變動，從“田天”變更為“唐家渝”。

唐家渝其人，現在是生數科技的聯合創始人兼CEO。

他同樣畢業自清華大學計算機系，師從NLP組教授孫茂松。

此前，對唐家渝外界的主要公開身份是瑞萊智慧的副總裁，先后負責公司產品團隊、AI安全產研團隊及業務。

而從再往前的簡歷可以看到，唐家渝曾在騰訊優圖實驗室工作。

△唐家渝

最新能公開的消息是，生數科技團隊近期在擴散模型工作上，提出了一種新的訓練策略，能夠盡可能用較少的標注，持續優化多模態生成效果。

如此看來，生數科技的多模態大模型可能武力值要再+1了？

以及不得不感慨一句，清華系AI初創公司在這一波大模型創業中，真的是風頭無兩。

哪怕單純從數量上說，生數科技也已經是又雙叒叕一個了～

參考鏈接：
[1]https://github.com/thu-ml/tianshou
[2]https://www.cs.tsinghua.edu.cn/info/1121/3551.htm
[3]https://www.qcc.com/firm/3903aa13076b2df3918d75f504bb9395.html