3D光場重建率先被中國團隊推向零售商用!谷歌同款技術,哈佛高材生創辦,高通投資認定
模擬人眼,所見即所得
楊凈 發自 凹非寺
量子位 報道 | 公眾號 QbitAI
最近,大家都在討論元宇宙。那是否有想過,在元宇宙里應該會如何購物?
是像這樣,在手機端就能看到跟線下店一模一樣的完整實物?
還是足不出戶就可以美美的線下店?
又或者是,看上哪款就試哪款?
旁友們,是不是以為這就是搞個3D模擬,或者電影特效那種后期制作?
NoNoNo,其實都不是。
這個用到的是光場技術,模擬人眼,所見即所得。
這技術可來頭不小。
前段時間谷歌I/O大會亮相的裸眼3D通話,就是基于這個原理——
將空間里人眼看到的光線進行采集重建,重現真實的三維世界。
如果把它用到我們日常的穿衣住行上,簡直“高質量”了有木有!
事實上,已經有公司做到了。
而且還是一家中國公司——奧本未來,哈佛團隊班底,那幾張畫面正是他們與幾大品牌商的合作。
那么具體是如何實現這種逼真感呢?
什么是光場技術?
提到光場,就要說到我們的視覺感知。
人類能看到所在的世界,就是通過人眼,來接收現實場景中的光信息,從而進行感知。
如果我們能把空間中的光都記錄下來,那我們就可以從任意角度、任意路徑,去觀察,去體驗這個空間,就像到現場一樣。
元宇宙電影《Ready Player One》里,主角進入前人的記憶信息,各種漫游,甚至查看細節來破案,要真的實現這樣的場景,就需要用到光場技術!
光場技術,記錄了七個維度的信息。
他們分別是場景中任意點的位置(x, y, z),用來表示它發光方向的水平角度和垂直角度(θ, Φ),發出光線的波長(λ)以及時間(t)。
別小看這七個維度,它就已經能對場景100%光線描述。
人看到什么,它就捕獲到了什么,所以能根據觀看需求任意調整視點、焦距和景深。
實際上光場技術之外,也有其他的方式來記錄空間信息。
比如三維建模。相信玩3D游戲的旁友很熟悉了。要實現逼真的3D模型,且不說逼真的實時光照需要巨大的算力,單就光照、材質、幾何等要有極高的保真度,就已經極具挑戰性了。
或者使用一些攝影測量或者三維掃描的設備,但更多細節無法捕捉到,離電影里逼真的渲染效果相去甚遠。
所以光場采集無疑是短時間內最快實現商業化的解決方案。
奧本未來就是研發的這項技術,有這幾方面的的優點。
首先,采集設備比較成熟。只要一部手機就可以做光場的采集。
以往學界做光場采集,動輒就是幾百個相機的陣列。
要么是由幾百個小攝像頭集打造的光場相機。
但奧本未來的技術團隊表示,
采集過程可以使用任意相機,蘋果手機后攝也可以。
但為了保證照片質量,一般使用單反相機。
此外,技術人員還透露,通常一件典型的商品只需要采集一兩分鐘的視頻或者一百多張照片。
以往光場數據十分龐大,想要在屏幕上完整渲染出來,需要高性能主機才能做到。但如今通過壓縮算法,普通網頁也能實現逼真效果。
比如,京東APP上試穿三維運動鞋,就用了奧本未來的光場技術。
還有在unity做的三維游戲也用到了光場模型,動起來的那種。
正是基于以上這些技術突破,奧本未來讓真實空間和物體的整套流程變得更加高效。
目前,奧本未來自研了一款光場捕捉器,最小化人為干預,只需連接普通相機,即可快速自動化完成對常見物體的光場采集。
在面對海量SKU的電商行業,從采集、重建、部署到上線平臺整套下來只需要一天就可以完成。
技術人員透露,當中成本只包括兩部分:拍攝照片的人力和云端重建計算的算力,相當于傳統三維建模的十分之一。
不過,他們坦言,當前仍然具有諸多挑戰,比如,大規模場景重現。
跟高奢品牌打交道的奧本未來
最后,再來簡單介紹一下奧本未來。
據官方介紹,它是一家用前沿技術來解決三維內容供給,并致力于將實時三維交互推向更多行業背景的技術公司。
團隊方面,奧本未來由哈佛大學海歸團隊于2016年創立,創始人兼CEO雷宇博士是一名連續創業者,博士畢業于哈佛大學應用物理及材料科學系。
CTO沈方陽博士畢業于北航,虛擬現實領域博士,曾在微軟亞洲研究院、哈佛可視化計算組(Visual Computing Group)從事計算機圖形學和視覺方向研究
此外,技術團隊還來自于哈佛大學圖形學實驗室、北航虛擬現實國家重點實驗室、微軟亞洲研究院、清華、北大、北郵等各高校機構人員組成。目前也在積極廣納英才,比如圖形學程序員了解一下?
融資上,團隊們上輪完成了Pre-A輪融資,由高通、京東領投。此前的天使輪還包括華創資本以及多家清華系基金等投資機構。
截至目前,奧本未來已經落地服務超過30家品牌客戶,都是大家耳熟能詳的著名品牌。
當然也有一些接地氣的平臺合作伙伴,比如京東、微信小程序、天貓等主流電商平臺。
而之所以跟品牌方、電商平臺打交道,源于2019年的洞見。
隨著用戶對電商購物的體驗要求越來越高,3D互動導購內容和場景開始大量增長,
相比與以往圖片、視頻等有限視角,3D素材、3D實時交互以及AR試穿試戴素材相關的需求只會越來越高。
直至現在,電商隨處可見3D內容場景,比如商詳頁、頻道頁、店鋪頁、直播間、搜索頁、會場頁等等。
對于品牌電商來說,一整套低成本、門檻低、輕量級的三維內容方案成為他們的首選。
比如,便攜式采集技術和低門檻的三維編輯工具可以幫助品牌與內容制作者節省制作的成本;
整個編輯存儲發布都在云端,有助于多方協同;整個方案可以支持多平臺發布的屬性。
這么說起來,奧本未來所做的更像是一套底層基礎設施,推動整個購物體驗數字化、沉浸化、智能化。
如今元宇宙概念的爆發,似乎也印證了奧本未來之前的選擇。
至于實現真正的元宇宙,需要更多像奧本未來的公司來共同打造技術底座。
- 空間智能卡脖子難題被杭州攻克!難倒GPT-5后,六小龍企業出手了2025-08-28
- 陳丹琦有了個公司郵箱,北大翁荔同款2025-08-28
- 英偉達最新芯片B30A曝光2025-08-20
- AI應用如何落地政企?首先不要卷通用大模型2025-08-12



