World Labs向一般使用者開放世界模型Atlas,可透過一張或多張照片建立可探索的3D空間。使用者能在網頁上建立並編輯場景,開發者則可透過API將功能整合至自家服務。
Atlas包含以照片重建場景的Viewfinder、可自行設計場景結構的Chisel、3D轉換功能,以及供開發者使用的API。
Atlas於9月1日首次亮相時,僅向獲選合作夥伴提供搶先體驗。11月5日Frameboy公開時,Viewfinder仍處於非公開測試階段;如今已開放一般使用者使用。
Viewfinder可讀取照片或生成圖像來重建場景,使用者能以一張或多張圖像作為起點。BlockBeats報導指出,Atlas也能生成照片中未呈現的空間。
使用者可設定虛擬攝影機的位置與移動路徑,從不同角度查看場景並製作影片。若要重現真實地點,則需要區分照片實際拍到的部分與新生成的部分。
與從照片開始的Viewfinder不同,Chisel讓使用者自行設定場景的基本結構。使用者可調整房間格局與物件位置,再根據這些配置生成場景。
完成的場景可儲存為3D Gaussian Splatting格式,也能轉換成具有實際幾何結構的3D網格。
World Labs表示,3D網格可用於遊戲與互動環境,也能匯入Blender等3D製作工具。
開發者API提供場景生成、影片製作與3D重建功能,讓開發者能將這些功能整合至自家產品。
World Labs於11月5日公開的研究展示工具Frameboy,會將雲端GPU生成的畫面串流至瀏覽器。使用者操控攝影機時,畫面更新率最高可達每秒15張;Frameboy也能連接Viewfinder建立的場景,供使用者即時探索。
World Labs列出的應用領域包括電影與視覺特效、建築與設計,以及機器人研究。3D網格轉換功能則可將生成場景用於遊戲或其他互動環境。
Comment 0