12月27號,阿里巴巴大淘寶技術(shù)于第十一屆國際圖像圖形學(xué)學(xué)術(shù)會議上發(fā)布了業(yè)界首個基于神經(jīng)渲染的自研商品三維建模產(chǎn)品Object Drawer。可將NeRF的推理速度提升10000倍,訓(xùn)練速度提升10倍以上,同時宣布面向?qū)W術(shù)界和普通用戶開放,供廣大開發(fā)者及科研人員交流體驗。目前,Object Drawer已經(jīng)提供給部分天貓、淘寶商家使用。
隨著VR/AR應(yīng)用的發(fā)展,商品三維建模需求持續(xù)增加,商品建模需求可能達到現(xiàn)在的100倍以上。目前的商品三維建模依賴于手工建模,建模需要幾小時到幾天時間,費用為數(shù)百到數(shù)千元,即使是花費巨大的時間和金錢,商品還原度依然存在許多問題。
Object Drawer在1920*1080分辨率下,可達到200FPS的推理速度,在手機上可達到30FPS,實現(xiàn)了實時高清可交互的三維模型。與此同時,模型的訓(xùn)練時間僅僅需要4小時,模型大小僅僅需要20M,同時,對于任意視角查看,商品三維模型都達到實拍照片的展示效果,實現(xiàn)了三維建模一直追求的自動高精度還原。Object Drawer不需要依賴特定設(shè)備,只需要手機環(huán)繞目標商品進行視頻拍攝,就可以完成自動重建,所生成的三維建模效果達到高精模型還原度。
阿里巴巴資深算法專家、大淘寶技術(shù)XR Team算法負責(zé)人趙斌強(樂田)表示,我們將持續(xù)去突破Object Drawer的限制,去打造一系列的工具,從自動裝修到服裝的試穿,幾乎涵蓋整個購物的流程。未來,不管是AR眼鏡還是手機都能夠使用。大淘寶技術(shù)XR Team構(gòu)想的終極目標就是讓用戶在虛、實之間無縫地互動。