長期以來,3D重建技術(shù)主要應用于游戲開發(fā)、影視特效等專業(yè)領(lǐng)域,依賴高性能設備與復雜流程,難以真正進入大眾生活場景。
Remy的目標,正是改變這一現(xiàn)狀。
Remy是一款基于3D重建技術(shù)開發(fā)的空間記錄應用,用戶只需使用手機攝像頭進行環(huán)繞拍攝,即可像錄制普通視頻一樣,生成沉浸式3D空間模型,捕捉生活中的真實三維瞬間。Remy生成的3D內(nèi)容以Interactive Photo的形式保存,支持360°自由查看與縮放操作,用戶可輕松用于生活記錄、空間布置、重要場景留存等多種用途。
![]()
HarmonyOS SDK助力,通過AR Engine加速創(chuàng)新落地
Remy能夠在手機端實現(xiàn)高效、穩(wěn)定的3D空間生成體驗,離不開AR Engine的底層技術(shù)支持。
1. 采集端:精準引導讓3D拍攝更“可控”
在拍攝階段,Remy通過AR Engine獲取Camera圖像數(shù)據(jù)和每一幀圖像對應的相機位姿(Pose),基于這些數(shù)據(jù),應用將當前拍攝覆蓋情況實時可視化顯示在軌跡球(Trajectory Ball)上,直觀引導用戶補充未拍攝區(qū)域,避免視角缺失或重建不完整的問題。
這一能力顯著降低了用戶對“如何正確拍3D內(nèi)容”的理解成本,讓普通用戶也能高質(zhì)量完成空間采集。
2. 云端:位姿信息輔助3D高斯重建,并提供尺度信息
云端在進行3D高斯?jié)姙R重建時,AR Engine提供的高精度位姿數(shù)據(jù)可幫助圖像配準,減少傳統(tǒng)重建流程中的計算復雜度:
· 用戶等待時間顯著降低
· 同時有效降低云端計算資源消耗與整體成本
這使得3D重建不再是“高成本、低頻率”的操作,而成為可規(guī)模化、可日常使用的能力。
另外,AR Engine提供的高精度位姿信息賦予重建的模型或場景尺度,Remy基于尺度信息可以方便地生成運鏡視頻,增加可玩性。
3. 用戶端:即時輸出讓等待過程中也有可用體驗
為了進一步優(yōu)化用戶體驗,AR Engine還可在拍攝完成后即時輸出稠密點云數(shù)據(jù)。
在云端重建進行的同時,用戶即可先行查看基于點云的空間預覽內(nèi)容,實現(xiàn):
· 拍完即可看
· 等待不中斷體驗
· 降低“空等”的心理成本
這一設計讓3D內(nèi)容的生成過程更加連續(xù)、自然,顯著提升了整體使用流暢度。
![]()
Remy:讓3D空間成為一種新的記錄方式
通過與HarmonyOS SDK的深度合作,Remy成功將原本復雜、專業(yè)的3D重建技術(shù),轉(zhuǎn)化為普通用戶也能輕松掌握的創(chuàng)作工具。這不僅拓展了移動端3D內(nèi)容的應用邊界,也為“空間影像”這一全新內(nèi)容形態(tài)提供了現(xiàn)實落點。
HarmonyOS SDK未來將繼續(xù)通過AR Engine為開發(fā)者提供穩(wěn)定、易用的AR與空間計算能力,助力更多應用在移動端探索3D、AR與真實世界融合的創(chuàng)新體驗。
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.