除了日更圖文,
最近我拍的短視頻清晰度已經卷到99%了,燈光,拍攝設備,后期流程,能優化的幾乎都到頭了。
但我想玩點不同的,我背后的空間本身是不是也能成為創作的一部分,用Agent來為我規劃每一個角落。我有個很喜歡的科技圈博主@貪玩歌姬小寧子,她每次aroll拍攝每一次都會重新布景,
![]()
好玩,想學,我的思路是這樣子的,
我沒那么大的團隊和空間,但我可以用Agent來設計空間里面可替換的物品,組合出不同的搭配,這樣我除了ai測評題材,還可以做DIY,科普和數碼。
于是,我跟加強過Agent能力的豆包1.8一拍即合,
![]()
昨天在火山引擎2025年冬季的原動力大會上已經看到很多離譜的案例了。
長話短說,
這次升級了工具調用,多輪指令遵循和多模態理解能力。1秒1幀的情況下可以理解20分鐘的中長視頻。
平時測試模型的代碼能力已經快膩了,前端,3D建模,寫作,物理模擬老四樣,感覺在同一套里圈圈圓圓圈圈,
還是做一個能影響物理世界的Agent有挑戰性。
![]()
一起來頭腦風暴一下把大象放進冰箱
把一個空間輕裝修要分幾步,
模型要能讀取視頻,理解已有的空間關系吧,還需要把不同的場景搭配記錄到本地,
最好它還會點CAD圖,說不定能幫我找到現在租的這間房子里有沒有隱藏的可改造角落,或者分析出有哪些尺寸特殊的家具是需要提前去定制的。
定制的話就要全網比價,這個Agent需要聯網,把搜索到的信息整理成文檔并自動發送給我。
我花了小兩周的時間,在Trae+MCP上實現了這個Agent的完全體。所以讓我來一個個模塊介紹一下,
讀取本地的視頻和圖片,是我的好朋友@夢飛直接用的豆包多模態能力封裝成MCP。
每個MCP的配置教程我都打包好了,還是公眾號回復“豆包1.8”就行
![]()
原理很簡單,就是把視頻和圖片上傳到火山引擎的TOS對象存儲,然后就可以通過火山引擎的服務獲取到視頻解析后的文字版描述。

上傳 # 本地視頻 到TOS,然后分析視頻的場景結構,告訴我哪些場景適合剪輯成短視頻:
![]()
豆包給我的回復是,
視頻中的照片墻和樂高墻是很有記憶點的品牌資產,建議在我以后錄制真人出鏡視頻時,將其作為固定的背景。
以及我需要一件能夠撐起畫面專業度的核心家具。一個升降式的實木長桌來取代我的白色異形桌,方便我切換坐姿和站姿,以及拍AI硬件的特寫。
因為我覺得文字溝通不夠直觀,我還給豆包1.8加裝了火山引擎版本的jimeng-ai-mcp,讓它可以生成效果圖,
![]()
為了不占地,我還設計了一個沒有桌腳的升降桌,重新設計了一下打光系統,
![]()
更新裝修進度文件我用的是Excel MCP。我一開始用的是Filesystem,但它只能進行簡單的讀寫,而豆包1.8+Excel MCP組合后能理解表格的結構,它知道什么是行,什么是列,能把信息填入對應的單元格。
![]()
手搓的過程中,我還找到了目前租的房子的平面圖,加上我現場的補充圖片(因為會有添置的一些家具),一起丟給豆包1.8,讓它給我更多的空間搭配建議。
![]()
![]()
為了更直觀,我用豆包生圖重現了一套方案的預覽圖。
![]()
在本地搭Agent有一個隱形的好處,就是你可以像搭樂高一樣,自由搭配你需要的聯網MCP。
我的經驗是國內信息博查,國外信息Exa,組合起來用。
當豆包確定了需要定制的家具列表和尺寸后,我授權它去全網搜索信息,對比不同品牌、材質、價格,把最合適的幾個選項,連同購買鏈接和參數,整理出來。
接了Tripo3D的MCP后,還可以按照尺寸定制一個簡單的沙發建模,要是能加上材質配個云朵沙發就更好了。
![]()
最后,豆包將這一切匯總,把當天的進度更新、下一步的計劃、還有家具的備選清單,自動做成一個多維表格,記錄有變化的時候推送給我。
![]()
當這個流程第一次完整跑通的時候,
我實打實感覺到這些會消耗我心力的檢查、搜索、對比、整理工作,都被它接管了。我只需要專注于整個項目里最核心、最享受的部分,
也就是最初的創意和最終的決策。
這次的體驗,讓我對AI影響物理世界這件事,有了點想法。它讓我從工作室改造計劃,回到了我的真實生活,
一個更小,但可能更迫切的需求上。
那就是,我真的很想買個按摩椅啊啊啊。
因為目前房間不大,每次想到要去測量尺寸,上網搜尋各種小型號的按摩椅,再在腦子里模擬把它放在哪個角落不會擋路,這一系列瑣碎的步驟一拖再拖。
于是,按摩椅它整個雙十一就一直躺在我的購物車里。但現在,我有了新的思路。我完全可以拿起手機,對著我的房間拍一段視頻,
然后把視頻丟給豆包,直接告訴它,我想在這個房間里放一個按摩椅,幫我規劃一下。
它完全有能力通過視頻理解我房間的空間布局,分析出可行的擺放位置,再去網上尋找符合空間尺寸的商品,甚至可以告訴我,如果想把它放在窗邊,我可能需要把那個書架往左移動五十厘米。
一個讓我頭疼不已的空間規劃問題,
就變成了一個可以執行的方案。
過去半年,我會覺得AI要真正影響和改造物理世界,是需要重依賴物理設備的,比如眼鏡、手表,或者各種形態掛件。
但這次構建Agent的過程,
我發現其實不需要等,
其實有臺手機就夠了,
我的按摩椅可算找到幾個完美適配的角落,
![]()
朝向都安排好了,
激情下單!
@ 作者 / 卡爾
最后,感謝你看到這里如果喜歡這篇文章,不妨順手給我們點贊|在看|轉發|評論
如果想要第一時間收到推送,不妨給我個星標
如果你有更有趣的玩法,歡迎在評論區和我聊聊
更多的內容正在不斷填坑中……
![]()
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.