
好玩,想学,我的思路是这样子的,我没那么大的团队和空间,但我可以用Agent来设计空间里面可替换的物品,组合出不同的搭配,这样我除了ai测评题材,还可以做DIY,科普和数码。于是,我跟加强过Agent能力的豆包1.8一拍即合,

昨天在火山引擎2025年冬季的原动力大会上已经看到很多离谱的案例了。
长话短说,这次升级了工具调用,多轮指令遵循和多模态理解能力。1秒1帧的情况下可以理解20分钟的中长视频。平时测试模型的代码能力已经快腻了,前端,3D建模,写作,物理模拟老四样,感觉在同一套里圈圈圆圆圈圈,还是做一个能影响物理世界的Agent有挑战性。

一起来头脑风暴一下把大象放进冰箱
把一个空间轻装修要分几步,模型要能读取视频,理解已有的空间关系吧,还需要把不同的场景搭配记录到本地,最好它还会点CAD图,说不定能帮我找到现在租的这间房子里有没有隐藏的可改造角落,或者分析出有哪些尺寸特殊的家具是需要提前去定制的。定制的话就要全网比价,这个Agent需要联网,把搜索到的信息整理成文档并自动发送给我。我花了小两周的时间,在Trae+MCP上实现了这个Agent的完全体。所以让我来一个个模块介绍一下,读取本地的视频和图片,是我的好朋友@梦飞直接用的豆包多模态能力封装成MCP。

原理很简单,就是把视频和图片上传到火山引擎的TOS对象存储,然后就可以通过火山引擎的服务获取到视频解析后的文字版描述。

··

豆包给我的回复是,视频中的照片墙和乐高墙是很有记忆点的品牌资产,建议在我以后录制真人出镜视频时,将其作为固定的背景。以及我需要一件能够撑起画面专业度的核心家具。一个升降式的实木长桌来取代我的白色异形桌,方便我切换坐姿和站姿,以及拍AI硬件的特写。因为我觉得文字沟通不够直观,我还给豆包1.8加装了火山引擎版本的jimeng-ai-mcp,让它可以生成效果图,

为了不占地,我还设计了一个没有桌脚的升降桌,重新设计了一下打光系统,

更新装修进度文件我用的是Excel MCP。我一开始用的是Filesystem,但它只能进行简单的读写,而豆包1.8+Excel MCP组合后能理解表格的结构,它知道什么是行,什么是列,能把信息填入对应的单元格。

手搓的过程中,我还找到了目前租的房子的平面图,加上我现场的补充图片(因为会有添置的一些家具),一起丢给豆包1.8,让它给我更多的空间搭配建议。


为了更直观,我用豆包生图重现了一套方案的预览图。

在本地搭Agent有一个隐形的好处,就是你可以像搭乐高一样,自由搭配你需要的联网MCP。我的经验是国内信息博查,国外信息Exa,组合起来用。当豆包确定了需要定制的家具列表和尺寸后,我授权它去全网搜索信息,对比不同品牌、材质、价格,把最合适的几个选项,连同购买链接和参数,整理出来。
接了Tripo3D的MCP后,还可以按照尺寸定制一个简单的沙发建模,要是能加上材质配个云朵沙发就更好了。

最后,豆包将这一切汇总,把当天的进度更新、下一步的计划、还有家具的备选清单,自动做成一个多维表格,记录有变化的时候推送给我。

当这个流程第一次完整跑通的时候,我实打实感觉到这些会消耗我心力的检查、搜索、对比、整理工作,都被它接管了。我只需要专注于整个项目里最核心、最享受的部分,也就是最初的创意和最终的决策。这次的体验,让我对AI影响物理世界这件事,有了点想法。它让我从工作室改造计划,回到了我的真实生活,一个更小,但可能更迫切的需求上。那就是,我真的很想买个按摩椅啊啊啊。因为目前房间不大,每次想到要去测量尺寸,上网搜寻各种小型号的按摩椅,再在脑子里模拟把它放在哪个角落不会挡路,这一系列琐碎的步骤一拖再拖。于是,按摩椅它整个双十一就一直躺在我的购物车里。但现在,我有了新的思路。我完全可以拿起手机,对着我的房间拍一段视频,然后把视频丢给豆包,直接告诉它,我想在这个房间里放一个按摩椅,帮我规划一下。它完全有能力通过视频理解我房间的空间布局,分析出可行的摆放位置,再去网上寻找符合空间尺寸的商品,甚至可以告诉我,如果想把它放在窗边,我可能需要把那个书架往左移动五十厘米。一个让我头疼不已的空间规划问题,就变成了一个可以执行的方案。过去半年,我会觉得AI要真正影响和改造物理世界,是需要重依赖物理设备的,比如眼镜、手表,或者各种形态挂件。但这次构建Agent的过程,我发现其实不需要等,其实有台手机就够了,我的按摩椅可算找到几个完美适配的角落,

朝向都安排好了,激情下单!
@ 作者 / 卡尔
