量子位 25-10-28 11:24
微博认证:量子位官方微博

#一行pip让机器人学会爬楼##开箱即用机器人自主导航#

机器人可以自主上楼了,不需要调参的那种。

开源团队DIMENSIONAL最近放出两个视频,展示了他们在机器人导航与感知上的最新成果——

1)四足机器人自动上下楼,还能边走边画地图

只需要一个pip安装命令,这条标有“DIMENSIONAL”的机器狗就能完成多楼层自主导航。

视频中,它在复杂工地中平稳避障、识别楼梯结构、完成从一层到二层的全流程。

画面右上角还能看到它构建的3D地图,LiDAR数据实时刷新,场景结构与机器人位置一目了然。

2)空间记忆系统上线,机器人也能“记住你钥匙放哪了”

另一段演示展示了更“聪明”的一面:机器人现在不仅能识别场景,还能记住过去发生的事情,并据此推理。

视频中,用户通过自然语言提问,比如“你刚才在厨房看到什么”,系统会在空间点云中检索相关时空信息,再用文字或画面回答你。

这背后用到的是一种叫Spatiotemporal RAG的技术,把RAG(检索增强生成)带入了3D空间与时间维度,甚至可以在每个体素上打上“语义标签”。

两套技术都是开源的,硬件不限,只要你有个机器人,就能直接跑起来。