#一行pip让机器人学会爬楼##开箱即用机器人自主导航#
机器人可以自主上楼了,不需要调参的那种。
开源团队DIMENSIONAL最近放出两个视频,展示了他们在机器人导航与感知上的最新成果——
1)四足机器人自动上下楼,还能边走边画地图
只需要一个pip安装命令,这条标有“DIMENSIONAL”的机器狗就能完成多楼层自主导航。
视频中,它在复杂工地中平稳避障、识别楼梯结构、完成从一层到二层的全流程。
画面右上角还能看到它构建的3D地图,LiDAR数据实时刷新,场景结构与机器人位置一目了然。
2)空间记忆系统上线,机器人也能“记住你钥匙放哪了”
另一段演示展示了更“聪明”的一面:机器人现在不仅能识别场景,还能记住过去发生的事情,并据此推理。
视频中,用户通过自然语言提问,比如“你刚才在厨房看到什么”,系统会在空间点云中检索相关时空信息,再用文字或画面回答你。
这背后用到的是一种叫Spatiotemporal RAG的技术,把RAG(检索增强生成)带入了3D空间与时间维度,甚至可以在每个体素上打上“语义标签”。
两套技术都是开源的,硬件不限,只要你有个机器人,就能直接跑起来。
