想象一下，桌面上的杂物能自动归位，做饭时厨具能递到手边。纽约大学与芝加哥大学联合研发的“Push-That-There”系统，让这一场景成为现实。该系统能通过语音、手势等多种方式指挥多个机器人协作，精准处理桌面物体，为日常生活与工作提供了全新的自动化解决方案，预示着桌面交互方式的变革。
智能速览
NYU与芝大联合研发，实现多机器人桌面协作。
支持语音、手势等四种交互方式，操作灵活多样。
能识别并搬运任意形状物体，智能避开障碍。
应用场景广泛，覆盖烹饪、远程互动及VR交互。
实测基础任务成功率达100%，桌面操作精准高效。
精华内容
这项技术的魅力在于其强大的交互能力和精准的执行效果。下面将深入剖析其核心技术与创新应用场景，了解它是如何重塑桌面自动化体验的。
核心技术解析
“Push-That-There”系统的核心在于对象级指令与多机器人动态协作算法。系统通过4K摄像头结合定制算法，能自动识别并定位桌面上任意形状和大小的物体，从纸盒到太阳镜均能准确识别。用户无需关心单个机器人的行动路径，只需下达“把杯子放那边”这类对象级指令，系统便会智能分配多个索尼Toio改装机器人协同作业。测试数据显示，该系统在推动、旋转等多个维度上的操作误差极低，例如推动剪刀的旋转时间仅为4.14秒，旋转后误差低至0.76毫米，展现出极高的精度。
四种交互体验
为适应不同场景，系统设计了四种操控方式。GUI控制适合精准远程操作，用户可在电脑端拖拽设定物体的目标位置和轨迹。手势控制则依赖XR设备，通过隔空指认和捏合手势下达指令，科技感十足。语音控制实现了彻底的“hands-free”，直接说出“把剪刀递给我”或“旋转杯子30度”即可。而实体控制模式最为直观，用户手动移动一个物体作为示范，机器人便会自动复刻这一动作，实现批量布局的高效整理，系统甚至能记忆并复原之前的布局。
宝藏应用场景
该技术已展现出广阔的应用前景。在烹饪场景中，它能作为助手，根据语音指令递来厨具或清理台面。远程互动方面，异地家长可通过GUI控制孩子桌上的字母玩具拼单词，或将玩偶移动以配合故事讲解，实现有温度的“tangible”互动。在VR领域，当用户触摸虚拟物体时，机器人可推动现实道具提供相应的触觉反馈，并在切换场景时自动递上VR控制器，实现了虚拟与现实的无缝衔接体验。
“Push-That-There”系统不仅在技术上实现了多机器人协作的突破，更在交互层面为人与物理世界的沟通开辟了新路径。它将复杂的机器人操作简化为自然的人类行为，预示着未来桌面自动化将更加智能和人性化。当机器人真正成为我们生活与工作的得力助手时，世界会变成什么样？
