|
关于Figure AI人形机器人支持语音指令并结合视觉数据和自然语言提示实现实时控制的相关内容,具体介绍如下:
Helix系统核心技术
- 双模块设计:第一个模块是拥有70亿参数的多模态语言模型,能以7至9赫兹的频率处理语音和视觉信息,相当于机器人的“大脑”。第二个模块是有8000万参数的AI,负责将语言模型的指令转化为精确动作,处理频率高达200赫兹。
- 低训练数据量:仅需500小时的训练数据,远低于同类项目要求。且依靠机器人内置的嵌入式GPU运行,在商业应用上具备可行性。
- 多自由度控制:能够同时控制35个自由度,可实现从单个手指动作到头部、躯干等多个部分的精细控制。
实际应用表现
- 复杂动作执行:在官方演示视频中,两台搭载Helix系统的机器人可在厨房环境中协作,将食物放入冰箱,无需针对这些物体进行预先训练。
- 适应环境变化:能适应不同光照条件下的物品定位,当遇到突发状况,如主人突然移动餐桌时,还能自动重新规划行进路线。
推出意义
- 提升交互能力:使机器人与人类的互动更加自然化,用户只需用自然语言提问,机器人就能识别并操作数千种形状、大小、颜色和材料各异的家居用品。
- 推动行业发展:对家用机器人规模化至关重要,有望推动人形机器人行业技术进步,为智能家居的未来发展提供全新思路。
|
|