1X’s :神经网络视觉端到端学习机器人
该机器人能够完全独立地执行任务,无需人类远程操控或通过预设脚本。
所有动作都是实时通过神经网络计算得出。
机器人基于视觉的端到端神经网络直接从图像中学习如何控制其动作,包括驾驶、操纵手臂和抓取器、控制躯干和头部等。
演示视频未加速剪辑...
通过训练,机器人能够理解和执行一系列广泛的物理行为,如清洁、整理、拾起物体以及与人类和其他机器人进行社交互动。
项目采用了一种策略,通过在几分钟内收集数据并在桌面GPU上进行训练,快速微调模型以适应特定的任务,从而使机器人能够迅速学习新的技能。
技术原理:
1、演示数据集构建:团队首先收集了一组包含30个EVE机器人执行各种任务的演示数据。这些数据非常多样,包括机器人进行清洁、整理家庭、拾起物体以及与人和其他机器人社交互动等物理行为的实例。
2、基础模型训练:使用这些演示数据,团队训练了一个“基础模型”。这个模型能够理解一系列广泛的物理行为,为机器人提供了对各种任务基本动作的理解基础。
3、模型微调:接下来,团队针对特定的任务类型对基础模型进行了微调,生成了多个专门的能力模型。例如,他们创建了专门用于门操作的模型和另一个专注于仓库任务的模型。
4、进一步微调以适应特定任务:团队进一步微调这些专门模型,使它们能够执行更具体的任务,比如打开一个特定的门。这种微调过程使模型能够对特定的行为或动作有更精确的理解和执行能力。
5、快速引入新技能:通过这种分层微调策略,团队可以在短时间内(仅几分钟的数据收集和在桌面GPU上的训练)快速地为机器人引入新的技能。
详细:https://1x.tech/discover/all-neural-networks-all-autonomous-all-1x-speed
演示视频中没有远程操控、没有计算机图形、没有剪辑、没有视频加速、没有脚本轨迹回放。一切都通过神经网络控制,完全自主,以1X速度进行。
机器人硬件信息:
1X的目标是设计出能够在任何场景中有效工作的通用安卓机器人,以应对现实世界的不可预测性。
EVE是1X技术公司开发的一款高级安卓机器人,旨在为商业行业提供智能的工作解决方案。EVE设计用于执行各种任务,从物流操作到保安巡逻等。这款机器人集安全性、平衡性和智能于一身,可以轻松融入现有的工作流程中,与团队无缝协作。
主要特点包括:
安全第一:每台EVE在部署前都会在真实世界场景中进行测试,其软性、仿生机械设计从内而外确保安全性,适合在各种空间中工作。
平衡性能:EVE能够处理重物,同时也足够柔和以处理易碎物品,无论是在仓库还是分发中心,都能轻松融入您的物流工作流程。
智能行为:EVE通过观察专家的动作进行学习,如移动设备、开门、完成订单等,然后通过其体现的学习模型重现动作并开始工作。随着时间的积累,EVE在基础知识上构建经验,使得未来任务(如“移动那个箱子”)变得更加简单。
EVE的规格:
高度:1.86米
重量:86公斤
最高速度:14.4公里/小时
携带能力:15公斤
运行时间:6小时
EVE通过人工智能自主操作,默认情况下能够导航工作空间,执行如开不同手柄的门、从远处识别人或物体、像人类一样穿越非结构化空间的任务。EVE在帮助人类操作者执行任务时,利用其力量、精确度和传感器执行如在办公楼巡逻和检查员工ID徽章的任务。EVE会关注潜在的危险或错误,并在操作者需要接管时报告。