今年的比赛中,赛会组织者了一个人体骨骼-模型

简介: 今年的比赛中,赛会组织者了一个人体骨骼-模型,该模型是斯坦福国家医学康复研究中心研发的 Opensim 模型,拥有人类腿部绝大多数真实骨骼、关节和肌肉的精细仿真

雷锋网 AI 科技评论消息,距 NIPS 2018 召开还有不到一个月的时间,NIPS 2018 上的各种技术挑战赛也接近尾声。

关于挑战赛的详细信息,请参见:距 NIPS 2018 还有小半年,会上的各种挑战赛已经开始啦在上周结束的 2018 人工智能假肢挑战赛(AI for Prosthetics Challenge)中,来自中国的技术团队 Firework 一举击败全球 400 多支参赛团队,以 9980.46 的得分夺得冠军,领先第二名高达 30 多分。

人工智能假肢挑战赛是由斯坦福大学神经生物实验室与EPFL 联合举办的强化学习赛事,旨在通过将强化学习应用到人体腿部骨骼仿真模拟模型的训练,从而加快人体假肢领域的相关研究,并开创该领域的研究的新方法。

今年的比赛中,赛会组织者了一个人体骨骼-模型,该模型是斯坦福国家医学康复研究中心研发的 Opensim 模型,拥有人类腿部绝大多数真实骨骼、关节和肌肉的精细仿真。

参赛者需要根据该模型中多达 100 个以上的状态,来决定模型肌肉的信号,然后控制该模型的肌体行走。

而今年除了将整个模型运动控制从 2D 改为 3D 外,还引入带有假肢的模型,同时模型的假肢不可控制,模型肌体行走的速度也有要求,并且还需要在第二轮比赛中按照事先未知的指定速度进行切换。

在此次比赛中,首先通过上千台机器的 CPU 集群来加速模拟环境,利用 RPC 机制进行机器间通信,从而能在高性能 GPU 上进行高效的模型训练。

其次,利用Target Driven Deep Deterministic Policy Gradient (Target Driven DDPG),使得模型能够应对较大空间和连续动作空间的挑战,最终也使得一个单一模型能够学习多种速度和姿态。

第三,在算法层面,通过 multi-head bootstrapping,能够更高效的对巨大的解空间进行探索(Exploration),同时还将旋转不变性等各类特征处理方式,以及不断实验累计的各类 reward shaping 方法应用其中。

而本次比赛中所展现出的技术实力,再次证明了在强化学习相关技术上的积累也能够进一步推广到复杂机器人控制、自动驾驶等更多工业领域。


以上是文章"

今年的比赛中,赛会组织者了一个人体骨骼-模型

"的内容,欢迎阅读石头游戏网的其它文章