所有文章 > 正文

卡内基梅隆大学发明新型“翻译器”,可将文字转化为肢体运动

作者: Jansfer

时间: 2019-09-12 15:51

目前,JL2P动画仅限于简笔画,但在未来,将文字翻译成类似人类动作的能力可以帮助人形机器人在现实生活中执行具体任务,还可以作为视频游戏或电影等制作中的虚拟人物动画。JL2P与之前将文字转化为图像的工作是一致的,例如:微软的ObjGAN。

卡内基梅隆大学的人工智能研究人员发明了一种人工智能翻译器,可以将文字翻译成肢体动作。这种方法被称为语言与姿态的联合(JL2P),它将自然语言与三维姿态模型相结合,这种方法重视在转向更困难的任务之前完成较短的任务序列。

目前,JL2P动画仅限于简笔画,但在未来,将文字翻译成类似人类动作的能力可以帮助人形机器人在现实生活中执行具体任务,还可以作为视频游戏或电影等制作中的虚拟人物动画。JL2P与之前将文字转化为图像的工作是一致的,例如:微软的ObjGAN。

02066_quat.2019-07-12-08_45_42.gif

JL2P能够实现一些比如走路、跑步、演奏乐器(如吉他或小提琴)、遵循方向指示(左或右)、或控制速度(快或慢)等指令。这项研究

在7月2日arXiv.org上发表的一篇论文中做了详细介绍,共同作者CMU语言技术研究所的研究员Chaitanya Ahuja也将于9月19日在魁北克举行的3D视觉国际会议上由做详细讲解。

3.gif

JL2P使用KIT动作语言数据集进行训练,该数据集由德国高性能仿人技术公司于2016年推出,将人体运动与自然语言描述相结合,将11个小时的人类运动记录映射到大约8个单词的6200多个英语句子中。JL2P表示,与SRI国际研究人员2018年提出的最先进的人工智能相比,JL2P在人体运动建模方面有9%的改进。

[关于转载]:本文为“AMiner”官网文章。转载本文请联系原作者获取授权,转载仅限全文转载并保留文章标题及内容,不得删改、添加内容绕开原创保护,且文章开头必须注明:转自“AMiner”官网。谢谢您的合作。

二维码 扫码微信阅读
推荐阅读 更多