首页 / 行业
NVIDIA AI使用视频输入改进运动捕捉动画模型
2022-04-06 16:42:00
来自 NVIDIA 、多伦多大学和矢量研究所的研究人员提出了一种新的运动捕捉方法,即使用昂贵的运动捕捉硬件。它仅使用视频输入来改进过去的运动捕捉动画模型。
YouTuber 和图形研究人员 Károly Zsolnai-Fehér 博士在他的 YouTube 系列文章 两分钟的论文 中详细介绍了这项创新技术的研究。这段视频强调了研究人员如何仅通过视频输入捕获使用人工智能的个体,并将其转化为数字化身。然后,他们可以给阿凡达一个物理模拟,以消除脚滑动和时间不一致或闪烁的传统挑战。
“在本文中,我们引入了一种新的框架,用于从原始视频姿势估计中训练运动合成模型,而不使用运动捕捉数据,” Kevin Xie 在论文中解释道。
“我们的框架通过接触不变优化(包括接触力的计算)实施物理约束,从而细化噪声姿势估计。然后,我们在细化的姿势上训练时间序列生成模型,合成未来的运动和接触力。我们的结果表明,这两种姿势的性能都有显著提升通过我们基于物理的细化和视频的运动合成结果进行估计。我们希望通过利用大量在线视频资源,我们的工作将导致更具可伸缩性的人体运动合成。”
图 2 。 AI 使用运动捕捉来捕捉运动,将个人动画化为数字化身,并提供物理模拟来准确模拟现实生活中的运动。
这个框架使人们离在虚拟世界中工作和玩耍更近了一步。它将帮助开发人员以更便宜的价格制作人体运动动画,并提供更丰富的运动多样性。从视频游戏到虚拟世界,这个框架无疑将影响我们可视化人类运动合成的方式。
关于作者
Nathan Horrocks 是 NVIDIA Research 的内容营销经理。他重点强调了 NVIDIA 实验室在世界各地进行的惊人研究。
审核编辑:郭婷
最新内容
手机 |
相关内容
智能传感器助力打造数字经济数字世
智能传感器助力打造数字经济数字世界,数字,经济,传感器,助力,智能,及时发现,PCM1801U智能传感器是一种能够感知环境并将感知结果转FPGA学习笔记:逻辑单元的基本结构
FPGA学习笔记:逻辑单元的基本结构,结构,单元,逻辑运算,数字,信号,结构单元,FPGA(Field-Programmable Gate Array)是一种可编程逻辑器件STC15W芯片A/D、D/A转换的简单使用
STC15W芯片A/D、D/A转换的简单使用,简单使用,转换,芯片,模拟,输入,输出,STC15W系列芯片是一种高性能的单片机芯片,具有丰富的外设资Efuse是什么?聊聊芯片级的eFuse
Efuse是什么?聊聊芯片级的eFuse,状态,编码器,故障,加密,芯片,配置信息,Efuse是一种可编程的电子熔断器,用于在芯片级别实现非易失性存所有遥不可及,终因AI触手可及
所有遥不可及,终因AI触手可及,出行,平台,无人驾驶汽车,导致,人工智能,学习,人类历史上,有许多事物曾被认为是遥不可及的,然而随着科技面向6G+AI,鹏城云脑的演进
面向6G+AI,鹏城云脑的演进,鹏城,人工智能,数据存储,脑可,智能终端,智能,随着科技的不断进步,人们的生活方式也在不断改变。6G+AI(人工应用在智能空调中的数字温度传感芯
应用在智能空调中的数字温度传感芯片,数字,芯片,温度,智能,数据,实时,数字温度传感芯片是一种用于测量环境温度的MAX3243CAI集成电清华研制出首个全模拟光电智能计算
清华研制出首个全模拟光电智能计算芯片ACCEL,芯片,智能计算,模拟,清华,混合,研发,清华大学最近成功研制出了一款全模拟光电智能计算