详解惯性动作捕捉技术的应用领域
作为一门新兴的动作捕捉技术,惯性动捕的出现,打破了光学动捕占据市场绝对主导的行业格局,被视为动作捕捉界的新生力量。基于惯性传感器系统的动作捕捉技术是一项融合了传感器技术、无线传输、人体动力学、计算机图形学等多种学科的综合性技术,技术门槛要求很高。虽然惯性动作捕捉技术出现的时间并不长,但随着它在各行业中的使用,其卓越的性能很快就显示出来了。
惯性动作捕捉,是一种新型的人体动作捕捉技术,它用无线动作姿态传感器采集身体部位的姿态方位,利用人体运动学原理恢复人体运动模型,同时采用无线传输的方式将数据呈现在电脑软件里。
惯性动作捕捉系统出现之前,最常见的是光学动捕技术。它是通过在演员身上贴marker点,然后用高速摄像机来捕捉marker点的准确位移,再将捕捉数据传输到电脑设备上,由此完成动作捕捉的全过程。光学动捕的整套设备的成本极为昂贵,架设繁琐,易受遮挡或光干扰的影响,给后期处理工作带来很多麻烦。对于一些遮挡严重的动作来说,光学动捕无法准确实时还原例如下蹲、拥抱、扭打等动作。而基于惯性传感器系统的动作捕捉技术的出现,大大改善了这一现状。
和光学动捕技术相比,惯性动作捕捉技术有着对捕捉环境的高适应性,它的技术优势、成本优势和使用便捷的优势,使得它在各行业有着优异的表现。在影视动画、体验式互动游戏、虚拟演播室、真人模拟演练、体育训练、医疗康复等领域,惯性动作捕捉系统都有着明显优于其他设备的特点。
惯性式动作捕捉系统原理
动作捕捉系统的一般性结构主要分为三个部分:数据采集设备、数据传输设备、数据处理单元,惯性式动作捕捉系统即是将惯性传感器应用到数据采集端,数据处理单元通过惯性导航原理对采集到的数据进行处理,从而完成运动目标的姿态角度测量。
在运动物体的重要节点佩戴集成加速度计,陀螺仪和磁力计等惯性传感器设备,传感器设备捕捉目标物体的运动数据,包括身体部位的姿态、方位等信息,再将这些数据通过数据传输设备传输到数据处理设备中,经过数据修正、处理后,最终建立起三维模型,并使得三维模型随着运动物体真正、自然地运动起来。
经过处理后的动捕数据,可以应用在动画制作,步态分析,生物力学,人机工程等领域。
加速度计,陀螺仪和磁力计在惯性动作捕捉系统中的作用
加速计是用来检测传感器受到的加速度的大小和方向的,它通过测量组件在某个轴向的受力情况来得到结果,表现形式为轴向的加速度大小和方向(XYZ),但用来测量设备相对于地面的摆放姿势,则精确度不高,该缺陷可以通过陀螺仪得到补偿。
陀螺仪的工作原理是通过测量三维坐标系内陀螺转子的垂直轴与设备之间的夹角,并计算角速度,通过夹角和角速度来判别物体在三维空间的运动状态。它的强项在于测量设备自身的旋转运动,但不能确定设备的方位。而又刚好磁力计可以弥补这一缺陷,它的强项在于定位设备的方位,可以测量出当前设备与东南西北四个方向上的夹角。
在动作捕捉系统中,陀螺仪传感器用于处理旋转运动,加速计用来处理直线运动,磁力计用来处理方向。通俗易懂地讲——陀螺仪知道“我们是否转了身”,加速计知道“我们运动多长距离”,而磁力计则知道“我们的运动方向”。
在动作捕捉系统中三种传感器充分利用各自的特长,来跟踪目标物体的运动。
惯性动作捕捉技术的优势
技术优势
惯性式动作捕捉系统采集到的信号量少,便于实时完成姿态跟踪任务,解算得到的姿态信息范围大、灵敏度高、动态性能好;对捕捉环境适应性高,不受光照、背景等外界环境干扰,并且克服了光学动捕系统摄像机监测区域受限的缺点;克服了VR设备常有的遮挡问题,可以准确实时地还原如下蹲、拥抱、扭打等动作。此外,惯性式动作捕捉系统还可以实现多目标捕捉。
使用便捷的优势
使用方便,设备小巧轻便,便于佩戴。
成本优势
相比于光学动作捕捉成本低廉,使得其不但可以应用于影视、游戏等行业,也有利于推动VR设备更快地走进大众生活。
总的来说,惯性式动作捕捉技术有着对捕捉环境的高适应性,它的技术优势、成本优势和使用便捷的优势,使得它在影视动画、体验式互动游戏、虚拟演播室、真人模拟演练、体育训练、医疗康复等领域都有着优异的表现。
惯性式动作捕捉系统的劣势及解决
一般情况下惯性式动作捕捉系统采用MEMS三轴陀螺仪、三轴加速度计和三轴磁力计组成的惯性测量单元(IMU, Inertial Measurement Unit)来测量传感器的运动参数。而由IMU所测得的传感器运动参数有严重噪声干扰,MEMS 器件又存在明显的零偏和漂移,惯性式动作捕捉系统无法长时间地对人体姿态进行精确的跟踪。只有解决了这一个问题,才能使惯性式动作捕捉系统在VR行业充分发挥作用。
针对惯性捕捉技术劣势的解决方案
首先对IMU所测得的传感器运动数据做预处理,滤掉原始惯性数据中掺杂的噪声干扰;
然后不断地进行标定和校准,即不断地对各惯性器件进行相应的补偿以解决MEMS器件的零偏和漂移,提高其数据的精确度和可靠程度;
接下来在进行姿态解算,并利用姿态参考系统验证姿态角度数据的精确度,最终实现整个惯性式动作捕捉。
此外,与之不同的是,国内的G-Wearables则采用IK+室内定位技术做主动作捕捉算法,使用惯性式动作捕捉做辅助算法。这套方案中利用室内定位技术对惯性式动作捕捉技术做实时校准,避免了不断校准的麻烦。
IK算法
IK是Inverse Kinematics的缩写,即反向运动学。在人体分层结构中,关节和骨骼实际构成了运动链,比如肩关节、肘关节、腕关节及其子骨骼就是一条运动链,是整个人体运动链上的一条分支,身体即是利用运动链对运动进行控制。运动分为正向运动和反向运动。已知链上各个关节旋转角,求各关节的位置信息和末端效应器(end effector)的位置信息,这是正向运动学的问题;而己知末端效应器的位置信息,反求其祖先关节的旋转角和位置,这是就是反向运动学。
反向运动学根据决定运动的几个主关节最终角度确定整个骨架的运动,通常用于环节物体,由不同运动约束的关节连接成环节构成的分级结构骨架。分级结构骨架由许多采用分级方式组的环节链构成,包括分级结构关节或链,运动约束和效应器,由效应器带动所有部分同时运动。但必须遵循特定的等级关系,以便在变换时阻止各个部件向不同方向散开。如:投球动作,只规定出球的起始位置、终了位置和路径,手臂等即跟随关节的转动可按反向运动学自动算出。反向运动学方法在一定程度上减轻了正向运动学方法的繁琐工作,是生成逼真关节运动的最好方法之一。
IK算法在动作捕捉系统中的应用
如果己知末端效应器的位置信息,反求其祖先关节的旋转角和位置,这是就是反向运动学。也就是我们通过室内定位技术,获取末端效应器的位置信息,然后利用IK算法推算出祖先关节的旋转角和位置,从而知道运动者的运动信息,再利用运动信息实现实时动作跟踪显示。
利用激光定位技术通过墙上的激光发射器扫描佩戴者佩戴的机身上的位置追踪传感器(即IK算法中的末端效应器),从而获得位置和方向信息。具体来说,该室内定位技术是靠激光和光敏传感器来确定运动物体的位置。若干个激光发射器会被安置在对角,形成一个矩形区域,这个区域可以根据实际空间大小进行调整。每个激光发射器内设计有两个扫描模块,分别在水平和垂直方向轮流对定位空间发射横竖激光扫描定位空间。运动者身上有光敏传感器,通过光敏传感器接收到激光的时间计算出光敏传感器的准确位置。
通过激光室内定位技术获取传感器的精确位置后,即可利用IK算法反向推算出祖先关节的旋转角和位置,从而知道运动者的运动信息。但是由于激光定位过程中可能存在遮挡问题,比如下蹲、拥抱、扭打等动作。于是应用惯性传感器做补充跟踪,即当出现遮挡情况时, IK+室内定位相结合的动作捕捉技术无法完全准确的实现,这个时候利用惯性式动作捕捉技术做补充。反过来可以利用室内定位技术对惯性式动作捕捉技术做实时校准,不需要另行校准,从而解决遮挡问题的同时,也避免了惯性式动作捕捉无法长时间精确工作的弊端。
惯性捕捉技术的应用领域
在影视制作、动漫制作、游戏制作领域的应用
就影视制作而言,惯性动捕设备的加入,不但大大提高了拍摄效率,而且降低了后期处理的难度和成本。
我们知道,光学动捕设备无法兼顾实时性与还原性,甚至一些特殊动作也无法实时还原,同时还会受空间的限制。与之相比,惯性传感器动作捕捉系统就大为不同。惯性动捕不但可识别的场景更多,而且管理起来也更加智能。利用全无线传感器来完成电影拍摄过程中的动作捕捉,丝毫不影响演员的穿戴,而且能够保证演员脚步真实平稳地移动,使运动还原自然流畅,甚至一些大动态动作也能顺利捕捉。作为目前市面上性能卓越、易用精准的动作捕捉系统,基于惯性传感器系统的动作捕捉设备一经上市就颇受青睐。
在动漫制作、游戏制作方面,现在很多游戏制作中角色的动作设置,例如武打游戏里的劈砍等动作,都是通过动作捕捉来获取的。正是因为惯性动捕有着良好的实时性和各种技术优势,所以这项技术在动漫、游戏中得以广泛的应用,它使动画画面更加逼真、自然,游戏角色的行动更为自然细腻,对动画品质的提升大有裨益。
在虚拟现实交互体验、游戏互动领域的应用
真人与虚拟角色的实时互动,是动作捕捉技术的一大应用。例如虚拟演播室、电影实时预演、真人与虚拟游戏角色互动等。
虚拟演播室现在已经很成熟了,在很多电视台的栏目中都可以看到类似的场景,基本操作方式就是先让主持人在绿色的幕布下进行拍摄,再实时地用抠背机把人物扣下来附着到虚拟的场景当中。一般的惯性动捕由于虚拟角色位移的原因,没办法实现主持人与虚拟角色的交互,但随着技术的进步,优秀的惯性动作捕捉设备已经能够做到这一点,不但动捕位移误差极小,而且可以做到来回运动数十米或者随意运动持续十分钟,完全能够满足虚拟演播室内主持人与虚拟角色的互动。
关于这一技术的应用,最新的例证是关于2014年世界杯节目的。CCTV5的“我爱世界杯”和CNTV的“超级世界杯”两档节目都用到了惯性动捕技术。在这两档节目的演播厅内,设置了拟真度极高的虚拟球员,在播出的节目中,虚拟球员和现场嘉宾及主持人进行了很好的实时互动,其演播方式令观众耳目一新。
从更前沿的视角出发,动作捕捉技术真正能够产生革命性价值的领域将会诞生在虚拟现实游戏上。例如,利用惯性传感器实现的动作捕捉和头戴式显示设备结合,可以使游戏从客厅或固定场景向更自由的场景延伸,动作的精度也能产生质的提升。目前,众多游戏界的领军企业都愿意尝试使用惯性传感器动作捕捉设备,而据业内预测,超过70个游戏可能会采用这一设备进行体验。这就预示着惯性动捕技术在未来动捕界会迎来广阔市场前景。
在多人模拟仿真演练领域的应用
惯性动作捕捉系统能够为军队训练和消防演练提供虚拟仿真环境、野外演习、角色扮演训练等。虚拟军事环境仿真可以使大批教员和学员在不进入真实野战环境中即可完成训练,这样就能极大地节省人力物力及其他方面的消耗。目前,惯性动作捕捉技术已经被应用于世界领先的军事模拟训练系统开发中,并且起到了很好的仿真演练效果。
在体育训练及运动分析领域的应用
在动作分析和运动医学研究领域,研究者需要对大量的运动数据进行分析,比如速度、加速度、角速度等。这些数据不但非常庞大,而且经常会被较大的视角、较远的距离、人为理解的偏差等因素影响。惯性传感器动作捕捉系统在原理上彻底解决了上述问题,它可以精确捕捉运动人体的动作细节,为运动员和教练分析运动情况提供依据。在这方面不乏成功的案例出现。例如针对高尔夫运动者的姿势矫正产品MySwing。使用这款产品时,用户把产品夹在球杆上,便可捕捉到挥杆节奏、速度,杆头轨迹、角度等数据,这些数据可以帮助锻炼者改进姿势,提高球技。
另外,利用惯性动捕可以计算出打篮球时的运球次数、传球次数、投篮次数、篮板球数量等;也可计算出打台球时的击球次数、进球概率等,使体育教学与训练进入数字化时代,大幅提高训练水平。同时它使远程教学成为可能,尤其适合具有要求特殊的运动,如帆船、攀岩等。总的来说,利用惯性动作捕捉设备获取的这种实时且准确的分析、评估数据,在提高运动成绩、预防损伤、状态恢复等方面都有很大的帮助。
在医疗健康虚拟体验领域的应用
惯性动作捕捉技术还可以应用到医疗诊断、姿态矫正、复健辅助、运动学和动力学仿真评估等方面,不但效果显著,而且为医疗机构提供了高效、低成本的解决方案。例如,对于骨病患者或行动不便者,惯性动作捕捉系统可提供全身、半身以及个别部位的测量及报告,医生对传感器传输的数据加以分析,可以为患者提供迅速简洁的解决方案。
目前,国内的一些医疗实验室已经开始尝试用惯性动捕开发来帮助癫痫病人进行诊断和康复训练。医生判断病人病情时,传统的做法是靠目测病人的步态和体征来下结论,而动作捕捉的设备则更加精准和智能,它借助数字化的精密测量方式更加客观地进行数据统计和诊断,并提供客观准确的数据来反映病人的治疗效果。
另外,通过对步态的量化分析,惯性动作捕捉技术可以提供实时的运动学和动力学数据,这对假肢的研发、最优安装和安全使用提供较为准确的各项依据。
在工业测量和设计领域的应用
惯性动作捕捉为虚拟工业测量提供精准的数据,为设计用户创造交互式、非侵入式的设计环境,可应用在工作场所设计、汽车测试、航空航天研究等工业测量设计领域,例如在汽车设计领域,研究者可以用它来研究汽车驾驶室内的操控性能、方向盘的距离、进出车门的方便性,以及车身高度等方面;在机械设计领域,它可以用在操作台的安装、洗衣机高度的设计等方面;能够有效地提高生产力并节约生产环境成本。而在生产线的操作上,它也可以为用户提供专业的精确定位,从而解决生产和控制过程中的重复运动的问题。
随着惯性动作捕捉技术的不断完善,它的精准程度越来越高,应用范围也更加广泛。除了以上介绍的七大方面外,惯性动作捕捉还可以在舞台特效、机器人控制、人机工程、化学化工在线仿真、汽车碰撞及震动分析……等领域大有作为。
目前,动作捕捉界市场还是以光学动捕技术为主导,能够利用惯性传感器开发人体全身运动捕捉系统的厂商屈指可数,足见惯性动捕系统有着不可估量的巨大潜力,而以中国诺亦腾公司为首的惯性动捕技术,以技术实力为武器,通过修炼内功,填补了中国市场的空白,并逐步在市场上占领先机。它必将扛起动作捕捉行业的大旗,全面扭转国内动捕行业格局,成为与光学动捕平分天下,甚至更具市场竞争力的重头技术。