参与超200种虚拟形象制作,「世优科技」想为实时动画寻找更多落点 | 创公司
为虚拟形象生产技术寻找到更合适的落点,会是公司未来最重要的努力方向。
作者 | 张友发
编辑 | 李威
这是「新商业情报NBT」报道的第555家创业公司
更多的生产者开始尝试用动捕技术制作虚拟形象,世优科技是这股潮流中最早的探索者之一。世优核心团队在2004年开始底层技术的探索,2011年后利用动捕技术进行生产动画,世优(北京)科技有限公司则创立于2015年。
经过多年技术积累,公司具备了动捕设备生产能力,并研发了基于动作捕捉的实时动画技术和快速动画技术。公司近来开发了AI短视频直播系统,帮助制作者通过AI系统快速导入内容,生成图文、视频、虚拟主持人等相结合的“虚拟主持资讯短视频”。
应用场景上,广电系统是技术最早的应用场景,包括电视节目和晚会直播虚拟形象的生成。目前公司正在开拓新场景,重点在短视频和直播平台,以及在线教育的虚拟内容制作。在动画领域,快速动画也有机会改进生产流程,提升制作效率。
世优科技的实践显示出,技术和应用场景的磨合是一个长期过程。为虚拟形象技术寻找到更合适的落点,将是公司未来最重要的方向。
01
核心技术
2003年,纪智辉和合作伙伴一起建立了实验室,对动作捕捉、图像分析、数据挖掘、知识工程等领域的前沿技术进行探索。
科幻电影《阿凡达》2011年的上映和VR的兴起,让纪智辉看到基于动作捕捉进行虚拟形象制作的机会。电影业当时以传统手段制作虚拟形象,演员穿着动作捕捉服录制数据,数据输入电脑进行计算和人工处理,通过专门的生成软件与已经制作好的三维形象对应,再进行调整渲染。这一过程耗时长,成本高且产能低。
纪智辉和合作伙伴开始尝试基于动作捕捉和实时软件来实时驱动虚拟形象。新的技术里,穿戴动捕服的演员可以跟任意虚拟形象进行点对点的绑定,进行实时消抖运算、动画修正、处理表情身体手指的同步,并把数据实时发给渲染引擎进行即时渲染与环境模拟。
这套系统涉及复杂的软硬件配合,包括自主研发的头盔、动捕服等硬件,动作捕捉软件、实时渲染插件等软件和建模、贴图等技术。虚拟角色可以直接通过演员的表演完成动作、表情的实时同步,纪智辉称之威实时动画:“跟提线木偶一样,真人通过动作控制虚拟角色。”
2015年纪智辉正式创建世优科技,来推进实时动画的研究和应用。经过几年的积累,公司申请了总计20多个相关专利。
系统性是这套技术的最大优势。世优科技是最早一批进入这个领域的公司,对全球设备技术了解比较全面,很早就从硬件入手寻找降低成本的办法。纪智辉表示,目前大部分硬件公司都专注于生产系统的某一零件,而世优科技能提供一整套具备性价比的组合方案。
世优科技的技术还具备开放性。现在越来越多的公司进入实时动画领域,直播平台六间房投资的蜜枝科技就在2017年推出了 Live AR 技术支撑的虚拟偶像计划,希望成为实时互动的虚拟偶像的技术提供者。
纪智辉认为这些公司主要进行自有IP的生产,技术难以批量化复制。而世优的技术类似于汽车的生产线,能和更多的合作伙伴进行连接。从2011年开始,公司已经参与200多种虚拟形象IP的生成工作。
做类似工作的还有二次元直播平台克拉克拉,通过手机人脸识别提供虚拟直播工具,并希望联合厂商统一3D 虚拟偶像模型标准。36氪年初报道的中科深智通过硬件改进,采用扫描光学动捕技术为客户提供服务。
实时动画技术还处于发展早期。纪智辉认为现在的实时动画技术,类似于上世纪90年代的国内电商,技术在发展早期,离真正成熟还需要几年。由于巨头没有出现,市场没有形成统一标准,不同的设备商接口并不兼容。
为了应对客户多样化的设备需求,公司在自身技术上开发了类似Hub的多端口接收器,对于有其它特殊需求的客户,公司可以连接其他厂商的设备到Hub上。
实时动画在呈现效果上也还有进步空间,公司在实时动画基础上推出了快速动画。快速动画结合实时动画和传统CG动画技术,在保存实时动画数据后,再用CG技术对数据进行处理,成品可以达到传统CG的效果。根据公司的推算,一分钟同等质量的动画可以将费用压缩到传统CG的十分之一。
02
应用场景
公司成立后不久,央视和上海东方卫视最先使用了实时动画技术。广电系统有着虚拟主持人项目,客户品牌也有植入虚拟形象的需求。实时动画能够满足这些需求,电视台则有着较强的购买能力。
实时动画技术最早的应用场景于是落在了广电系统,公司在2015年和2016年逐渐生成了一套面向广电的解决方案“虚拟工厂”,这套方案意在为电视台输出一套性价比较高的虚拟形象生产方案,包括硬件、软件和具体服务。
公司不久完成了捷成世纪2500万人民币的A轮融资,捷成世纪主要业务为向广电输出全价值链的音视频产品与服务,是这个领域头部企业。通过捷成世纪积累的客户资源,公司很快和多家电视台建立连接。
目前,公司和央视、湖南卫视、凤凰卫视、北京卫视、江苏卫视等一线电视台都达成了较深入的合作。公司参与了春晚虚拟形象的生成,以及央视《欧洲杯-豪门盛宴》、东方卫视《今晚80后脱口秀》等节目的录制。
公司也和互联网企业有着合作,合作对象包括网易新闻《曲大师》,王者荣耀KPL直播以及京东、天猫、苏宁等“企业IP形象直播卖货”,公司将之称为“IP形象复活”。
快速动画则在动画行业有应用前景。动画行业目前还是大量采用传统CG技术,根据纪智辉的估计,一分钟的成片需要几十人花上一个月,而快速动画的呈现效果达到了人工制作的水准,并且大大降低了成本。
这几年动画公司开始尝试动捕技术,世优科技也参与了番剧的技术合作。动画公司对技术的应用程度还局限在某个环节,而快速动画需要对整体生产流程重新调整。行业会有较长的消化时间,世优科技希望能在这个过程提供开放性的技术支持。
广电进入平稳的增长期后,公司希望为发展迅速的短视频平台提供技术解决方案。公司最近推出了AI短视频直播系统,用户利用这个系统,输入资讯、知识等内容,就可以快速生成虚拟主播播报类的内容,参与短视频制作和直播互动。针对短视频平台,世优技术提供面向PGC和UGC的两套技术方案,主要适用于知识类、百科类短视频。
目前短视频平台的虚拟角色的内容很少,主要受制于技术门槛和成本。纪智辉认为如果通过这项技术将虚拟角色制作成本降到和和真人拍摄同一水平,虚拟视频有机会占到平台内容的30%到40%。
公司的虚拟IP技术在影剧综游、短视频直播、教育和线下演出都有应用可能,从目前来看,广电市场是公司最主要的落点,直播短视频和在线教育有可能变成新的应用场景。
此外公司也在关注在线教育市场。2019年公司已经和一些教育公司达成合作,利用公司技术帮助生成线上的课程和虚拟老师等等。在线教育在最近的迅速增长,让公司看到了利用技术丰富课堂互动形式的可能。
在变现层面,公司以出售软硬件产品和提高服务获得收入。公司业绩在2017、2018开始增长,在2019年翻了一番。
在过去几年花费过亿资金用于技术研发后,公司2020年的重点在于继续应用和验证技术,从而拓展业务。公司目前也在寻求新一轮的融资,希望能够寻找到在虚拟内容领域进行开拓的投资方。
©新商业情报NBT原创内容 转载请联系授权
【转载】加微信号:xinshangye233
【商务合作】加微信号:sansheng_kefu
【爆料或寻求报道】加微信号:Hoffman3056