推荐阅读：
聚焦“数字主持人”|对话SMG虚拟新闻主播“申䒕雅”设计者与平台方
聚焦“数字主持人”|对话浙江广电数字主持人谷小雨的设计运营方
(资料图片仅供参考)
虚拟数字人已在广电视听多领域崭露头角。扎实推进媒体深度融合，新赛道下，“数字主持人”应用场景还有哪些可能？又会为行业带来怎样的变革？
聚焦数字化转型以及媒体智能化发展，推出特别策划，聚焦“数字主持人”。本文通过详解河北广播电视台（集团）“冀小佳”的形象设计、动作捕捉等，还原数字主持人的诞生全记录。
河北广播电视台（集团）的电视制作中心于2022年4月开始启动数字虚拟主播的研发任务，10月正式投入使用。
其间，河北广电通过坚持自主研发，参考大量国内外其他平台的节目形式及虚拟形象，完成了团队由传统电视包装制作到数字人制作的业务转型。
“卡通形象+写实形象”的摸索
设计初期，团队确定了卡通和写实两种风格，卡通风格主要以DAZ结合Zbrush和虚幻引擎来实现，写实风格则借助于三维扫描技术及数字人创建器来实现。
团队最先设计了“冀小佳”的卡通形象，服装直接绑定身体，毛发为面片形式，设计人员为此出了大量的设计线稿和三视图。
根据应用场景与角色定位，早期的主播形象整体风格偏年轻化、卡通化。
写实形象主要采用三维扫描技术获取面部模型，将模型在zbrush里做适当的雕刻处理，再进数字人创建器生成角色，角色服装采用MD进行制作，毛发则使用xgen进行制作。
通过一系列摸索与调整，团队产出了三个虚拟形象。第一个是已经投入使用的“冀小佳”，在10期《跟着鸟儿游河北》《台媒体推介会》《深圳文博会宣传片》中出镜播报。
第二个角色为台新闻主播李耀阳的数字形象，第三四为另外两个备用虚拟主播。
团队研究了基于Arkit的52个面部表情数据库，在实践中了解每个表情参数幅度对于面捕结果的影响，实现了任意风格角色面捕的可能性。
让虚拟主播“动”起来
形象资产有了，如何让主播动起来？团队针对不同的应用场景确定了两套制作流程：动捕驱动和传统动作库驱动。
动捕方面，运用青瞳的光学动捕设备结合无远弗届的惯性动捕手套，面部表情则采用苹果端的livelinkface。
结合新闻播报本身主播动作较少的特性，团队研发了动作库制作的流程，前期采集一系列新闻播报常用的动作制作动作数据库，后续只需要把每期播报的稿子线上发给主播中之人即可。
通过iPhone二次采集视频画面中的表情，从数据库里加上适当的动作，同步好配音即完成节目的产出。利用这套线上制作流程，节省了协调团队人员和调试设备的时间，更加机动灵活。
在产出了一系列的数字主播之后，团队也开始着力打造虚拟偶像，面向短视频平台，定位较主流媒体主播形象更加轻松活泼。
团队引入了更加高效的脸部修改技术，利用虚幻引擎变形插件及相关蓝图，实现虚拟角色面部的实时调整，并且结合中之人面部运动习惯时实训练调试虚拟人五官的运动幅度。
为数字人选服装
传统角色动画的服装部分大多是三维软件里做好动画后导出fbx进MD，然后进行离线模拟，MD输出abc文件再回套给三维软件中的角色，制作流程复杂低效而且布料模拟极易出现问题。
针对服装问题，团队制订了两套方案。
一是利用MD制作服装，直接将服装绑定到角色。优点是不用模拟，产出效率高，不会出现穿帮等问题，适合直播及对产出率要求高的栏目；缺点是缺乏布料的物理学特性，真实度打了折扣。
二是使用Epic官方推出的udraper插件，用MD制作好的服装直接在虚幻引擎中用udraper赋予角色，布料可以时实模拟运动。优点是布料更加真实自然；缺点是当服装的层数多时容易发生问题，穿模、飞起等。
因此每个主播都有两套服装，一套绑定版，一套udraper版，这样根据不同需求灵活切换。
数字人的制作除了以上技术上的要求之外，对于设计审美的要求同样较高。
作为主流媒体的数字主播，仅仅是卡通形象显然不够严肃，团队最终确定做一款写实中带有一些卡通或者可爱气质的形象。通过不断打磨，团队在五官比例及位置上做了很多微妙调整，最终形成了一套角色设计理论。
技术与硬件的发展使数字形象制作的效率逐渐提升，数字形象有很多优点，比如三维特效制作空间大、更加智能化、栏目制作产出时间地点更灵活。同时，其也存在一些不足，比如中之人不宜随意更换，服装替换成本较高，布料毛发等模拟技术不成熟等。
结合目前大火的ChatGpt，团队正在研发数字角色的智能语音对话。具体流程是采用微软的文字语音转换技术，结合虚幻引擎及ChatGpt，将用户语音转换为文字输入ChatGpt，再将ChatGpt返回的结果给到虚幻引擎，利用虚幻引擎的Metahuman SDK将文字语音转换成角色表情动画，实现真正的AI人机对话。
未来，数字角色应用与价值绝不止于视频产品的产出，而是要结合AR、VR、 物联网、区块链等技术，真正实现 “元宇宙”概念，虚拟形象及虚拟资产会产生实际价值并渗透到社会的方方面面。
责任编辑：房家辉
分享到：版权声明：凡注明来源“流媒体网”的文章，版权均属流媒体网所有，转载需注明出处。非本站出处的文章为转载，观点供业内参考，不代表本站观点。文中图片均来源于网络收集整理，仅供学习交流，版权归原作者所有。如涉及侵权，请及时联系我们删除!关键词：
