直播风口下，「智京未来」开发实时互动的虚拟直播技术

据艾媒咨询，2019年中国在线直播用户规模已达5亿人，占到网民总数的59%。从游戏、 才艺直播再到电商平台直播带货，在线直播正渗透进日常生活的方方面面。不断增加的市场需求也倒逼着直播内容产出的增长，2018年新晋主播达217万。直播方式上，除真人主播外，也有越来越多的虚拟主播进入观众视野。2019年5月，B站虚拟主播开播人数已经接近千位。

虚拟主播的流行背后反映的是用户对多样化形象及高可塑性内容的追求。虚拟主播可根据用户喜好设置形象，才艺展示可突破真人主播的局限。短视频平台快手上的虚拟主播“一禅和尚”曾在直播的49分钟内收获了64.9万个赞，观看人数峰值更是突破了25万人。虚拟主播有可能成为在线直播新的增量，而其背后涉及到的动作、表情捕捉技术也将产生新的创业机会。36氪近期接触到一家虚拟直播技术开发商智京未来，其主要业务即是为电商及短视频平台输出虚拟直播解决方案。 

智京未来成立于2019年11月，希望打造由真人驱动并可与观众实时互动的虚拟主播。通过人脸检测、表情识别技术来捕捉真人表情，再基于关键点识别技术实现真人与虚拟主播的匹配。虚拟主播的形象设计可以借用已有卡通形象，也可以利用3D人脸重建技术按照真人照片来绘制。据创始人王智武介绍，智京的3D人脸重建技术准确率达到90%。此外，虚拟主播的身体动作也可与真人动作一一对应，其技术原理与脸部关键点识别技术类似。

智京未来表情驱动

公司从技术研发初期就决定使用深度摄像头进行表情、动作识别，而不采用动捕设备。一方面是考虑到动捕设备成本高且使用不便，另一方面，通过算法进步已经可以持续提高脸部和身体识别的精度及范围。公司还建立了各种常用动作的数据库，比如翻跟头、旋转等，用户可直接调取。 

创始人王智武强调，除了表情和动作模拟，虚拟主播形象制作的另一个关键环节是美术渲染，美术效果的好坏关系到用户对虚拟主播的认可和喜爱程度。智京基于Unity等游戏引擎，针对材质、色彩等开发了专有程序。 

在直播中，智京的虚拟主播既可以代替真人主播出镜，也可以与真人主播实时互动。这两种方式都需要由工作人员在背后驱动虚拟主播的表情和动作。王智武表示随着5G和人工智能的发展，未来可以用AI来驱动虚拟主播。利用AI深度学习功能，虚拟主播将能快速模仿真人的表达方式，成为真人的“虚拟孪生”。 

公司目前主要服务B端用户，通过付费软件，定制模型以及电商直播抽成来盈利。公司已经跟星咖互娱，一家拥有数百位直播红人的内容制作方达成合作，接下来会为公司提供虚拟主播技术解决方案。公司也正在为电商平台开发虚拟主播。 

除了直播，智京的虚拟形象制作技术还可以应用在短视频领域。公司已经为公安部消防局宣传教育中心打造了消防儿歌学习视频。通过摄像头捕捉真人表情和动作将之前需要花费数天完成的工作量在几个小时内完成。 

消防儿歌

公司创始人王智武曾在北京六间房科技、完美世界等公司担任3D技术研发工作，熟悉3D动画制作全流程；核心团队成员曾在畅游、六间房科技担任高级动画师。

公司正在进行天使轮融资，团队在积极接触投资机构中。

相关推荐

直播风口下，「智京未来」开发实时互动的虚拟直播技术
初音未来十三年，虚拟偶像站上风口
面向动作捕捉和虚拟拍摄领域，「中科深智」提供实时动画和虚拟制作的全工作流解决方案
潮科技 | 发布虚拟直播专用工具，「中科深智」提升中小电商带货能力
36氪首发|虚拟直播进入电商带货市场，「中科深智」获千万元天使轮融资
「IMVU」开放Live Rooms直播功能，用3D虚拟形象参与现场互动
晟道投资薛宇宁：直播带货尚有待开发的风口
小程序会是直播的下一个风口吗？
文娱巨头天音互动入局 重新定义直播带货的人、货、场
做红人直播风口下的长期主义者

网址: 直播风口下，「智京未来」开发实时互动的虚拟直播技术 http://www.xishuta.com/newsview15317.html