Al碰上智能图形,无缝衔接虚拟世界-深蓝源码网

技术沙龙 2020-09-03 00:08:26 2268 阅读
导读 声明:本文来自于微信公众号周晓奇(ID:xincaijing),作者:周晓奇,授权站长之家转载发布。“19.36吨干鱿鱼在京东拍卖上拍,最终以178.12万成交。人生两大悲哀:活得不如咸鱼,身价不如鱿鱼。”在今年京东双十一全球好物节期间,六款形象可爱的卡通虚拟主播,用诙谐的语言……

声明:本文来自于微信公众号 周晓奇(ID:xincaijing),作者:周晓奇,授权站长之家转载发布。

“19. 36 吨干鱿鱼在京东拍卖上拍,最终以178. 12 万成交。人生两大悲哀:活得不如咸鱼,身价不如鱿鱼。”

在今年京东双十一全球好物节期间,六款形象可爱的卡通虚拟主播,用诙谐的语言精确地播报着各个销售数据,并且还能够与其进行实时互动,获知想要了解的数据。

京东早已不是首次使用虚拟主播,此前还与该技术背后提供方杭州相芯科技有限公司(以下简称相芯科技),合作展现了真人形象虚拟主播京小帅和京小蕾。

据京东人工智能高级产品经理许俊恺表示,相芯科技一直是京东的AI解决方案的合作伙伴,此次基于京东销售数据的内容升级,用卡通虚拟主播播报京东销售数据很好地体现了京东的科技创新范儿。

全球VR/AR市场规模,图片来源于东吴证券报告

5G潮的来临,VR/AR或许将迎来快速发展,根据中国信通院数据, 2018 年全球虚拟现实市场规模将超过 700 亿元人民币,同比增长126%。 

各方利好下,相关技术也在逐步渗透到消费端。传统图形学的手段主要是利用数学工具对现实世界进行建模,是Physical Based Approach。主要解决了专业用户如何生成图形给人看的问题,也就是PGC内容。

而近年来图形学的发展越来越多地往普通用户如何可以方便地生成图形内容发展,计算机图形学结合了计算机视觉、机器学习、人机交互等领域的知识,来实现自动化的内容生成和更自然的交互,形成了智能图形学的概念。

新一代的图形学越来越多的利用数据,更多地倾向于Data Driven Approach,促生了自动化的内容生成和自然的交互手段,由于对UGC内容生产的促进,其应用场景也扩展到短视频、直播、及更多的应用场景中。

2016 年成立的相芯科技,正是在智能图形技术领域的创新者,公司专注AI+计算机图形学方向,目前产品主要有视频AR特效、虚拟形象自动生成、AI虚拟主播、AI虚拟助手等。

相芯科技部分3D卡通虚拟主播

如今,成立近四年的相芯科技,已服务近 500 家B端客户,其中包括百度、微软小冰、传音、浙江电视台等,相关技术也广泛应用在智能手机、直播、短视频、在线教育、新零售等众多行业。

由于拥有强劲的技术实力与广阔的市场前景,相芯科技在成立一年后就实现盈利,目前已连续三年盈利。但走到这一步,并不是一件容易的事。

突破瓶颈,走向消费级

打开摄像头,选择河豚形象,一个活灵活现的animoji(3D动画表情)出现在了屏幕端,伴随着真人张嘴的动作,屏幕中的animoji吐出了一连串的气泡,好像身处水中一般。

在陌生人社交APP Soul的功能中,Avatar(虚拟3D形象)实时表情捕捉成为年轻群体中颇受欢迎的功能。虚拟形象不仅能够还原真人表情,增加社交趣味性,也能够在与陌生人交流中保护自身安全。

看似简单的应用,真正实现起来却并不容易。Avatar其实并不新鲜,已经在影视、动漫、游戏等领域得到了应用,但这项技术此前从未真正走进消费级领域。究其原因,在于Avatar的普及存在技术瓶颈与成本方面的难题。

据相芯科技向锌财经介绍,Avatar技术在消费级设备上实现的难度主要体现在Avatar生成、Avatar驱动互动。

此前在Avatar生成上,构建一个可实现表情等全部动态效果的真人3D模型,不仅耗时久,而且价格高昂,这直接导致Avatar难以实现在消费级领域进行大规模应用。

为此,相芯科技打造出了全球首创的虚拟形象自动生成技术 (Photo to Avatar,简称PTA),原本成本高、耗时长的Avatar生成,通过此技术只需要给到一张照片,即可以秒级的速度全自动生成一个全动态Avatar,用户只需要一台智能手机就能实现,极大地降低了Avatar生成的硬件成本。

与此同时,在Avatar驱动方面,相芯科技突破性地使用了智能手机上的普通摄像头,无需使用深度摄像头,即可进行精准的面部表情捕捉,让Avatar的表情始终随着用户表情进行即时变化。这大幅度降低了用户的创作难度,用户体验也更真实。

当下,相芯科技的核心技术人员来自浙江大学、微软亚洲研究院、苹果等公司,在计算机图形、计算机视觉、VR/AR等技术领域拥有 20 多年的研发经验。

经过不断努力,目前相芯科技已经完全Avatar生成、互动和渲染技术的全面布局,可支持包含面部、舌头、眼球在内的 56 个表情系数的融合。

在细节上,相芯科技也没有含糊,添加了带物理动效的animoji,用户在实时驱动时,可发现在耳朵、毛发等地方,会遵循物理力学自然摆动,效果更为真实生动。

与市面上类似产品相比,相芯科技的animoji表情灵活丰富,维度比类似产品更多。

一直以来,让创作更简单,交互更自然,体验更真实,也成为相芯科技不断努力的目标。

深蓝源码网-www.69shenlan.com
首页
菜单
我的
搜索