谷歌黑科技 一分钟在VR里再现你的表情

2017-02-22 10:23:55来源:青亭网 热度:
image01

 

混合现实(MR)视频就是把人连同所处的VR环境一起拍摄进去,能够展现出人们在VR世界里的一举一动。

但是目前的方法都有一个障碍,那就是在拍摄过程中,由于人一般都是戴着一个较大的VR头盔的,因此人物的脸部基本都会被遮挡。人们的表情只能靠“脑补”来想象。

然而谷歌展示了一些新的研究成果,把这一技术带到了新的水准。谷歌结合了一系列的技术,包括HTC Vive和SMI眼部追踪,他们重新再现了被VR头盔遮挡住的人的脸部。

 

db

 

这一研究是谷歌研究团队、Daydream Labs和YouTube团队通力合作的成果。根据官方博客表示,这一研究的原理为:

技术核心是使用用户的脸部3D建模作为被遮挡面部的代替。这一代替物用来在MR(混合现实)视频中来同步人脸,从而打造出被头盔遮住的面部表情。

首先,我们会使用我们称之为“注视点动态外观(gaze-dependent dynamic appearance)”来捕捉用户的个性化3D脸模。首先是校准步骤,需要用户站在一个颜色+深度摄像机,还有一台显示器前面,然后用眼镜在显示器上去追看一个标记。

我们用这种一次性的校准(时间花费不到一分钟)来获得用户的3D脸模,然后获得不同的凝视方向、眨眼所映射的图像(或材质)的数据库。这一“注视数据库”(也就是通过眼睛注视来对应不同的脸模材质)让我们能够在同步中动态更换脸的形象,并且生成想要的凝视视线,让同步的脸部表情看上去自然、生动。

在这一项目背后包括科学家Vivek Kwatra和软件工程师Christian Frueh、Avneesh Sud。这一方法有很大的希望能够“应用于类似VR视频会议、多人视频游戏,与亲朋一起探索等,提高在VR里的沟通和社交性”。

责任编辑:饶军

为您推荐

美报业迎倒闭高潮 传媒三巨头痛斥谷歌是寄生虫

互联网似乎正压得美国传统报业走投无路。然而,网上的信息其实高度依赖于传统媒体,网络报纸也无法像纸质报纸一样深层次、多角度地透视社会。因此,假如报纸真的不再重要,网络媒体也将失去价值仿佛是约好的,传统媒体突然对谷歌群起而攻之。4月6日,《华尔街日报》和美联社等著名传统媒体再次攻击谷歌和其他新闻聚合网站是网络寄生虫,并威胁采取法律手段。《华尔街日报》总编罗伯特·汤姆森称:“毫无疑问,有些网站就是互联网大肠中的寄生虫或者科技绦虫。读者已经习惯了互联网上大部分内容免费,而我认为这个认知是错误的,但是谷歌等新闻聚合网站则利用这种错误认知盈利。这些网站几乎没有认识到为他们带来盈利的内容是其他机构创造的。”

谷歌开始调查“内鬼” 给否认退出中国找台阶

路透社18日报道说,熟悉情势的消息人士向路透社透露,谷歌公司在调查是否有公司内鬼参与对谷歌的网络攻击。此前谷歌公司宣布考虑撤出中国时理由之一就是“遭到黑客网络攻击”。路透社称,谷歌公司的一名发言人拒绝“对谣言和猜测置评”,但承认这是正在进行的一项调查。易观国际互联网高级分析师李智接受记者采访时表示,谷歌调查内部员工是否参与所谓的网络攻击,是其找台阶下的表现,是危机公关的一种方式。李智表示,谷歌做出的退出中国的决定本身是冲动的,从一开始表现出的态度强硬,到目前一步步的缓和,说明谷歌意识到了中国市场的重要性。如果谷歌最终没有退出中国,那无疑是它导演的一出闹剧。

传谷歌与卫星电视运营商合作测试 或将介入电视节目搜索服务

电脑商情在线3月9日消息,据国外媒体报道,谷歌正与美国第二大卫星电视运营商DishNetwork合作测试一款电视节目搜索服务。有消息人士称,谷歌通过基于Android系统的电视机顶盒提供这一服务。用户不仅可以通过该服务搜索Dish的节目内容,也可以搜索来自YouTube的内容,并对播放的电视节目进行个性化。分析人士指出,谷歌很可能将这一新服务与电视广告业务结合起来,根据用户数据针对不同家庭投放不同广告。

逐鹿智能电视

韩国三星电子和LG电子通过近几年与日本索尼和夏普的激烈竞争,目前在全球电视市场占有率方面分列前两名。当专家们认为韩国电视产业会在一段时间内领先于日本,占据全球电视霸主地位时,苹果和谷歌加入了电视市场争夺战行列,从而使得全球电视市场格局出现了新变数,市场争夺形势已然进入乱花渐欲迷人眼的状态。染指电视苹果谷歌齐出手苹果公司首席执行官史蒂夫·乔布斯在4月关于“苹果公司非凡新产品”的表态,被外界普遍认为是苹果公司涉足电视市场的强烈信号。Eugene投资证券公司分析师说:“苹果最快可能在今年第四季度,谷歌最快是在今年11月左右推出新的电视。韩国电视生产商如果不能正确应对苹果和谷歌掀起的电视新发展趋势,很