• 首页 > 产经频道 > 业界新闻

    谷歌推出高质量360度视频拼接算法:基于视图插值的光流

    2018年04月10日 09:38:48   来源:yivian

      2018年04月10日,谷歌在2015年推出了Jump,简化从拍摄到播放的VR视频制作流程。高质量VR相机能够令拍摄变得更加简单,好消息是映维网了解到Jump Assembler则将令自动拼接变得更快,减低投入的成本。借助成熟的计算视觉算法和谷歌数据中心的计算力量,Jump Assembler可以在沉浸式3D 360度视频中实现清晰逼真的图像拼接结果。

      1. 拼接

      今天谷歌正式为Jump Assembler带来了了一个新的选项,支持系统采用基于多视图三维重建(multi-view stereo)的全新高质量拼接算法。这种算法能够产生与谷歌标准算法一样的无缝3D全景图,但能够通过复杂的图层和重复的图案来减轻场景中的伪影。它同时能够生成有更清晰对象边界的深度图,而这对VFX非常有用。

      下面我们先来看看谷歌标准算法的工作原理。它基于光流概念,亦即将一幅图像中的像素与另一幅图像中的像素进行匹配。在匹配时,你可以知道像素是如何从一幅图像“移动”或“流动”至另一幅图像。在匹配每一个像素后,你就可以通过局部地移动像素来插值中间视图。这意味着你可以在拍摄装置上的相机之间“填补空白”,这样在拼接时就能实现一个无缝,连贯的360度全景图。

      2. 基于视图插值的光流

      谷歌最新的高质量拼接算法利用了多视图三维重建来渲染影像。区别何在?即便拍摄装置上的其他相机也有可能看到相同的对象,但标准光流算法一次仅使用一对图像;而谷歌的新方法可以同时在多幅图像中寻找匹配。

      这种全新的多视图三维重建算法计算每一个像素的深度(如像素到对象的距离,一个3D点),而且拍摄装置上任何能看到这个3D点的相机都可以帮助建立深度,令拼接过程变得更加可靠。

      谷歌的新方法还有助于解决所有拼接算法都在面临的关键挑战:遮挡,亦即处理在一幅图像中可见,但在另一幅图像不可见的对象。多视图三维重建拼接在处理遮挡方面的效果更好,因为如果一个对象隐藏在一幅图像中,这种算法可以利用拍摄装置上的附近任意相机图像来确定该点的正确深度。这有助于减少拼接伪影,并生成具有清晰对象边界的深度图。

      如果你是一名VR电影拍摄工作者,并且希望尝试这种全新的算法,只需在 Jump Manager的拼接质量下拉栏中图选择“high quality(高质量)”即可。

      来源:XXX(非中文科技资讯)的作品均转载自其它媒体,转载请尊重版权保留出处,一切法律责任自负。

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

      中文科技资讯倡导尊重与保护知识产权。如发现本站文章存在版权问题,烦请30天内提供版权疑问、身份证明、版权证明、联系方式等发邮件至news@citnews.com.cn,我们将及时沟通与处理。

    [责任编辑: CIT03]
    分享到微信

    推荐

    无人驾驶研发太烧钱 传Uber想拆分业务单独融资

    10月18日消息,据《金融时报》援引知情人士的话报道称,网约车巨头Uber正考虑出售其成本高昂的无人驾驶汽车部门的少数股权,试图筹资以应对首次公开募股(IPO)前不断上升的成本压力。

    新闻

    安卓改变在欧盟政策:预装部分谷歌应用开始收费

    10月17日消息,据CNBC报道,因为安卓垄断问题,今年7月份欧盟对谷歌罚款50亿美元。为了回应制裁,谷歌宣布将改变其在安卓手机上捆绑应用的销售方式,并向希望在欧盟预装Gmail、地图和YouTube等谷歌应用的手机制造商收取授权费。此外,谷歌还将取消对手机制造商销售修改版或“分叉版”安卓手机操作系统的限制。   

    互联网+

    无人驾驶研发太烧钱 传Uber想拆分业务单独融资

    10月18日消息,据《金融时报》援引知情人士的话报道称,网约车巨头Uber正考虑出售其成本高昂的无人驾驶汽车部门的少数股权,试图筹资以应对首次公开募股(IPO)前不断上升的成本压力。

    融合

    MIT投资10亿美元开设AI学院:推进AI在各学科应用

    10月16日消息,当地时间周一,麻省理工学院宣布投资10亿美元开设一所新的人工智能学院,其根据主要捐赠者的名字被命名为苏世民计算学院,主要目标是推进人工智能在各个学科领域的广泛应用。据悉,该学院将于明年秋季开学,设立了50个新的教职岗位和更多奖学金。

    创投

    百货巨头塔吉特推出面向80后创业者的孵化器

    从PC时代到移动时代,Arm凭借对ASIC架构的深耕占据了全球90%以上的市场,成为人工智能芯片市场中最被忌惮的巨头之一。最近,Arm推出了一个名叫Neoverse的处理器家族,将为每一项互联网基础设施(服务器、网关、5G基站、边缘计算平台等)提供运营制成,变相渗入未来人工智能终端市场,大有对标Intel之势。