• 首页 > 产经频道 > 业界新闻

    谷歌推出高质量360度视频拼接算法:基于视图插值的光流

    2018年04月10日 09:38:48   来源:yivian

      2018年04月10日,谷歌在2015年推出了Jump,简化从拍摄到播放的VR视频制作流程。高质量VR相机能够令拍摄变得更加简单,好消息是映维网了解到Jump Assembler则将令自动拼接变得更快,减低投入的成本。借助成熟的计算视觉算法和谷歌数据中心的计算力量,Jump Assembler可以在沉浸式3D 360度视频中实现清晰逼真的图像拼接结果。

      1. 拼接

      今天谷歌正式为Jump Assembler带来了了一个新的选项,支持系统采用基于多视图三维重建(multi-view stereo)的全新高质量拼接算法。这种算法能够产生与谷歌标准算法一样的无缝3D全景图,但能够通过复杂的图层和重复的图案来减轻场景中的伪影。它同时能够生成有更清晰对象边界的深度图,而这对VFX非常有用。

      下面我们先来看看谷歌标准算法的工作原理。它基于光流概念,亦即将一幅图像中的像素与另一幅图像中的像素进行匹配。在匹配时,你可以知道像素是如何从一幅图像“移动”或“流动”至另一幅图像。在匹配每一个像素后,你就可以通过局部地移动像素来插值中间视图。这意味着你可以在拍摄装置上的相机之间“填补空白”,这样在拼接时就能实现一个无缝,连贯的360度全景图。

      2. 基于视图插值的光流

      谷歌最新的高质量拼接算法利用了多视图三维重建来渲染影像。区别何在?即便拍摄装置上的其他相机也有可能看到相同的对象,但标准光流算法一次仅使用一对图像;而谷歌的新方法可以同时在多幅图像中寻找匹配。

      这种全新的多视图三维重建算法计算每一个像素的深度(如像素到对象的距离,一个3D点),而且拍摄装置上任何能看到这个3D点的相机都可以帮助建立深度,令拼接过程变得更加可靠。

      谷歌的新方法还有助于解决所有拼接算法都在面临的关键挑战:遮挡,亦即处理在一幅图像中可见,但在另一幅图像不可见的对象。多视图三维重建拼接在处理遮挡方面的效果更好,因为如果一个对象隐藏在一幅图像中,这种算法可以利用拍摄装置上的附近任意相机图像来确定该点的正确深度。这有助于减少拼接伪影,并生成具有清晰对象边界的深度图。

      如果你是一名VR电影拍摄工作者,并且希望尝试这种全新的算法,只需在 Jump Manager的拼接质量下拉栏中图选择“high quality(高质量)”即可。

      来源:XXX(非中文科技资讯)的作品均转载自其它媒体,转载请尊重版权保留出处,一切法律责任自负。

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

      中文科技资讯倡导尊重与保护知识产权。如发现本站文章存在版权问题,烦请30天内提供版权疑问、身份证明、版权证明、联系方式等发邮件至news@citnews.com.cn,我们将及时沟通与处理。

    [责任编辑: CIT03]
    分享到微信

    推荐

    三问罗永浩:做电子烟是新机会还是续命?

    1月15日晚,锤子科技投资的快如科技在北京发布了子弹短信升级版“聊天宝”,身陷风波而久未露面的罗永浩也现身了,为聊天宝站台并主讲新功能,同时发布了一款电子烟产品,福禄(Flow)换烟雾化烟,正式宣布进入电子烟市场。值得一提的是,福禄电子烟CEO正是原锤子科技001号员工朱萧木。

    新闻

    斑马会员与同程旅游签署全面战略合作协议

    1月17日,斑马会员与同程旅游在北京签署了战略合作协议。同程资本CEO娄德明、格家网络董事长李潇、祥峰投资合伙人赵楠、真格基金副总裁刘元、同程旅游旗下臻旅科技CEO陈喆、同程旅游旗下臻旅科技COO张娜等出席签约仪式。

    互联网+

    为什么说自动驾驶的门槛是车道级地图?

    据悉,人类有80%活动的信息与地理位置有关。即使现在宅男腐女再多,但一个流动的社会才是主流。为此,整合地图、导航、互联网、大数据、云计算、人工智能等在内的地理信息技术在深刻影响着社会的方方面面。就像联合国副秘书长刘振民说,地理信息就如同“水”和“电”一样,是一种基础设施,将无处不在。而这其中,车道级地图正扮演着基石的角色。   

    融合

    从植发AI看智能手术机器人的国产化之路

    在工作和生活的双重压力下,很多80后乃至90后的青年都“光荣”地加入了“脱发一族”。为了拯救发际线或是不变成“地中海”,很多人从此走上了寻医问药之旅。而最终的结果,往往是部分人因为药石无效选择了植发。或许你没想到的是,鉴于植发手术时间长、过程繁琐等原因,如今已经出现了专门的人工智能植发机器人。

    创投

    哒哒英语完成2.55亿美元D轮融资

    1月16日消息,据36氪报道,在线少儿英语教育机构哒哒英语近日完成2.55亿美元D轮融资,由华平领投,老股东好未来和涌铧投资跟投。