• 首页 > 未来频道 > ARVR

    专利暗示苹果考虑为VR提供更好的360度视频拼接方案

    2018年08月17日 12:21:25   来源:yivian

      2018年08月17日,美国专利及商标局今天公布了一份苹果专利,与用于全向和多向图片与视频有关的编码技术。当时的专利涉及VR应用的后期制作,而今天的专利Processing of Equirectangular Object Data to Compensate for Distortion by Spherical Projections则涵盖编码方面的技术。t7c中文科技资讯

      对于今天公布的专利,苹果指出当前的指出编码应用程序没有考虑在处理全向或多向图像时可能出现的图像畸变。这种畸变会导致普通视频编码器无法识别图像内容中的冗余,从而导致编码效率低下。苹果的发明正是为了克服编码效率低下的问题。t7c中文科技资讯

      为了更好地理解苹果项目的背景,我们可以把目光放在2017年的VR应用后期制作专利。在去年的专利申请中,苹果指出传统的180度或360度视频或图像是以平面格式进行存储,使用等量矩形投影或立方体投影来表示球形空间。如果在传统的编辑应用程序或图形应用程序中编辑这类视频或图像,当视频或图像以圆顶投影,立方体投影进行分发和渲染时,或者在VR头显内进行球形映射时,用户将难以解释最终结果的体验。在平面投影中编辑和操纵图像需要特殊技能和大量的试错。t7c中文科技资讯

      另外,在用球形合成或编辑图像或视频后,出现后续镜头未对准,或者立体视差点无法以自然方式匹配,这是一种常见的体验。t7c中文科技资讯

      对于苹果在2017年的发明,其主要是将单视场和立体视场的180度或360度静态图像或视频从主机编辑软件或视觉特效软件传输至相同设备上同时运行的软件上,以等量矩形投影或其他球形投影的方式进行。相同的设备可以持续获取有线或无线头显的方向传感器的方向和位置数据,同时向头显实时渲染这一方向的单视场或立体视场视图。t7c中文科技资讯

      对于今年的苹果专利,他们指出一些现代成像应用程序可以从多个方向捕捉图像数据。一些相机在捕捉图像时会沿着枢轴旋转,这允许相机通过扫视捕捉更多的图像数据,从而扩大有效视场。其他相机则包含多个成像系统,能够在多个不同的视场中捕捉图像数据。在任意一种情况下,相机系统都可以创建一种聚合图像,代表从多个视点捕捉的融合或“拼合”图像数据。t7c中文科技资讯

      文件指出,视频可以从多个视点捕捉主题或场景,例如令多台相机指向同一地点,或根据最近的行业发展,使用能够录制场景所有方向的球形相机。对于手持式视频,或对于能改变相机位置和视点的图片而言,图像可以提供许多可以合并至场景的额外数据。t7c中文科技资讯

      苹果写道:“许多现代编码应用程序并不是为处理这种全向或多方向图像内容而设计。”这表明应用程序是假设图像数据属于“平面”或从单个视图捕捉,意味着如此应用程序没有考虑处理可能出现的畸变,因此无法识别图像内容中的冗余,反过来又导致效率低下。t7c中文科技资讯

      因此,苹果专利的发明人意识到行业需要一种能够处理全向和多向图像内容,同时能限制畸变的编码技术。简而言之,编码器将视频分成像素块,而对于每个像素块,编码器可能将其与参考图片中关于场景的其他数据进行比较。利用对搜索块和参考数据的预测搜索,编码器可以对像素块执行不同的操作,使其看起来更适合于用户。t7c中文科技资讯

      例如,第二个终端在本地显示器上显示球形视频,它可以执行视频编辑程序以修改球形视频,或者将球形视频集成到一款应用程序中(如一款VR程序),然后在头显中进行显示,或者存储球形视频供以后使用。t7c中文科技资讯

      公开的实施例可以应用于笔记本电脑,平板电脑,智能手机,服务器,媒体播放器,VR头显,AR显示器,全息显示器,以及专用的视频会议设备。t7c中文科技资讯

      图像源可以生成作为多向图像的图像数据,包含在多个方向上围绕参考点延伸的视场的图像数据。图像处理系统可以根据需要转换来自图像源的图像数据,从而适配视频编码器#230的要求。t7c中文科技资讯

      视频编码器可以生成输入图像数据的编码表示,这一般是通过利用图像数据中的空间沉余和临时沉余。视频编码器可以输出输入数据的编码表示(在发送或存储时消耗比输入数据更少的带宽)。t7c中文科技资讯

      捕捉操作可以生成等量矩形图像#320,预定尺寸是M×N像素。可选地,等量矩形图像可以转换成球形投影。t7c中文科技资讯

      相机可以从每个透镜系统中图像拼合中生成图像#380,根据每个半壳视场的对象位置,鱼眼透镜通常会引起畸变。t7c中文科技资讯

      需要注意的是,苹果每周都提交大量的专利申请,但很少能真正成为产品或服务。专利申请无法确保一个概念能出现在未来的消费者设备中。t7c中文科技资讯

      专利文件中的概念可能存在一定的前景应用。首先,这可以允许用户通过360度相机录制视频,合理地拼合视频,从选定区域创建剪辑,进行转换,使其看似最初就是通过“平面”相机录制。t7c中文科技资讯

      第二种前景应用是VR,可用于创建球形视频,以及提供头显用户的平面视图。使用360度相机制作的视频可能是未来VR用户的主要内容来源,但能够修正畸变,伪影的能力将能提高内容的观影质量。t7c中文科技资讯

      来源:XXX(非中文科技资讯)的作品均转载自其它媒体,转载请尊重版权保留出处,一切法律责任自负。

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

      如发现本站文章存在问题,提供版权疑问、身份证明、版权证明、联系方式等发邮件至news@citnews.com.cn。

    [上传用户: H088]
    分享到微信

    推荐

    新闻

    扮演“数字化监管助手” 腾讯安全重磅推出智慧共治平

    2018年初,腾讯公司董事局主席马化腾曾提出,在中国数字化进程中,希望腾讯能够扮演好各行各业数字化转型的助手。信息安全作为“0前面的1”,“数字化助手”角色正在渐入佳境。9月17日,2018国家网络安全宣传周暨网络安全博览会在成都开幕,腾讯安全推出服务于社会各界的智慧共治平台,借助腾讯安全在涉及国计民生的金融、食药、传销监管等多个领域推出的安全大数据产品和服务,协助政府部门及行业提升监管的科技含量,促进智慧城市建设。

    互联网+

    2018年十大新兴技术:人体变成“制药工厂”

    9月19日消息,据科学美国人杂志报道,在不久的将来,人工智能(AI)将大大加快创新药物和材料的发现。先进的诊断工具将使越来越个性化的医学成为可能。增强现实(AR)将无处不在,将信息和动画叠加在真实世界的图像上,帮助我们处理日常任务,并帮助行业更有效地运作。

    融合

    印度想立法让本国用户数据存储在印度 巨头们抗议

    9月20日消息,据路透社报道,印度计划推出一项新法案,将要求Facebook、PayPal等科技公司将用户数据存储在印度。包括印度本土的科技公司在内,全球范围内的科技公司准备对这项法案的推出进行抗争,理由是这将损害投资以及这些公司的商业模式。

    创投

    腾讯投资和商业开发总监离职 曾负责多笔数字娱乐投资

     据《华尔街日报》北京时间9月19日报道,腾讯控股公司投资高管乔纳森·莱(Jonathan Lai)周二表示,他已经从腾讯离职,加盟美国对冲基金Coatue Management担任类似职位。