Alphabet的谷歌申请了一项压缩系统的专利,该系统专为由foveated渲染产生的帧而设计。
Foveated渲染是一个过程,它以较低的分辨率呈现VR头显的大部分视图,除了用户的眼睛被指向的准确区域外,这是通过眼睛跟踪检测到的。眼睛前面的区域,人类感知最大细节的区域,以更高的分辨率呈现。Foveated渲染被认为对于VR的未来发展至关重要,因为它允许更高的分辨率而没有不可能的GPU要求。
为什么要压缩帧呢?为什么不直接将结果发送到头显呢?
该专利解释说,在头显中,从SoC(芯片上的系统)到显示器的数据通道的带宽是有限的。增加这一消耗将对能源消耗产生重大影响。像DisplayPort这样的规范已经包含了一个可选的压缩系统,但是它背后的算法并不是为单个帧中视觉灵敏度变化的元素设计的。
所描述的新压缩系统优先考虑高细节区域内的元素,其结果应该是“几乎无损”。 将高细节图像和低细节图像组合而没有可见的伪像被描述为需要定制芯片。 值得庆幸的是,这款芯片被描述为“相对简单”。
虽然专利申请在本周公布,但其提交日期为2017年7月。这项专利似乎是基于谷歌研究公司(GoogleResearch)2017年末发表的一篇题为“Foveated压缩和传输策略”的论文。
该项目由Behnam Bastani博士领导,他领导了谷歌的整个VR渲染研究工作。2018年,巴斯塔尼转到Facebook,在迈克尔·阿伯拉什(Michael Abrash)领导的FRL部门工作。Facebook从谷歌和微软挖来顶级VR人才的趋势似乎越来越明显。
图文出自:uploadvr