Alphabet的谷歌申請了一項壓縮系統(tǒng)的專利,該系統(tǒng)專為由foveated渲染產(chǎn)生的幀而設(shè)計。
Foveated渲染是一個過程,它以較低的分辨率呈現(xiàn)VR頭顯的大部分視圖,除了用戶的眼睛被指向的準確區(qū)域外,這是通過眼睛跟蹤檢測到的。眼睛前面的區(qū)域,人類感知最大細節(jié)的區(qū)域,以更高的分辨率呈現(xiàn)。Foveated渲染被認為對于VR的未來發(fā)展至關(guān)重要,因為它允許更高的分辨率而沒有不可能的GPU要求。
為什么要壓縮幀呢?為什么不直接將結(jié)果發(fā)送到頭顯呢?
該專利解釋說,在頭顯中,從SoC(芯片上的系統(tǒng))到顯示器的數(shù)據(jù)通道的帶寬是有限的。增加這一消耗將對能源消耗產(chǎn)生重大影響。像DisplayPort這樣的規(guī)范已經(jīng)包含了一個可選的壓縮系統(tǒng),但是它背后的算法并不是為單個幀中視覺靈敏度變化的元素設(shè)計的。
所描述的新壓縮系統(tǒng)優(yōu)先考慮高細節(jié)區(qū)域內(nèi)的元素,其結(jié)果應(yīng)該是“幾乎無損”。 將高細節(jié)圖像和低細節(jié)圖像組合而沒有可見的偽像被描述為需要定制芯片。 值得慶幸的是,這款芯片被描述為“相對簡單”。
雖然專利申請在本周公布,但其提交日期為2017年7月。這項專利似乎是基于谷歌研究公司(GoogleResearch)2017年末發(fā)表的一篇題為“Foveated壓縮和傳輸策略”的論文。
該項目由Behnam Bastani博士領(lǐng)導(dǎo),他領(lǐng)導(dǎo)了谷歌的整個VR渲染研究工作。2018年,巴斯塔尼轉(zhuǎn)到Facebook,在邁克爾·阿伯拉什(Michael Abrash)領(lǐng)導(dǎo)的FRL部門工作。Facebook從谷歌和微軟挖來頂級VR人才的趨勢似乎越來越明顯。
圖文出自:uploadvr