索尼互動娛樂公司的一項新專利表明,索尼正在為PS5和VR開發(fā)一種用于實時圖像增強的機器學習技術(shù)。這種機器學習過程有點類似于英偉達的深度學習超級采樣技術(shù)(Deep learning Super Sampling,簡稱DLSS),因為它可以在不犧牲性能的情況下提高游戲的分辨率。
英偉達的DLSS可以讓電腦更好地運行游戲,通過較低的分辨率渲染原始圖像,讓GPU更容易處理,并使用人工智能提升圖像的檔次,以更高的分辨率運行。這意味著視覺密集型游戲可以在4K屏幕甚至更高的設(shè)置上運行,但FPS不會受到影響,因為游戲?qū)嶋H上是以1080p運行的,但觀感與實際的4K分辨率非常相似。
索尼的這項專利是在今年4月申請的,上個月剛剛公布。該專利概述了一種方法,機器學習可以創(chuàng)建特定圖像的“遮罩”,以隱藏或填補丟失或損壞數(shù)據(jù)留下的空白。從本質(zhì)上說,這可以在不犧牲性能的情況下,實現(xiàn)實時圖像增強,因為這種技術(shù)對硬件的負擔更輕。
該專利多次提到VR,這項技術(shù)對于提供更高質(zhì)量的圖像至關(guān)重要,這正是一款高級VR頭盔所需要的。為VR頭戴式設(shè)備供電需要強大的處理能力,值得注意的是,PSVR頭戴式設(shè)備分辨率較低。
這項新專利將機器學習技術(shù)描述為“使用更少的計算力”,并且“在最需要保持用戶舒適度和沉浸感的地方不犧牲圖像質(zhì)量”。這可能意味著下一代PSVR頭戴式設(shè)備可以運行具有更好視覺質(zhì)量和性能的VR游戲。
隨著21世紀20年代的深入,我們可以看到更多的8K屏幕進入主流市場,這一技術(shù)也可以用來將圖像增強到8K。
該專利的作者是索尼高級首席工程師Andy Bigos,他在LinkedIn上的介紹寫道:“致力于機器學習和神經(jīng)渲染在PS5上實時圖像的應(yīng)用”。
“最近,我率先使用神經(jīng)渲染來增強傳統(tǒng)的渲染方法,重點是使用隱式神經(jīng)表示,以及如何使它們高效運行。這包括使用計算著色器創(chuàng)建自定義高性能干涉。這項工作的目標是PS5?!?/p>