Новий патент, поданий sony interactive entertainment, описує план “реалізації комп’ютерного методу обробки зображення”. Традиційно зображення можуть містити “області відсутніх або пошкоджених даних зображення”. Для заповнення цих прогалин існують різні процеси, але методи машинного навчання можуть бути вимогливі до продуктивності або займати багато часу.

Щоб обійти ці проблеми, новий комп’ютерний метод sony передбачає створення “маски” зображення, що розкриває одні його ділянки і приховує інші, а потім зміна зображення і застосування процесів заповнення на основі наявності або відсутності пробілів. В кінцевому підсумку комп’ютер навчиться відносно просто визначати, чи повинна бути пролом чи ні, що дозволить йому заповнювати зображення швидше і з меншими обчислювальними витратами.

Це не дуже схоже на технологію deep learning super sampling (dlss) від nvidia, яка використовує технологію апскейлінга в своїх відеокартах для поліпшення роздільної здатності зображення в реальному часі. Sony, схоже, працює над впровадженням своєї версії цієї технології в ps5 і, можливо, в psvr ps5.

У патенті зазначається, що система може бути використана в пристрої віртуальної реальності, то що “гарнітури віртуальної реальності вимагають набагато більшої обчислювальної потужності для відображення задовільного зображення користувачеві, ніж звичайний комп’ютерний монітор”, відзначаючи необхідність використання меншої обчислювальної потужності для забезпечення “комфорту і занурення користувача”.

У профілі linkedin енді бігоса, старшого головного інженера sony, який вказаний як один з винахідників патенту, говориться, що останнім часом він “працював над застосуванням машинного навчання і нейронного рендеринга для графіки реального часу на playstation 5”. Це не містить конкретної згадки vr, але, здається, безпосередньо пов’язує цю технологію з консоллю.