PS6 может использовать собственный подход Sony к генерации кадров с помощью искусственного интеллекта, согласно недавно опубликованному патенту, который описывает прогнозирование будущих кадров с использованием изображений игрового процесса и даже действий игрока. Хотя Sony еще официально не представила PS6, эта заявка предлагает еще один потенциальный ключ к разгадке технологии, изучаемой для следующего поколения PlayStation.
Генерация кадров уже несколько лет является основной частью компьютерных игр высокого класса. Такие технологии, как Nvidia DLSS и AMD FSR, создают синтетические кадры, чтобы игры выглядели значительно более плавно, не требуя от графического процессора традиционного рендеринга каждого изображения, показываемого на экране. Sony движется в том же направлении через масштабирование PSSR для PS5 Pro и более широкое партнерство Project Amethyst с AMD, которое исследует графику с машинным обучением, улучшенную трассировку лучей и более эффективное оборудование графического процессора. Новейший патент компании предполагает, что создание рамок в конечном итоге может стать частью этого проекта.
Новый патент Sony намекает на возможную функцию генерации кадров PS6
Изображение через Sony
Патент Sony Generation Super Sampling, опубликованный 15 октября и опубликованный через Patencyze, описывает систему, которая может прогнозировать и отображать синтетическое изображение до того, как будет завершен следующий реальный кадр. Похоже, что это работает, когда кодер анализирует предыдущие изображения игрового процесса, передает встраивания изображений в декодер, а декодер предсказывает, что должно появиться дальше. Интересно, что система генерации кадров также может учитывать векторы движения и дополнительные действия игрока, включая нажатия кнопок и движения таких устройств, как джойстик или мышь, чтобы предсказать окончательное изображение. На одной из диаграмм Sony показано текущее изображение, векторы движения и последний ввод игрока, поступающий в нейронную сеть, в то время как обычный графический конвейер отдельно работает над фактическим следующим кадром.
Эта система потенциально может помочь Sony решить проблему задержки, которая была одним из самых больших компромиссов в генерации кадров с тех пор, как она появилась на игровых ПК. Традиционные подходы к генерации кадров с помощью DLSS или FSR часто требуют нескольких завершенных кадров в качестве данных перед вставкой сгенерированного между ними, что может сгладить изображение, не заставляя игру чувствовать себя одинаково отзывчивой. Вместо этого Sony хочет предсказать, что произойдет дальше, и знание того, что игрок только что нажал ручку камеры в определенном направлении, может дать системе дополнительную подсказку о том, что должно содержать это будущее изображение. В патенте даже обсуждается прогнозирование нескольких предстоящих кадров, хотя остается неизвестным, достигнет ли какая-либо из этих технологий в конечном итоге потребительского оборудования.
Тем не менее, эта заявка вполне соответствует тому, что Sony уже сказала о будущем PlayStation. Sony и AMD Project Amethysthas уже разработали такие технологии, как Neural Arrays для ускорения рабочих нагрузок машинного обучения, Radiance Cores для трассировки лучей и путей, а также Universal Compression для снижения требований к пропускной способности памяти. Sony также публично подтвердила, что вкладывает значительные средства в свою платформу следующего поколения, хотя не объявила окончательное оборудование, дату выпуска или цены. В совокупности недавние исследования все чаще показывают, что следующий графический скачок PlayStation может зависеть не только от более умных методов рендеринга, но и от простого размещения гораздо более быстрого графического процессора внутри коробки.
Sony вряд ли будет единственной, кто движется в этом направлении. Уже подтверждено, что Xbox следующего поколения Microsoft, Project Helix, будет использовать специальную SoC AMD, разработанную на основе будущих технологий DirectX и FSR, причем Microsoft обещает значительно более мощную трассировку лучей и интеллект, встроенный непосредственно в ее графический конвейер. Ожидается, что аппаратное обеспечение Helix поступит к разработчикам начиная с 2027 года, в то время как Sony хранит значительно молчание относительно того, когда может появиться ее собственная следующая консоль. Однако если Generation Super Sampling в конечном итоге перейдет от патентных диаграмм к аппаратному обеспечению PS6, следующее поколение консолей может определяться не столько тем, сколько кадров может отобразить машина, сколько тем, насколько убедительно она сможет создать промежуточные кадры.
