Компания Sony оформила патент на технологию, способную изменить подход к генерации игровых кадров. В отличие от существующих методов интерполяции, новая нейросеть не ждёт появления второго реального кадра, а предсказывает следующий кадр ещё до того, как видеокарта его отрисует. Это позволяет избавиться от задержек, которые неизбежно возникают при традиционном сглаживании.
Суть разработки в том, что алгоритм анализирует последний готовый кадр, считывает текущие нажатия на геймпаде и учитывает векторы движения объектов в сцене. На основе этих данных нейросеть генерирует предсказанный кадр и выводит его на экран, пока графический процессор занят рендерингом следующего. Таким образом, пауза между кадрами заполняется не ожиданием, а интеллектуальным предсказанием.
Главная цель технологии — устранить рывки и микрофризы, которые возникают, когда видеокарта не успевает отрисовать кадр в срок. Предсказанный кадр заменяет собой пустоту на экране, но при этом задержка управления не увеличивается. Это особенно важно для динамичных игр, где отзывчивость управления критична.
В отличие от классической генерации кадров, где между двумя настоящими кадрами вставляется третий, подход Sony не требует ожидания второго кадра. Это снижает общую задержку и делает игровой процесс более плавным. Патент описывает систему, которая может работать в реальном времени, используя данные с контроллера и информацию о движении объектов.
Хотя патент не гарантирует скорого появления технологии в потребительских устройствах, сама идея выглядит прорывной. Если Sony удастся реализовать её на практике, игроки получат более плавную картинку без ущерба для отзывчивости. Это особенно актуально для консолей и облачного гейминга, где ресурсы ограничены.
Технология предсказания кадров может стать следующим шагом в эволюции графики. Вместо того чтобы гнаться за чистой мощностью, разработчики смогут использовать ИИ для умного заполнения промежутков между кадрами. Sony уже не первый год экспериментирует с нейросетями в играх, и этот патент подтверждает серьёзность намерений компании в данной области.
