Новый патент AI от Sony прогнозирует нажатие кнопки с помощью камеры пальца

Sony недавно подала новый патент, который мог бы революционизировать то, как мы испытываем игры, значительно сократив задержку в будущем оборудовании. Патент под названием «Выпуск ввода/действий», вводит инновационный подход, чтобы минимизировать задержку между входом игрока и ответом игры, используя модель ИИ и дополнительные датчики. Эта разработка происходит после введения Sony Spectral Super Resolution Spectral PlayStation (PSSR) с PlayStation 5 Pro, которая, хотя и способна масштабироваться до 4K, может привести к задержке с более новыми графическими технологиями, такими как генерация кадров.

Задержка была постоянной проблемой в играх, часто заставляя игры менее отзывчивыми, несмотря на повышенную частоту кадров. И AMD, и Nvidia решали эту проблему с такими технологиями, как Radeon Anti-LAG и Nvidia Reflex, соответственно. Патент Sony предлагает уникальное решение, которое включает в себя прогнозирование пользовательских вводов через модель AI-машинного искусства, которая может помочь внешним датчикам, таким как камера, сфокусированная на контроллере, чтобы предвидеть кнопку, на какую кнопку может нажать игрок. Патент объясняет: «В одном конкретном примере метод может включать в себя ввод камеры в качестве входа в модель машинного обучения (ML). Вход камеры может указывать на первую команду пользователя».

Подход Sony направлен на оптимизацию «времени выпуска пользовательских команд», как отмечает компания в патенте, «может быть задержка между входным действием пользователя и последующей обработкой системы и выполнением команды. Это, в свою очередь, приводит к задержке выполнения команды и непредвиденным последствиям в самой игре». Прогнозируя входные данные, Sony надеется уменьшить эту задержку, улучшив игровой опыт, особенно в жанрах, таких как Switers, которые требуют как высоких кадров, так и низкой задержки.

Другим интригующим аспектом патента является потенциальное использование кнопок контроллера в качестве датчиков, намекая на постоянный интерес Sony к аналоговым кнопкам для контроллеров следующего поколения. Хотя точная реализация в будущих консолях, таких как PlayStation 6, остается неопределенной, этот патент демонстрирует приверженность Sony снижать задержку без ущерба для отзывчивости игр. Это особенно актуально с ростом технологий рендеринга, таких как FSR 3 и DLSS 3, которые могут добавить задержку рамы к играм.

Хотя неясно, будет ли эта технология принята точно так же, как описано в патенте, очевидно, что Sony изучает инновационные решения для улучшения игрового опыта. Независимо от того, переводится ли этот патент на будущее оборудование, ясно, что компания стремится раздвигать границы того, что возможно в играх.