Le nouveau brevet de l'IA de Sony prédit les appuyés sur le bouton via la caméra à la caméra

Sony a récemment déposé un nouveau brevet qui pourrait révolutionner la façon dont nous vivons les jeux en réduisant considérablement la latence dans le matériel futur. Le brevet, intitulé «Timed Entrée / Release Action», présente une approche innovante pour minimiser le retard entre la contribution d'un joueur et la réponse du jeu, en tirant parti d'un modèle d'IA et des capteurs supplémentaires. Cette évolution vient dans le sillage de l'introduction par Sony de PlayStation Spectral Super Resolution (PSSR) avec le PlayStation 5 Pro, qui, bien que capable de remonter à 4K, peut introduire la latence avec de nouvelles technologies graphiques comme la génération de trame.

La latence a été un défi persistant dans les jeux, ce qui rend souvent les jeux moins réactifs malgré une augmentation des fréquences d'images. AMD et NVIDIA ont abordé ce problème avec des technologies comme Radeon Anti-LAG et NVIDIA Reflex, respectivement. Le brevet de Sony suggère une solution unique qui implique de prédire les entrées utilisateur via un modèle d'IA d'apprentissage automatique, potentiellement aidé par des capteurs externes tels qu'une caméra axée sur le contrôleur pour anticiper quel bouton un joueur pourrait appuyer sur ensuite. Le brevet explique: "Dans un exemple particulier, la méthode peut inclure la fourniture d'entrée de la caméra en tant qu'entrée dans un modèle d'apprentissage automatique (ML). L'entrée de la caméra peut indiquer la première commande utilisateur."

L'approche de Sony vise à rationaliser la "version chronométrée des commandes utilisateur", comme la société le note dans le brevet ", il peut y avoir la latence entre l'action d'entrée de l'utilisateur et le traitement et l'exécution ultérieurs du système de la commande. En prédisant les intrants, Sony espère réduire cette latence, améliorant l'expérience de jeu, en particulier dans les genres comme les tireurs Twitch qui exigent à la fois des fractures élevées et une faible latence.

Un autre aspect intrigant du brevet est l'utilisation potentielle des boutons de contrôleur comme capteurs, faisant allusion à l'intérêt continu de Sony pour les boutons analogiques pour les contrôleurs de nouvelle génération. Bien que la mise en œuvre exacte dans de futures consoles comme la PlayStation 6 reste incertaine, ce brevet démontre l'engagement de Sony à réduire la latence sans compromettre la réactivité des jeux. Cela est particulièrement pertinent avec la montée en puissance des technologies de rendu comme FSR 3 et DLSS 3, qui peuvent ajouter la latence de cadre aux jeux.

Bien qu'il ne soit pas clair si cette technologie sera adoptée exactement comme décrit dans le brevet, il est évident que Sony explore des solutions innovantes pour améliorer l'expérience de jeu. Que ce brevet se traduit ou non par le matériel futur, il est clair que l'entreprise se consacre à repousser les limites de ce qui est possible dans les jeux.