Sony a récemment déposé un brevet décrivant une technologie de génération prédictive de frames, conçue pour réduire l’input lag sur les consoles PlayStation. Cette approche, inspirée du rollback netcode utilisé dans les jeux de combat, vise à anticiper les actions du joueur pour générer des images synthétiques en avance, offrant ainsi une expérience plus réactive.
Le problème de l’input lag avec les technologies actuelles
Depuis l’introduction du DLSS Super Resolution par NVIDIA, les technologies d’upscaling et de génération de frames ont considérablement amélioré la fluidité visuelle des jeux. Cependant, la fluidité perçue ne correspond pas toujours à la réactivité réelle. Le Frame Generation, par exemple, insère des images synthétiques entre les frames rendues par la GPU, ce qui peut introduire un délai supplémentaire avant l’affichage. Ce décalage, appelé input lag, est particulièrement problématique dans les jeux rapides comme les shooters ou les jeux de combat, où chaque milliseconde compte.
Des technologies comme NVIDIA Reflex ont été développées pour atténuer ce problème, mais elles ne l’éliminent pas complètement. Sony, conscient de ces limitations, propose une solution radicalement différente dans son brevet.
Une approche prédictive inspirée du rollback netcode
Le brevet, déposé le 15 octobre et repéré par Patentlyze, décrit une technologie appelée « Frame generation super sampling ». Contrairement aux méthodes traditionnelles qui interpolent entre deux frames existantes, l’approche de Sony consiste à prédire le prochain frame en se basant sur les inputs du joueur. L’idée est d’anticiper l’action du joueur (par exemple, un saut) et de générer le frame correspondant avant même que la GPU ne l’ait calculé.
Cette méthode s’inspire directement du rollback netcode, utilisé dans des jeux comme Street Fighter 6. Dans ce système, le jeu prédit les actions des joueurs pour compenser la latence réseau. Sony transpose ce concept au rendu graphique : en analysant les inputs du contrôleur et les vecteurs de mouvement, un algorithme prédit le frame suivant et l’affiche à l’écran, réduisant ainsi le délai perçu.
Comment fonctionne la génération prédictive de frames
Le système décrit dans le brevet repose sur trois composants principaux :
- Un encodeur analyse le frame rendu nativement, les vecteurs de mouvement et les inputs du joueur.
- Un décodeur génère le frame synthétique prédit et l’affiche avant que le prochain frame réel ne soit calculé par la GPU.
- Un système de secours non-AI intervient si la prédiction est incorrecte, afin d’éviter les artefacts visuels.
Cette architecture permet de réduire l’input lag en affichant les frames prédits plus rapidement, tout en maintenant une qualité visuelle acceptable grâce au système de secours.
Défis techniques et perspectives
Bien que prometteuse, cette technologie présente des défis importants. La prédiction des frames nécessite une puissance de calcul considérable et peut entraîner des erreurs si les actions du joueur sont imprévisibles. Dans les jeux très rapides, une prédiction incorrecte pourrait provoquer des artefacts visuels ou une expérience dégradée. Sony devra donc résoudre ces problèmes avant une éventuelle implémentation commerciale.
Le brevet ne mentionne pas de matériel supplémentaire requis, ce qui suggère que la technologie pourrait être intégrée aux consoles actuelles via une mise à jour logicielle. Cependant, il est peu probable qu’elle soit disponible à court terme, compte tenu de sa complexité.
Un pas de plus vers une expérience plus réactive
Ce brevet montre que Sony explore activement des solutions pour améliorer la réactivité des jeux sur ses consoles. Si la technologie aboutit, elle pourrait offrir un avantage concurrentiel significatif, en particulier pour les jeux compétitifs où l’input lag est critique. Les joueurs pourraient bénéficier d’une expérience plus fluide et plus réactive, sans sacrifier la qualité visuelle.
En attendant, les technologies actuelles comme le DLSS et le FSR continuent d’évoluer, et il sera intéressant de voir comment Sony intégrera ces innovations dans ses futures consoles ou mises à jour.
