GPU, contrôles de mouvement, matchmaking en ligne, VR — les technologies développées pour résoudre les problèmes de jeu qui ont fini par transformer l'informatique bien au-delà des jeux.
Kaboom Pics / Pexels
L'industrie du jeu vidéo est rarement créditée comme un moteur de la technologie informatique de la même manière que la recherche militaire, les institutions académiques et les logiciels d'entreprise, bien qu'elle ait généré certaines des innovations matérielles et logicielles les plus conséquentes des quatre dernières décennies. C'est en partie un problème de cadrage : la technologie de jeu a tendance à être discutée comme une application des avancées informatiques existantes plutôt qu'une source d'entre elles, alors que les archives historiques montrent que la relation fonctionne au moins aussi souvent dans la direction opposée.
Le mécanisme spécifique derrière ce modèle est cohérent dans la plupart des entrées de cette liste : le jeu a créé un marché commercial avec une demande technique inhabituellement intense et spécifique — rendu graphique 3D en temps réel, réseau à faible latence, suivi de mouvement précis, audio immersif — qui était suffisamment grand pour financer des investissements sérieux dans la recherche et le développement, et cette demande a fait avancer des technologies que les marchés informatiques existants (logiciels d'entreprise, informatique scientifique) n'avaient pas priorisées au même degré parce que leurs exigences de performance étaient différentes ou moins extrêmes.
Chaque entrée de cette liste couvre une technologie spécifique, le problème de jeu qui a motivé son développement, et comment elle s'est ensuite avérée utile dans des domaines bien au-delà des jeux. Plusieurs de ces technologies sont maintenant si intégrées dans l'informatique générale que leur origine dans le jeu est réellement surprenante pour les gens qui découvrent l'histoire pour la première fois.
Nana Dua / Pexels
Le GPU en tant que composant informatique distinct — un processeur spécialisé optimisé pour les calculs mathématiques parallèles requis pour rendre les graphiques 3D en temps réel — a été développé spécifiquement pour résoudre le problème de performance de rendu que les jeux sur PC et console ont créé dans les années 1990 : rendre des scènes 3D complexes à un taux de trame jouable nécessitait un volume de calculs matriciels et vectoriels que les CPU à usage général de l'époque ne pouvaient pas traiter assez rapidement, et des entreprises comme NVIDIA (fondée en 1993) ont construit toute leur activité autour de la résolution de ce problème de performance de jeu spécifique.
La sortie en 1999 par NVIDIA du GeForce 256, commercialisé comme le premier vrai "GPU", a établi l'architecture — un processeur avec un très grand nombre de cœurs de traitement parallèles simples optimisés pour les calculs matriciels répétitifs des graphiques 3D — qui est depuis devenue la base d'une révolution informatique entièrement distincte : la même architecture massivement parallèle qui rend les graphismes des jeux s'est avérée extrêmement bien adaptée aux opérations de multiplication matricielle qui sous-tendent l'apprentissage automatique et l'entraînement à l'intelligence artificielle.
La technologie spécifique qui a rendu cette transition possible était CUDA, la plateforme de programmation de NVIDIA sortie en 2007 qui a permis aux développeurs d'utiliser le matériel GPU de jeu pour l'informatique parallèle à usage général plutôt que pour les seuls graphiques, et cette plateforme est devenue l'infrastructure fondamentale de l'actuel essor de l'IA : les grands modèles de langage, les systèmes de génération d'images et d'autres technologies de l'IA qui dominent le discours technologique actuel sont principalement entraînés et exécutés sur une architecture GPU qui a été initialement conçue pour rendre les graphismes des jeux vidéo plus rapidement.
SHVETS production / Pexels
La Nintendo Wii, sortie en 2006, a intégré des contrôles de mouvement basés sur un accéléromètre dans sa manette Wii Remote spécifiquement pour résoudre un problème de conception de jeux : rendre les jeux vidéo plus intuitifs physiquement et accessibles à un public plus large que l'interface traditionnelle de boutons et de joystick ne le permettait, et le succès commercial de cette approche (la Wii a vendu plus de 100 millions d'unités) a entraîné un investissement important dans la technologie de détection de mouvement accessible aux consommateurs.
Le Kinect de Microsoft $MSFT, sorti en 2010 comme accessoire pour la Xbox 360, a prolongé cette tendance encore plus loin, en intégrant un système de caméra de détection de profondeur capable de suivre les mouvements corporels complets et la position du squelette sans aucune manette tenue à la main – une technologie grand public véritablement novatrice à l'époque, dont les techniques sous-jacentes de détection de profondeur et de vision par ordinateur ont ensuite été adaptées à des applications entièrement non liées aux jeux, y compris les systèmes de rééducation médicale qui suivent le mouvement des patients pendant la thérapie physique, la recherche en robotique (les capteurs Kinect ont été largement adoptés par les chercheurs en robotique comme une solution de détection de profondeur peu coûteuse avant que des alternatives spécialement conçues n'existent), et les systèmes d'analyse des mouvements des clients dans les magasins.
Les recherches plus larges sur le contrôle gestuel et de mouvement financées par les entreprises de jeux durant cette période ont également contribué directement aux techniques sous-jacentes de vision par ordinateur et de fusion de capteurs que les fabricants de smartphones ont ensuite intégrées dans la détection de mouvement des appareils mobiles, les applications de réalité augmentée et les interfaces basées sur les gestes qui sont devenues standard dans de nombreuses catégories d'électronique grand public.
Yan Krukau / Pexels
Le défi technique spécifique de connecter un grand nombre de joueurs dans un gameplay compétitif en temps réel — avec une latence suffisamment faible pour que les réactions en une fraction de seconde restent justes et significatives — a entraîné une innovation significative dans les protocoles de mise en réseau, l'architecture des serveurs et les algorithmes de matchmaking qui précèdent et, à plusieurs égards spécifiques, surpassent la sophistication des réseaux que les applications Internet non liées aux jeux développaient à la même époque.
Les jeux en ligne massivement multijoueurs (MMO) comme Ultima Online (1997) et World of Warcraft (2004) ont dû résoudre des problèmes d'architecture de serveurs — en prenant en charge des dizaines de milliers d'utilisateurs simultanés interagissant dans un monde persistant partagé avec un état cohérent — qui étaient beaucoup plus exigeants que les exigences de mise en réseau de la plupart des applications Internet commerciales ou grand public de la même époque, nécessitant des innovations dans l'architecture de serveurs distribués, l'équilibrage de charge et la synchronisation d'état qui ont influencé plus largement la conception des infrastructures de cloud computing par la suite.
Les algorithmes de matchmaking développés pour jumeler des joueurs compétitifs de niveau de compétence similaire — des systèmes comme le système de classement Elo adapté des échecs et ensuite perfectionnés en systèmes plus sophistiqués comme TrueSkill (développé par Microsoft $MSFT Research spécifiquement pour Xbox Live) — ont trouvé des applications bien au-delà des jeux, y compris dans des contextes académiques et d'entreprise nécessitant des systèmes de jumelage ou de classement justes basés sur des données de performance incomplètes et évolutives.
Nana Dua / Pexels
Le lancer de rayons - une technique de rendu qui simule le comportement physique des rayons lumineux individuels pour produire un éclairage, des reflets et des ombres très réalistes - a été utilisé dans la production cinématographique pendant des décennies, mais était jusqu'à récemment bien trop coûteux en calcul pour être rendu en temps réel, nécessitant des heures de traitement par image dans des contextes de production de films où la performance en temps réel n'était pas requise.
La sortie par NVIDIA en 2018 de la série RTX de GPU de jeux, incorporant des cœurs matériels dédiés au lancer de rayons, a représenté la première technologie accessible aux consommateurs capable de rendre des graphismes tracés par rayons en temps réel à des taux de trames adaptés au jeu interactif - un exploit d'ingénierie spécifique entièrement motivé par la demande du marché des jeux pour des graphismes plus réalistes, nécessitant le développement de nouvelles architectures matérielles (cœurs RT dédiés) et de techniques logicielles (réduction du bruit basée sur l'IA pour compenser le faible échantillonnage des rayons que les contraintes de temps réel exigent) qui n'existaient pas auparavant dans le matériel consommateur accessible.
La technologie qui en résulte a ensuite trouvé des applications dans la visualisation architecturale (permettant aux architectes et aux clients de parcourir des rendus photoréalistes de bâtiments en temps réel plutôt que d'attendre des visites pré-rendues), la visualisation de conception automobile, et les pipelines de production de films et d'animation qui utilisent désormais le lancer de rayons en temps réel pour la pré-visualisation et, de plus en plus, pour le rendu final de qualité réelle dans des contextes de production spécifiques - applications qui s'appuient directement sur l'architecture matérielle spécifique que la demande du jeu pour des graphismes réalistes en temps réel a initialement justifié de développer.
Tima Miroshnichenko / Pexels
Bien que la recherche en réalité virtuelle précède de loin le jeu moderne - les premières recherches en VR remontent aux années 60 dans des contextes académiques et militaires - la technologie est restée une curiosité de recherche de niche, largement inaccessible en dehors des contextes institutionnels spécialisés, jusqu'à ce que le jeu fournisse le marché commercial et le prix consommateur qui ont poussé le matériel VR dans une véritable production de masse.
L'Oculus Rift, financé par une campagne Kickstarter en 2012 et acquis par Facebook $META (Meta) en 2014 pour 2 milliards de dollars spécifiquement en raison de son potentiel VR consommateur axé sur le jeu, était le produit spécifique qui a catalysé l'industrie contemporaine de la VR consommateur, stimulant le développement du suivi de tête à faible latence, des écrans à taux de rafraîchissement élevé, et des optiques de lentilles nécessaires pour produire une expérience VR suffisamment confortable pour un usage consommateur prolongé sans le mal des transports qui avait affligé les tentatives précédentes de VR.
L'écosystème matériel et logiciel VR qui en résulte a par la suite trouvé une application significative bien au-delà du jeu : simulations de formation médicale permettant aux chirurgiens de pratiquer des procédures en VR avant de les exécuter sur des patients, visites virtuelles architecturales et immobilières, simulations de formation industrielle pour les environnements de travail dangereux, et applications de thérapie par exposition en psychologie clinique pour traiter les phobies et le SSPT - applications qui s'appuient sur l'infrastructure matérielle et logicielle VR dont la viabilité consommateur a été spécifiquement établie par le jeu.
cottonbro studio / Pexels
L'exigence spécifique de communication vocale de faible latence et de haute qualité pendant les jeux multijoueurs compétitifs — où un audio retardé ou brouillé nuit directement au jeu d'équipe coordonné — a entraîné un investissement significatif dans la technologie de compression et de transmission audio en temps réel qui précède et, à certains égards techniques spécifiques, dépasse les normes de qualité audio de la technologie téléphonique contemporaine et de la voix sur Internet au début.
Le système de chat vocal Xbox Live, lancé en 2002, et le développement ultérieur de plates-formes de chat vocal dédiées au jeu, y compris TeamSpeak (2001) et Discord (2015), ont stimulé des innovations dans l'efficacité des codecs audio (compression des données vocales pour une transmission en temps réel sur des connexions à bande passante limitée sans perte de qualité ou de délai inacceptable) et dans la technologie de suppression du bruit et d'annulation d'écho nécessaire à la production d'une communication vocale utilisable dans les environnements domestiques bruyants et souvent mal équipés où les joueurs communiquaient.
Discord en particulier, qui a construit sa base d'utilisateurs initiale et sa réputation technique entièrement au sein des communautés de joueurs, s'est ensuite étendu à une plate-forme de communication plus large utilisée largement en dehors des contextes de jeu — pour la communication d'équipe de travail à distance, l'organisation communautaire et des fins éducatives — poursuivant l'infrastructure vocale spécifique de faible latence et de haute qualité que les exigences exigeantes de communication en temps réel du jeu ont initialement poussé l'entreprise à développer et affiner.
JESHOOTS.com / Pexels
Le défi technique de diffuser une expérience de jeu vidéo interactive complète et de faible latence depuis un serveur distant vers un appareil local — par opposition à la diffusion de vidéos préenregistrées, qui tolère beaucoup plus de latence et de mise en mémoire tampon — a entraîné une innovation significative dans la compression vidéo, l'optimisation du réseau et l'infrastructure de calcul en périphérie qui a ensuite informé la technologie de streaming vidéo plus large.
Des services tels que Google $GOOGL Stadia (lancé en 2019, bien qu'arrêté en 2023), NVIDIA GeForce Now et le Xbox Cloud Gaming de Microsoft $MSFT ont nécessité la résolution d'un problème technique spécifique et exceptionnellement exigeant : la transmission de vidéos haute résolution avec une latence suffisamment faible (ciblant généralement moins de 100 millisecondes aller-retour) pour que le gameplay interactif en temps réel reste réactif, une exigence plus stricte que presque toute autre application de streaming vidéo, y compris la diffusion sportive en direct, qui peut tolérer plusieurs secondes de latence sans affecter matériellement l'expérience du spectateur.
Les techniques spécifiques de calcul en périphérie et de streaming adaptatif développées pour résoudre ce problème de latence spécifique aux jeux ont informé l'approche de l'industrie du streaming vidéo pour réduire la latence dans le contenu diffusé en direct en général, et les investissements dans l'infrastructure sous-jacente que les entreprises de cloud gaming ont réalisés dans des réseaux de centres de données distribués optimisés pour la livraison à faible latence ont contribué à l'infrastructure de calcul en périphérie plus large dont d'autres applications sensibles à la latence, y compris la visioconférence et les outils de collaboration en temps réel, ont ensuite bénéficié.
cottonbro studio / Pexels
L'exigence d'une simulation physique réaliste et en temps réel dans les jeux — des objets qui tombent, entrent en collision et interagissent avec un élan crédible et une réponse de collision — a conduit au développement de logiciels de moteur physique dédiés (Havok, fondé en 1998, et PhysX de NVIDIA, parmi les plus largement licenciés) qui ont résolu une simulation physique en temps réel et efficace des années avant que la capacité de simulation en temps réel comparable n'existe dans la plupart des contextes de calculs scientifiques et d'ingénierie, qui utilisaient traditionnellement des méthodes de simulation beaucoup plus lentes et plus intensives en calcul qui n'avaient pas besoin de fonctionner en temps réel.
Les techniques d'optimisation spécifiques développées pour les moteurs de physique de jeu — algorithmes de détection de collision simplifiés, dynamique des corps rigides approximative mais efficace, et systèmes de niveau de détail qui réduisent la précision de la simulation pour les objets moins importants visuellement à un moment donné — ont ensuite informé les applications de simulation en temps réel en robotique (où la simulation physique est utilisée pour entraîner et tester les systèmes de contrôle des robots avant le déploiement sur du matériel physique), le développement de véhicules autonomes (simulant la dynamique des véhicules et l'interaction environnementale à des fins de test et de formation), et les applications de jumeaux numériques industriels qui simulent les systèmes physiques en temps réel pour la surveillance et la maintenance prédictive.
Tima Miroshnichenko / Pexels
Le défi spécifique et continu de détecter la triche dans les jeux en ligne compétitifs — logiciels qui donnent aux joueurs un avantage injuste grâce à une assistance de visée automatisée, le wall-hacking (voir à travers des surfaces solides), ou d'autres formes de manipulation — a conduit au développement de systèmes sophistiqués d'analyse comportementale et de détection d'anomalies qui identifient des performances statistiquement improbables et des signatures techniques de logiciels de triche, des techniques qui ont ensuite informé les systèmes de détection de fraude dans des industries totalement indépendantes.
Le système VAC (Valve Anti-Cheat) de Valve et les systèmes ultérieurs plus sophistiqués, y compris BattlEye et Easy Anti-Cheat, ont développé des techniques de détection qui combinent la détection de signatures techniques (identifiant les logiciels de triche connus à travers leur code ou leur empreinte mémoire) avec l'analyse comportementale statistique (identifiant des motifs de performance statistiquement incohérents avec un jeu humain légitime, tels qu'un suivi de visée inhumainement précis ou des temps de réaction plus rapides que les limites neurologiques humaines ne le permettent), une approche combinée qui reflète, et dans certains cas précède, les systèmes de détection de fraude que les institutions financières et les plateformes de commerce électronique utilisent pour identifier les transactions frauduleuses et les tentatives de prise de contrôle de compte.
Les techniques d'apprentissage automatique spécifiques utilisées dans les systèmes anti-triche modernes de jeux — former des modèles sur de grands ensembles de données de comportements de joueurs à la fois légitimes et confirmés tricheurs pour identifier des motifs statistiques qui distinguent les deux — partagent un chevauchement technique significatif avec les systèmes de détection d'anomalies utilisés dans la détection des menaces de cybersécurité plus largement, et plusieurs ingénieurs d'anti-triche du jeu ont ensuite évolué vers des rôles plus larges de cybersécurité et de détection de fraude, emportant avec eux les techniques spécifiques d'analyse comportementale que l'environnement adversarial du jeu les a forcés à développer dans d'autres industries faisant face à des défis de détection similaires.
Tima Miroshnichenko / Pexels
Le retour haptique précis et nuancé (basé sur le toucher) — la vibration et le retour de force qui communiquent les événements en jeu (un impact, un grondement, une texture spécifique) à un joueur via une manette — a été un domaine spécifique d'innovation continue dans le matériel de jeu depuis le Rumble Pak de la Nintendo 64 en 1997, stimulant une technologie haptique de plus en plus sophistiquée qui a ensuite trouvé des applications dans la conception de dispositifs mobiles, les interfaces automobiles, et la technologie d'assistance pour les utilisateurs malvoyants.
La manette DualSense de Sony $SONY pour la PlayStation 5, sortie en 2020, intègre un retour haptique beaucoup plus sophistiqué que les générations précédentes, y compris des gâchettes adaptatives qui peuvent simuler une résistance variable (la tension spécifique de bander une corde d'arc, ou la résistance des freins d'un véhicule) et un retour haptique localisé qui peut simuler la sensation spécifique de différentes textures de surface ou de conditions environnementales, une technologie qui a nécessité un investissement original significatif en ingénierie spécifiquement pour répondre à la demande du jeu vidéo pour un retour tactile plus immersif et riche en informations.
La technologie des actionneurs haptiques sous-jacente et les techniques logicielles pour générer des motifs de vibration nuancés et riches en informations ont ensuite influencé les systèmes de retour haptique des smartphones (qui utilisent désormais des moteurs haptiques tout aussi sophistiqués pour simuler la sensation de boutons physiques et fournir un retour d'interface nuancé), les interfaces d'écran tactile automobile (qui utilisent le retour haptique pour fournir une confirmation tactile des entrées tactiles sans obliger le conducteur à détourner le regard de la route), et les applications de technologie d'assistance qui utilisent le retour haptique pour transmettre des informations aux utilisateurs malvoyants par le toucher plutôt que par la vue.