Sony avait déjà promis que la PS5 révolutionnerait le son des jeux avec son unité de traitement audio 3D intégrée. Maintenant, il semble que la prochaine étape de Sony consiste à développer des bandes sonores de jeux basées sur l'IA qui réagissent à votre gameplay ou à vos émotions et modifient la musique en conséquence. Le brevet `` Dynamic Music Creation in Gaming '' a été découvert pour la première fois par Game Rant, et bien qu'il ne mentionne pas spécifiquement la PlayStation 5, il a tous les ingrédients d'une fonctionnalité que Sony envisage pour la prochaine console. Dans le brevet, les ingénieurs de Sony décrivent comment ils envisagent d'utiliser l'apprentissage automatique pour analyser comment différents «composants musicaux» tels que le rythme, la mélodie et l'harmonie correspondent à des émotions spécifiques, puis créer différentes partitions musicales émotionnellement variables qui susciteront des sentiments spécifiques à la joueurs pendant qu'ils jouent. Tout d'abord, Sony demandera à ses compositeurs de créer des "patterns" musicaux qui correspondent à un personnage spécifique, une activité dans le jeu, des lieux, ou même la "personnalité" du joueur. Ces modèles seront ensuite codés pour jouer en fonction des données de Sony sur ce que le joueur ressent ou devrait ressentir à un moment donné. Par exemple, sur la PS5, Sony pourrait prendre de la musique de tout le monde d'Assassin's Creed Valhalla et baisser le tempo et les percussions pour un environnement plus calme si le joueur a cessé de bouger pendant un moment, augmentant la tension s'il est verrouillé sur un cible. , ou ajoutez un violon mobile si un personnage bien-aimé apparaît. Les émotions spécifiques que ce système dynamique tenterait d'évoquer incluent la tension, le pouvoir, la joie, l'émerveillement, la tendresse, la transcendance, la tranquillité, la nostalgie, la tristesse, la sensualité et la peur. Les ingénieurs prévoient d'analyser des tonnes de musique populaire pour transformer la musique qui provoque des émotions en science. Son système d'apprentissage automatique convertira la musique en partitions électroniques, comparera les partitions avec les critiques des critiques et des fans, puis marquera dans le temps des morceaux de musique spécifiques qui correspondent à des émotions spécifiques. Sony prévoit ensuite d'expérimenter "l'association des émotions et des scénarios". Pendant une période stressante, plutôt que de jouer de la musique tendue de manière prévisible, ils ont fait valoir qu'un courant sous-jacent de sensualité sous-jacente pourrait avoir un "effet meilleur et plus intéressant" sur votre expérience. Bien qu'on ne sache pas quand le "moteur de compositing" sera considéré comme viable, il est certain qu'il pourrait fonctionner sur la PS5 d'ici fin 2020 pour différencier la console de la Xbox Series X. De nombreux jeux vidéo aujourd'hui ajustent déjà leur musique en fonction sur les actions ou les événements des joueurs dans le jeu, mais pas avec ce niveau de subtilité et de personnalisation.
L'avenir biométrique de Sony pour PS5?
cámara térmica o infrarroja '', un tracker d'activité portable '' ou une '' montre intelligente à détection biologique '' À partir de là, le système prendra des données de votre corps et ajustera la bande sonore en conséquence. Imaginez si vous mouriez plusieurs fois devant un patron coriace, et que la PS5 pourrait détecter votre fréquence cardiaque élevée, l'interpréter comme de la frustration et ajuster la bande-son pour jouer quelque chose de plus relaxant. De nombreux propriétaires de PS5 ne seront pas à l'aise avec le fait que Sony en sache autant sur leur santé et leur personnalité. Mais si l'apprentissage automatique de Sony peut profiler un sous-ensemble de joueurs, ils peuvent probablement prédire les réponses émotionnelles moyennes à certains segments du jeu. Ensuite, ils peuvent extrapoler comment n'importe quel joueur pourrait réagir à une scène. donnée et ajustez la musique en conséquence. Indépendamment des problèmes de confidentialité, ce brevet suggère que Sony pourrait être intéressé par la surveillance de la santé des joueurs dans d'autres contextes. Nintendo explore la technologie de suivi du sommeil depuis des années, et son jeu d'exercice Ring Fit Adventure a été un énorme succès. Sony peut avoir des aspirations similaires pour la PlayStation 5, soit pour créer sa propre technologie de suivi, soit pour connecter les montres intelligentes et les trackers de fitness des joueurs à la PS5 pour fournir des données en temps réel.