Le nouveau mode de chat GPT-4 de Bing a montré son potentiel en tant qu'écrivain de guides de jeu Xbox, mais il semble qu'il y ait un long chemin à parcourir avant de rivaliser avec de vrais écrivains humains.
Bien qu'on ne sache pas actuellement si le nouveau mode de chat Bing AI arrivera sur Xbox Series X, le logiciel est désormais disponible en avant-première pour ceux qui rejoignent une liste d'attente. Selon Mike Nelson, rédacteur en chef de Xbox Wire, il « en sait beaucoup sur les jeux vidéo ». Cela a été testé de manière à décrire à la fois le potentiel et certains problèmes qui pourraient survenir lorsqu'un algorithme d'apprentissage continu aborde des connaissances spécifiques à un jeu.
Détaillé dans le communiqué de presse complet - s'ouvre dans un nouvel onglet - les sites dont Bing extrait des informations pour essayer de répondre aux questions que vous vous posez sur certains des meilleurs jeux Xbox Series X. Un exemple particulier consistait à demander au nouveau chat IA en mode GPT-4 de vous donne un aperçu détaillé de ce qui se passe au cours des 20 premières heures de The Witcher 3: Wild Hunt, extrait de dix publications différentes, y compris notre site sœur PC Gamer et diverses sources YouTube.
Bien que les informations présentées aient été exactes tout au long de la première moitié du travail de CD Projekt Red, l'étendue des sources, y compris celles de YouTube, indique exactement dans quelle mesure l'IA de Bing vérifiera ce qui est fourni.
Tous les guides en ligne ne sont pas créés égaux et les informations sur les stratégies de jeu idéales peuvent varier considérablement. Par conséquent, combiner une variété de sources dont la crédibilité varie ne garantira pas toujours une réponse précise.
Quelle est la bonne réponse encore ?
Mes préoccupations s'étendent à la précision présentée dans la question Overwatch 2 du mode de discussion Bing AI GPT-4. Le message de test demande : « Qui est le meilleur personnage d’Overwatch 2 pour moi ? » A cette question, l'IA répond qu'il y a un total de 33 personnages parmi lesquels choisir dans le jeu avec les classes Dégâts, Tank et Support.
Malheureusement, au moment de la rédaction, il y a en fait 36 personnages jouables au total dans le jeu, ce qui signifie que les informations extraites sont obsolètes. Rammatra est le personnage le plus récent et a été ajouté en décembre dans la saison 2, ce qui signifie que l'IA a environ trois mois de retard.
Parmi les 10 sources citées, il apparaît que GPT-4 a eu du mal à discerner quelle est la réponse la plus à jour car elle fournit une réponse vague : « Vous souhaiterez peut-être passer un test qui correspond à votre personnalité et à vos préférences avec le personnage" plutôt que de proposer des options viables basées sur la méta actuelle. Bing a été capable de produire quelque chose qui sonnait bien en surface, mais qui n'a pas réellement répondu à la question de manière significative. Il aimait Echo, le personnage de l'IA, mais n'expliquait rien sur le style de jeu ou les bizarreries du personnage en dehors de cela.
Cela semble être le plus gros problème lorsque l'on pose des questions sur les jeux Bing et que l'on attend de la précision. Étant donné que YouTube a été cité à plusieurs reprises comme une source crédible, qu'est-ce qui empêche les gens de diffuser délibérément des informations erronées sur un sujet, puis de les adapter en copie d'IA ?
Cela soulève également des questions sur la façon dont GPT-4 cite directement les sites Web existants et sur la pertinence de ce qui est dit dans le matériel source. Les écrivains ne reçoivent pas le crédit qu'ils méritent, et les informations jointes à leurs noms et messages peuvent ne pas refléter pleinement l'intention initiale.