ChatGPT-4o, le joueur parfait de Geoguessr ? 

Super!

Bah je ne suis pas du tout ingénieur en IA mais ce que ChatGPT t'explique me paraît cohérent, il se nourri de toutes ses conversations avec tous les utilisateurs de ChatGPT, il synthèse les données très largement dans un protocole de machine learning qui nous paraît complètement illisible et donc l'information exacte de la photo de Google Street View que tu lui a envoyé est irrécupérable ça ne sera pas enregistré tel quel, tout comme cette conversation ! Il ne va collecter que des espèces de briques très bizarres d'informations que seul un ingénieur d'Open AI pourrait expliquer, et pour des raisons de secrets industriels je pense qu'on n'aura pas d'explication d'un protocole de machine learning en cours de développement.

à la fin quand il te dit qu'il peut apprendre de ce que tu lui dis, c'est à la fois vrai et faux. En réalité dans une seule conversation qui peut être d'une taille max avec chatGPT4o d'environ 85 000 mots chatGPT devrait mémoriser tout ce que tu lui as appris. Par contre, ce n'est pas dit que grâce à tes conversations avec lui il s'améliore, pour cette partie ça dépendra de si tu as accepté dans tes paramètres à ce que tes conversations soient utilisées pour les futurs entrainements, de plus le modèle est mis à jour par cycles, donc hormis pour pour censurer le modèle ou autre, la base de connaissance du modèle ne changera pas avant plusieurs mois. De plus, il faut se dire que ce que fait openAI c'est que quand tu envoies une image on peut se dire que pour simplifier en réalité il génère un texte de taille limitée qui résumera cette image (avec sa propre langue) donc si par exemple il n'avait pas repéré de scotch sur l'image même si tu lui dis, c'est pas certain qu'il comprenne où se situe le scotch.

0:12 fin 2022*

Je penses qu'un ordinateur qui accède à la bibliothèque complète de Google Street View risque quand même de prendre un certain temps à retrouver la correspondance d'une photo qu'on lui envoie, c'est tellement énorme ! Par contre je penses que Google devrait expérimenter des entraînements à Gemini en lui faisant jouer à GeoGuesser ! 😆 Selon moi ça doit être une source de connaissance formidable pour comprendre le monde, mais encore mieux je penses qu'ils devraient intégrer une ia comme ça dans un robot curieux et expérimentateur pour comprendre la physique dans lequel vivent les hommes.

il y a 3 niveaux de connaissance dans ChatGPT : - la session : tout ce que tu dis dans la session est retenu (ce n'est pas réellement une connaissance, je trouve que c'est plus une consigne). ex : Quel est la caractéristique de l'extrémité des barres de toit d'un véhicule Google Car au Gana ? il me répond "sphère rouge" je lui demande la source il répond qu'il n'en est pas capable et me dit d'aller voir sur Google Image je l'informe que je n'ai vu aucune sphère rouge mais que certains images ont un scotch noir je lui demande : Quel est la caractéristique de l'extrémité des barres de toit d'un véhicule Google Car au Gana ? il répond scotch noir - la connaissance hors session : tu fermes la session, en ouvre une nouvelle, lui repose la question et... tu n'as plus l'info du scotch noir (pour le fun, la question a généré une toute autre réponse avec une main saluant). il n'a donc rien retenu de ton autre session - les prochaines version de ChatGPT peuvent utiliser les conversations pour s'améliorer. je pense cependant qu'il est peu probable que le scotch noir soie retenu, je pense que ce serra + un utilisation pour mieux comprendre ce qui a foiré (par ex quand tu signales que la réponse est mauvaise) car sinon, sa base serrait vite très pourrie (il retiendrait n'importe quelle ânerie)

Alors non gpt n'apprends pas au fur a mesure des discussions, chaque version du modèle, est finie et ne bouge plus. Par contre les données des conversations peuvent être utilisées pour entrainer les prochaines itérations de modèles. (Même si a mon avis c'est de moins en moins le cas, car ces données ne sont pas de qualité et remplies de biais. Aujourd'hui la tendance est de privilégier la qualité a la quantité, mais c'est pas le sujet) GPT et consorts racontent souvent n'importe quoi et c'est normal. gpt4-o et les version d'avant ont été fine-tunés pour toujours chercher a répondre positivement aux demandes des utilisateurs, donc il va toujours donner l'illusion de tout savoir, alors qu'il n'a conscience de rien et que la vérité ou le mensonge n'existent pas pour lui, il fournit juste une réponse probabiliste . Vu le volume d'entrainement, ça tape souvent juste pour les questions simples mais c'est souvent faux pour tous les sujets de niche ou les questions trop complexes. Par contre quand gpt-4o dit qu'il ne sait pas voir les images, ça parait fou mais pour le coup il dit juste, il ne sait pas le faire ! ça reste un LLM , il ne gère que du texte, malgré les annonces de multimodalité. Ce qui se passe (a mon avis) lorsqu'on envoie une image dans ChatGPT: C'est une autre IA entrainée pour ça qui va décrire l'image en texte et envoyer le texte a gpt-4o. C'est pareil pour la voix, c'est pas gpt qui parle, gpt envoie le texte a un algorithme text to speech dont c'est le rôle. Dans le cas du morceau de scotch, trois possibilités: - L'IA img2txt (image to text) ne l'identifie pas. (Le plus probable) - L'IA img2txt l'identifie techniquement mais ne le décrit pas en texte, ou pas correctement. - gpt-4o, le LLM, (IA txt2txt) a bien la description correcte mais ne sait pas quoi en faire. OpenAi communique peu sur le côté technique, tout ceci n'est que supposition, et j'essaie de vulgariser donc je simplifie, mais j'ai toutes les raisons de penser que ça fonctionne a peu près comme ça. Le fait que GPT dise qu'il ne sait pas voir les images tends d'ailleurs a le prouver. Maintenant pourquoi ne forcent-ils pas gpt-4o, dans l'interface ChatGPT, a dire que sisi il sait bien "voir" les images (rien de plus simple, avec un pré-prompt caché par exemple), ça reste un mystère et ça fait un peu tâche en effet. Sinon en ce moment ChatGPT est repassé devant les autres, dans la description d'image aussi a mon avis donc pas de meilleure IA a conseiller pour le moment. Mais faire un match de Geoguessr entre IA pourrait être fun. si jamais je bidouille ça pour m'amuser je reviendrai vous partager les résultats ^^ Merci pour la vidéo.

Chatgpt 2002‽