Utilisez ChatGPT pour créer de grands modèles en quelques secondes ! Le nouveau plug-in d'OpenAI est fou, connectez-vous à l'interpréteur de code et obtenez-le en un clic

Une fois ChatGPT connecté à Internet, OpenAI a également rapidement introduit un générateur de code. Avec la prise en charge de ce plug-in, ChatGPT peut même générer son propre modèle d'apprentissage automatique.

​Vendredi dernier, OpenAI vient d'annoncer la nouvelle choquante selon laquelle ChatGPT peut se connecter à Internet et se connecter à des plug-ins tiers !

En plus des plug-ins tiers, OpenAI a également introduit son propre plug-in « Code Interpreter » et a proposé plusieurs cas d'utilisation particuliers : résolution de problèmes mathématiques quantitatifs et qualitatifs ; analyse et visualisation de données et conversion rapide de fichiers ; .

De plus, Greg Brockman a démontré que ChatGPT peut également traiter les fichiers vidéo téléchargés.

Et un auteur à succès nommé Andrew Mayne, une application créative et communicateur scientifique d'OpenAI, a immédiatement essayé en connectant l'interpréteur de code (Code Inerpreter) à ChatGPT.

Le sentiment est que c'est si soyeux !

Lorsque j'utilisais ChatGPT pour écrire du code dans le passé, j'avais toujours besoin de retirer le code et de le placer dans un autre environnement pour le tester.

Désormais, vous pouvez développer directement dans ChatGPT sans quitter l'interface actuelle.

Tant que nous ajoutons cet interpréteur de code aux fonctions d'analyse de données et de dessin, un outil de codage et de recherche incroyablement puissant naîtra.

Le nouveau système de plug-in d'OpenAI : Code Interpreter

Actuellement, l'interpréteur de code ne peut exécuter Python que sur un petit nombre de bibliothèques, mais même avec les bibliothèques les plus basiques, il peut faire beaucoup de choses, ce qui est très intéressant.

De plus, en plus de générer du code, l'interprète de code (CI) peut également analyser la sortie et l'utiliser dans une autre fonction.

Nous pouvons donc enchaîner différents codes, obtenir le résultat de l'un et le transmettre à l'autre.

Voici comment ce gif Pac-Man est généré : CI utilise un algorithme pour générer un labyrinthe, transforme le labyrinthe en blocs, utilise l'algorithme pour trouver la sortie, le fait ressembler à Pac-Man, puis génère le gif.

Voici quelques exemples de Mayne utilisant le plugin d'interprétation de code de ChatGPT pour mener des expériences aléatoires.

Créer des modèles d'apprentissage automatique (en quelque sorte)

Bien que ChatGPT ne puisse actuellement charger aucune bibliothèque d'apprentissage automatique dans l'interpréteur de code, nous pouvons utiliser des n-grammes pour effectuer une génération de texte statistique de base.

Dans l'exemple suivant, en lui fournissant un livre, il lui est demandé de créer un algorithme de prédiction puis de prédire le mot suivant dans la séquence de texte.

GPT utilise des modèles n-grammes pour générer des algorithmes :

La prédiction du mot suivant est une tâche de traitement du langage naturel qui peut être résolue à l'aide de modèles linguistiques. Un moyen simple de créer un modèle de langage consiste à utiliser un modèle n-gram.

Le modèle n-gram est un modèle de langage basé sur des statistiques qui prédit le mot suivant en fonction des n-1 mots précédents. Par exemple, si nous choisissons n = 3 (c'est-à-dire un modèle ternaire), le modèle prédira le mot suivant en fonction des deux mots précédents.

Voici un code pour vous aider à créer un modèle ternaire à partir de zéro.

Sounds

Parce que ChatGPT peut comprendre de nombreuses données mathématiques et que CI peut générer des fichiers téléchargeables, Mayne a essayé d'utiliser ChatGPT pour générer des tonalités Shepard. Il s’agit d’un ton unique qui crée l’illusion que la tonalité s’élève.

ChatGPT a non seulement terminé la tâche avec succès, mais a également généré directement un fichier wav à l'aide de CI.

Ouvrez-le et écoutez le son de Sheperd, et le sentiment est, deux mots - parfait !

Étant donné que le ton Sheperd généré par ChatGPT était si parfait, Mayne est allé plus loin et a demandé à ChatGPT de générer une session Conway Game of Life, puis de la convertir en musique.

(Conway's Game of Life est un programme informatique conçu par Conway à l'Université de Cambridge. Il s'agit d'un jeu zéro joueur complet de Turing, ce qui signifie que son évolution dépend de son état initial et ne nécessite aucune autre intervention.)

Dans le premier passage, la musique générée par ChatGPT était un peu trop aléatoire. Mayne lui a demandé de générer une musique plus agréable, alors ChatGPT a appliqué la gamme pentatonique, et ça sonnait vraiment bien.

game_of_life_pentatonic_slow Audio : ​00:0000:14​

La performance de ChatGPT est si bonne que Mayne est très excité. Il a déjà commencé à imaginer un album de musique mathématique entier, tel que (Séquence de Fibonacci, Ensemble de Mandelbrot, automates cellulaires. ).

Il a ensuite demandé à ChatGPT de générer une pochette d'album pour la chanson "Conway Game of Life". Comme il n'était pas connecté au DALL-E, Mayne lui a demandé de générer des images à partir d'images simulées.

La couverture de l'album est la suivante.

QR code

En regardant la couverture de cet album, Mayne a immédiatement réalisé qu'il pourrait être possible d'utiliser ChatGPT pour générer un code QR valide.

Mayne lui a demandé de générer un code QR pour le site Web d'OpenAI, et voici le résultat :

Alors, ChatGPT peut-il créer un jeu de vie Conway qui se termine par un code QR ?

Oui, c’est possible.

Pictures

De plus, Mayen a découvert qu'en utilisant OpenCV et un simple algorithme de reconnaissance faciale (classificateur Haar Cascade), CI peut créer une fonction pour effectuer la reconnaissance faciale.

Utiliser OpenCV pour la reconnaissance faciale

Désormais, ChatGPT peut ouvrir et lire des fichiers par lui-même, ce qui signifie qu'en théorie il peut utiliser ces données pour générer de nouvelles choses. Par exemple, convertissez une image au format ASCII.

Télécharger des images :

Convertir en ASCII :

Générer une animation

Grâce à l'interpréteur de code, vous pouvez générer des données et les afficher dans différents formats, y compris gif.

Tout d'abord, laissez-le faire un bloc rebondissant :

Ensuite, il y a le blizzard :

Vient ensuite le « Jeu de la vie », qui a inspiré l'expérience de simulation de code QR.

Essayer de faire en sorte que l'interpréteur de code utilise un cube vectorisé pour générer un "cube tourné". Avant d'essayer d'autres méthodes, celle-ci était la plus proche que je pouvais obtenir :

OCR

Selon les recherches, la reconnaissance optique de caractères (OCR) est une bibliothèque dans un interpréteur de code. En testant avec une capture d’écran du site internet, il est effectivement possible de l’identifier.

La combinaison de l'OCR avec GPT-4, un modèle de langage puissant, ouvre des possibilités intéressantes pour réparer d'anciens documents.

Comme vous pouvez le voir sur l'image ci-dessus, l'OCR peut extraire une partie du texte de l'image entière, mais le résultat est toujours incomplet et contient du bruit.

Il semble que l'OCR puisse avoir des limites lorsqu'il s'agit d'images de mauvaise qualité ou déformées. Si vous avez besoin d'obtenir des informations spécifiques à partir d'une image, vous devrez également transcrire manuellement une partie du contenu.

Invitation au calendrier

Bien que l'interpréteur de code n'ait pas accès à la bibliothèque ics, il peut générer une invitation au calendrier en texte uniquement, puis laisser ChatGPT l'enregistrer en tant que fichier .ics.

Dessin

Bien qu'il y ait eu quelques exemples intéressants de GPT-4 générant des images vectorielles évolutives (SVG). Mais je suis toujours curieux de savoir ce que ChatGPT et l'interpréteur de code peuvent faire avec de simples blocs d'images.

Je lui ai demandé de dessiner un chat et il a créé quelque chose qui ressemble à un chat. Pour être sûr qu'il n'était pas fait de mémoire, je lui ai demandé de dessiner un haut-de-forme et une pipe bleues. Pas tout à fait le haut de forme que j'imaginais, mais quand même un chapeau, et bleu.

Un chat portant un chapeau et fumant une pipe :

Un chat portant un chapeau "Chat au chapeau" et fumant une pipe :

Simulator

En utilisant la bibliothèque Matplotlib, J'ai réussi à demander à ChatGPT de générer une simulation des orbites des planètes intérieures et de l'enregistrer sous forme de gif.

Je me suis alors demandé si je pouvais demander à ChatGPT de simuler un jeu de dames, et j'ai réussi à déplacer les pièces, mais pas à enlever celles de l'adversaire par politesse.

Pouvez-vous simuler une partie d'échecs ? J'ai d'abord demandé à ChatGPT de créer sa propre bibliothèque de plateaux (une bibliothèque de plateaux très simple avec quelques restrictions et des mouvements moins légaux...) puis d'utiliser Unicode pour représenter les pièces, après quoi il pourrait simuler le début d'une partie et le mettre en sauvegarde. sous forme de fichier .gif.

Ce qui suit est la conversation entre moi et ChatGPT pendant la simulation d'échecs. Comme vous pouvez le voir, je viens de donner quelques instructions et ChatGPT et l'interpréteur de code ont fait le reste.

Ce qui précède est une exploration des plugins ChatGPT et interpréteur de code par Andrew Mayne.

Après l'avoir lu, les internautes ont commenté que les LLM ressemblent de plus en plus à de vrais programmeurs. Ils peuvent non seulement suggérer des extraits de code, mais également écrire des blocs entiers de code, exécuter le code et vous fournir des conseils et des commentaires supplémentaires.

Certaines personnes ont dit que même si elles arrêtent ce qu'elles font, elles devraient lire cet article sur les cas d'utilisation du plug-in interpréteur de code GPT-4. C’est complètement fou et ça va tout changer.

Référence :

​​https://andrewmayneblog.wordpress.com/2023/03/23/chatgpt-code-interpreter-magic/​​

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!