Maison  >  Article  >  Périphériques technologiques  >  LeCun, lauréat du prix Turing : ChatGPT a d'énormes limites et la durée de vie du modèle autorégressif ne dépasse pas 5 ans.

LeCun, lauréat du prix Turing : ChatGPT a d'énormes limites et la durée de vie du modèle autorégressif ne dépasse pas 5 ans.

WBOY
WBOYavant
2023-05-04 13:04:13550parcourir

Le premier semestre de cette année peut être considéré comme la moitié la plus excitante de l'industrie de l'IA.

Derrière le développement rapide des différents GPT et même des prototypes d'AGI, il y a deux camps de personnes avec des points de vue différents.

Un groupe estime que l'IA générative dirigée par ChatGPT est très puissante et peut générer une vague de tendances révolutionnaires, et qu'il n'y a aucun problème à continuer d'avancer.

L'autre groupe pense qu'on évolue un peu trop vite. Même si ce n’est pas interdit, il faut l’arrêter pendant un certain temps. Et en termes de moralité, il y a trop peu de contraintes correspondantes.

Grand gagnant dans le domaine de l'IA, Yann LeCun a un autre regard sur la question. Interdiction totale ? Pas réalisable

LeCun a déclaré qu'il n'était pas surpris par les performances de ChatGPT et n'était pas favorable à un moratoire sur la recherche sur l'intelligence artificielle.

LeCun, lauréat du prix Turing : ChatGPT a dénormes limites et la durée de vie du modèle autorégressif ne dépasse pas 5 ans.

"Cela pourrait produire le résultat inverse de celui attendu."

Il a dit que l'intelligence artificielle était L’amplificateur de l’intelligence humaine pourrait être à l’origine de la nouvelle Renaissance.

ChatGPT Ce grand modèle de langage est « autorégressif ». L'IA est entraînée pour extraire des mots d'un corpus allant jusqu'à 1,4 billion de mots et prédire le dernier mot d'une séquence de phrases donnée, qui est le prochain mot qui doit apparaître.

Claude Shannon a mené des recherches pertinentes dans les années 1950.

LeCun, lauréat du prix Turing : ChatGPT a dénormes limites et la durée de vie du modèle autorégressif ne dépasse pas 5 ans.Le principe n'a pas changé, cela devient la taille du corpus et la puissance de calcul du modèle lui-même.

LeCun a déclaré : « Actuellement, nous ne pouvons pas nous appuyer sur ce type de modèle pour générer un texte long et cohérent. Ces systèmes ne sont pas contrôlables. Par exemple, nous ne pouvons pas demander directement ChatGPT Générez un texte dont le public cible est les enfants de 13 ans

Deuxièmement, le texte généré par ChatGPT n'est pas fiable à 100% en tant que source d'information. outil auxiliaire. Tout comme le système d'aide à la conduite existant, si vous activez la fonction de conduite automatique, vous devez toujours tenir le volant. De plus, la conduite automatique telle que nous la connaissons aujourd'hui a une durée de vie très courte. Cinq ans, c'est un cycle. Après cinq ans, plus personne n'utilisera les anciens modèles, nous devrions nous concentrer sur la recherche d'un moyen de rendre ces modèles contrôlables. raisonner et planifier en fonction d'objectifs donnés, et doit être capable d'assurer sa sécurité et sa fiabilité. Les normes sont cohérentes. Ce type d'IA peut ressentir des émotions. Vous savez, la plupart des émotions humaines sont liées à l'objectif. est atteint ou non, c'est-à-dire qu'il est lié à une certaine forme d'attente.

Avec un tel modèle contrôlable, nous pouvons générer un texte long et cohérent.

L'idée de LeCun est de concevoir des modèles améliorés qui pourront à l'avenir mélanger les données de différents outils, tels que des calculatrices ou des moteurs de recherche.

Les modèles comme ChatGPT sont uniquement formés sur le texte, la compréhension de ChatGPT du monde réel est donc incomplète. Si vous souhaitez développer davantage sur cette base, vous devez apprendre du contenu lié à la perception sensorielle et à la structure du monde entier.

Et ces contenus plus complexes ne peuvent pas être obtenus simplement par la lecture de texte, ce qui est l'un des plus grands défis des prochaines années.

L'Open source est la fin

Le désir de pouvoir est propre aux humains. Et l’IA n’aura pas ce désir simplement parce qu’elle devient de plus en plus puissante.

Seule l'espèce humaine sait formuler des lois pour garantir que les actions individuelles ne nuisent pas trop aux intérêts communs.

OpenAI était à l'origine un projet de recherche ouvert et est désormais fermé. OpenAI n’a fait aucune mention de ses travaux, un revirement peu courant dans le domaine de la recherche.

Le problème est que la formation d'un modèle linguistique coûte cher, coûte des dizaines de millions d'euros, les startups ne peuvent donc pas se le permettre.

C’est aussi la principale raison de la fusion de Microsoft et d’OpenAI, qui nécessite la puissance de calcul commune du groupe pour améliorer ses futurs modèles. C'est pourquoi DeepMind et Google Brain ont finalement fusionné.

LeCun, lauréat du prix Turing : ChatGPT a dénormes limites et la durée de vie du modèle autorégressif ne dépasse pas 5 ans.

LeCun a déclaré qu'en fin de compte, en termes de marché, les développeurs s'orienteront vers un écosystème commun de plateformes ouvertes. Ce serait mauvais si seulement quelques entreprises contrôlaient une telle technologie.

Historiquement, Facebook et Meta ont activement promu la recherche fondamentale ouverte, comme le projet open source LlaMa.

LeCun, lauréat du prix Turing : ChatGPT a dénormes limites et la durée de vie du modèle autorégressif ne dépasse pas 5 ans.

Au début des années 1990, Sun Microsystems et Microsoft se battaient pour le pouvoir d'exploiter des serveurs. N'oubliez pas que toutes les technologies Internet restées établies sont open source.

LeCun a finalement déclaré qu'à l'heure actuelle, la clé pour empêcher de telles plates-formes d'IA open source réside dans les questions juridiques. Si l’UE veut promouvoir la structuration de l’industrie de l’IA à l’avenir, ce type de plateforme open source est alors essentiel.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Déclaration:
Cet article est reproduit dans:. en cas de violation, veuillez contacter admin@php.cn Supprimer