Maison  >  Article  >  Périphériques technologiques  >  Falcon revient après un an ! 11 milliards de paramètres et 5,5 billions de jetons, des performances dépassant celles de Llama 3

Falcon revient après un an ! 11 milliards de paramètres et 5,5 billions de jetons, des performances dépassant celles de Llama 3

王林
王林original
2024-06-09 17:25:311070parcourir

Ces derniers jours, l'attention du monde semble avoir été attirée par le GPT-4o publié par OpenAI. Dans le même temps, les challengers d'OpenAI entrent également dans l'histoire.

Le 14 mai, le Technology Innovation Institute (TII) de l'Abu Dhabi Advanced Technology Research Council (ATRC) a lancé une nouvelle génération de modèle Falcon 2.

时隔一年Falcon回归!110亿参数5.5万亿token,性能超越Llama 3

Falcon 2 11B est ouvert à l'accès, Falcon 2 11B VLM sera ouvert à midi le 14 mai

时隔一年Falcon回归!110亿参数5.5万亿token,性能超越Llama 3

La nouvelle génération de "Falcon" (Falcon signifie Falcon) revient Arena, une fois lancé, il est rapidement arrivé en tête de la liste des favoris de HN.

时隔一年Falcon回归!110亿参数5.5万亿token,性能超越Llama 3

L'année dernière, Falcon a choqué tout le monde avec sa première technologie, surpassant Llama avec un avantage écrasant.

Selon le classement Hugging Face, les performances du Falcon 2 11B lancé cette fois ont encore une fois dépassé Llama 3 8B, et étaient équivalentes aux performances du leader Gemma 7B, avec une différence de score moyenne de seulement 0,01.

时隔一年Falcon回归!110亿参数5.5万亿token,性能超越Llama 3

Falcon 2 comprend deux versions : Falcon 2 11B et Falcon 2 11B VLM.

Le premier est un grand modèle de langage formé sur 5,5 billions de jetons, et le second est un modèle « visuel vers langage » développé sur cette base.

En tant que grand modèle de langage open source, Falcon 2 possède non seulement des capacités multilingues, mais prend également en charge la multimodalité et peut convertir de manière transparente une entrée visuelle en sortie texte. Cette fonctionnalité est la première du genre dans le grand modèle actuel. marché.

时隔一年Falcon回归!110亿参数5.5万亿token,性能超越Llama 3

Téléchargez simplement une image dans l'interface utilisateur et entrez une invite, vous pouvez obtenir une description textuelle de l'image

Multilingue + multimodal

Falcon 2 11B a des capacités multilingues , vous pouvez répondre rapidement à des tâches en anglais, français, espagnol, allemand, portugais et dans de nombreuses autres langues.

Falcon 2 11B VLM, en tant que modèle de langage visuel, peut reconnaître et interpréter diverses informations visuelles de l'environnement, il dispose donc d'un large éventail de scénarios d'application dans des domaines tels que les soins médicaux, la finance, le commerce électronique, l'éducation, et le droit.

Par exemple, il est utilisé pour des tâches telles que la gestion de documents et l'indexation contextuelle, et sa fonction « visuel vers langage » devrait également aider les malvoyants à l'avenir.

De plus, Falcon 2 n'a besoin que d'un seul GPU pour fonctionner efficacement et peut être facilement déployé sur un ordinateur portable.

Afin d'accélérer le processus de commercialisation de Falcon, en novembre de l'année dernière, l'ATRC a créé une nouvelle société - AI71

Basée sur le modèle Falcon, AI71 est entrée dans les domaines éducatif, médical, juridique et autres des Émirats arabes unis. . Et prévoit de s’étendre bientôt au-delà des Émirats arabes unis. Cette mise à niveau de Falcon apporte un soutien solide à son processus de commercialisation.

Insistance sur le Falcon open source

Les modèles d'intelligence artificielle publiés par TII ont toujours été parmi les meilleurs au monde. Le modèle Falcon 2 11B récemment lancé a une fois de plus stabilisé la position de TII.

Plus important encore, les deux versions modèles de cette mise à jour sont open source et peuvent être utilisées par les développeurs du monde entier sans restrictions et développées et déployées sur cette base. Les excellentes performances démontrées par le modèle signifient que TII devrait rivaliser avec Meta pour la domination de l'univers open source.

Faisal Al Bannai, secrétaire général de l'Abu Dhabi Advanced Technology Research Council (ATRC), a promis de continuer à promouvoir l'innovation open source et d'aider les développeurs du monde entier à réaliser leur parcours vers l'IA.

时隔一年Falcon回归!110亿参数5.5万亿token,性能超越Llama 3

Dr. Hakim Hacid, leitender Forscher am TII, sagte auch: „Entwickler erkennen die unzähligen Vorteile kleinerer, effizienterer Modelle … Darüber hinaus sind die visuellen Sprachfähigkeiten von Falcon 2 der nächste große Trend.“ Die einfache Nutzung künstlicher Intelligenz eröffnet neue Perspektiven und bietet Benutzern revolutionäre Möglichkeiten zur Interaktion von Bildern bis Text. „TII gab außerdem bekannt, dass das Modell Falcon 2 der nächsten Generation entwickelt wird, das bald auf den Markt kommt. , die Leistung dieser Modelle werden durch die Mix of Experts (MoE)-Technologie weiter verbessert.

Der Kampf zwischen Open Source und Closed Source ist unentschieden. Aber auf jeden Fall ist TII zu einer starken Kraft im Bereich AGI geworden. Dahinter stehen die gemeinsamen Anstrengungen der VAE, die die Entwicklung künstlicher Intelligenz voll vorantreiben und diese Technologie als die nächste wirtschaftliche Säule nach Öl betrachten .

Falcon existiert nicht nur als „ernsthafter Teilnehmer“, sondern als „Falcon“, der mit großem Ehrgeiz fliegt.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Déclaration:
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn