Maison >Périphériques technologiques >IA >Solution intelligente d'annotation de données : une plateforme de crowdsourcing qui accueille l'ère des grands modèles
Le 26 mai, la plateforme de crowdsourcing NetEase Fuxi Youling a fait ses débuts au China International Big Data Industry Expo. Cette plateforme est une plateforme de tâches en ligne de collaboration homme-machine développée par NetEase Fuxi sur la base de ses propres recherches et développements. Il s'agit actuellement de la seule plateforme de crowdsourcing sur le marché qui prend en charge l'annotation des interactions homme-machine en temps réel. L'objectif de la plateforme de crowdsourcing Fuxi Youling est de résoudre le problème de la pénurie de main-d'œuvre dans tous les domaines et de fournir à l'ensemble de la société des opportunités d'emploi en ligne plus pratiques et plus intéressantes. Les entreprises clientes peuvent rapidement modéliser et publier des tâches via cette plate-forme, tandis que chaque utilisateur de concert peut recevoir librement des tâches sans restrictions de temps et de géographie. De cette manière, la plateforme de crowdsourcing Fuxi Youling offre aux entreprises et aux particuliers un modèle de travail plus efficace et plus flexible.
À l’ère d’aujourd’hui, la technologie de l’intelligence artificielle change rapidement la façon dont les humains vivent et travaillent. Avec le développement rapide des technologies d'intelligence artificielle telles que les grands modèles de langage et les grands modèles multimodaux, le domaine de l'annotation de données a marqué le début d'une nouvelle ère de développement vigoureux. Une grande quantité de données apparaît constamment dans divers domaines. Cependant, dans cette époque passionnante, tant du côté de la demande que du côté des fournisseurs, ils sont confrontés à d’énormes défis. Ils doivent trouver un moyen efficace de fournir un support de données de haute qualité et à faible coût. Cela n'est pas seulement lié à la précision et à l'aspect pratique de la technologie de l'intelligence artificielle, mais également aux perspectives de développement de l'ensemble du secteur. Par conséquent, l’industrie de l’annotation de données a besoin d’une innovation et d’une amélioration continues pour répondre aux besoins de la technologie de l’intelligence artificielle et promouvoir le développement durable de l’industrie.
Afin de s'adapter à la tendance de l'ère du big data, de nombreuses entreprises d'intelligence artificielle ont commencé à mettre en place des systèmes de formation et de gestion pour les formateurs de données, et continuent de mener des innovations technologiques et d'améliorer la qualité des données. Cependant, à mesure que les coûts de main-d'œuvre augmentent, de plus en plus d'organisations recherchent des moyens plus efficaces et plus rentables pour annoter les données. La plateforme de crowdsourcing NetEase Fuxi Youling est née, basée sur l'idée deHITL (Human-in-the-Loop).
Lors de cette exposition de données, la plateforme de crowdsourcing Fuxi Youling a démontré ses capacités et avantages uniques : combiner intelligence humaine et pouvoir de décision avec La puissance de calcul de l'apprentissage automatique est combinée pour obtenir une annotation de données de haute qualité. Grâce à un processus d'annotation détaillé et rigoureux et à un système de notation scientifique, la plateforme maintient l'exactitude et la fiabilité des données. Dans le même temps, Fuxi Youling a également adopté une série de mesures techniques de pointe, notamment la réduction des coûts, le raccourcissement du cycle d'annotation et la garantie de la qualité des données, pour améliorer l'efficience et l'efficacité.
Boucle fermée des données
Une fois que l'annotateur a terminé l'annotation des données, la plate-forme prend en charge la formation du modèle de redistribution en temps réel. L'émetteur de la tâche peut évaluer la comparaison des effets avant et après la formation du modèle, ressentir l'optimisation et l'amélioration. du modèle par les résultats de l'annotation des données et mettre automatiquement à jour le modèle. Le modèle mis à jour peut faciliter les tâches ultérieures d'annotation de données et améliorer encore la qualité et l'efficacité de l'annotation de données.
Inspection complète des données
La plate-forme prend en charge l'inspection automatique de la qualité de toutes les données de tâches. Les éditeurs de tâches peuvent configurer de manière flexible le processus d'inspection de la qualité. La plate-forme combinera l'historique des utilisateurs pour effectuer des niveaux de tâches et des portraits d'utilisateurs, ainsi qu'une inspection de la qualité des tâches. , et introduisez des modèles en même temps. Participez à l'inspection de la qualité, réalisez en même temps l'IA et la participation humaine au contrôle de la qualité et obtenez finalement une livraison de tâches de haute précision.
Portraits d'utilisateurs
La plate-forme dispose d'un mécanisme complet de portrait d'utilisateur et de correspondance de tâches, basé sur les performances passées des tâches de l'utilisateur et combiné avec les données d'étiquette personnelles de l'utilisateur, elle peut répondre aux divers besoins des différents types de tâches et les attribuer. tâches à Les meilleures personnes peuvent le faire pour répondre aux exigences de qualité, d'efficacité et de coût des tâches d'annotation de données.
Swarm Intelligence
La plateforme localisera des annotateurs diversifiés sur la base de portraits d'utilisateurs, introduira des formulaires d'annotation redondants et leur permettra de participer conjointement aux décisions d'annotation et d'obtenir des annotations finales grâce à des méthodes algorithmiques telles que l'estimation d'intervalle et l'inférence de valeur réelle. . résultats, garantissant l’objectivité et l’exactitude du résultat final.
Selon le responsable de la plateforme : La plateforme actuelle se concentre principalement sur le contenu du travail cognitif, qui provient de la collecte et de l'étiquetage de données multimodales telles que le texte, les images et la voix par des technologies d'intelligence artificielle telles que l'AIGC. ; avec le développement de communications telles que la 5G Avec l'application généralisée de la technologie, la plate-forme entreprendra à l'avenir davantage de tâches décisionnelles telles que le contrôle à distance. Sur la base de la technologie du jumeau numérique, le travail hors ligne sera numérisé et en ligne, permettant aux utilisateurs de. effectuez des tâches dans un environnement de jumeau numérique gamifié et travaillez avec bonheur.
La plateforme NetEase Fuxi Youling utilise la technologie d'IA et l'annotation manuelle pour garantir la qualité et l'exactitude de l'annotation des données et améliorer l'efficacité de l'annotation des données. Il fournit non seulement des services de données fiables et efficaces aux entreprises, mais contribue également au développement vigoureux de la technologie de l'IA.
En même temps que l'exposition, le Dr Wu Runze de NetEase Fuxi Lab a également partagé sur le thème "NetEase Fuxi Data Crowdsourcing Empowering Large Model Application Practice".
Le Dr Wu a déclaré : NetEase Fuxi est profondément impliqué dans la technologie des grands modèles depuis 2019, prenant la pré-formation textuelle et la pré-formation multimodale comme principaux points d'entrée, en s'appuyant sur la plate-forme de crowdsourcing de données pour fournir des données de haute qualité. rétroaction en boucle fermée et surmonter la construction de représentation unifiée. Pour les défis techniques clés tels que le stockage d'objets distribués et les moteurs vectoriels à grande échelle, il a été sélectionné comme « projet pionnier » de la province du Zhejiang et a reçu une reconnaissance officielle pour son financement. Il a incubé avec succès deux. des produits verticaux majeurs dans le domaine du jeu, notamment la plateforme artistique Danqingyue et le Game Intelligent NPC.
Actuellement, la plateforme de crowdsourcing Fuxi Youling a été appliquée dans de multiples produits et scénarios au sein du groupe NetEase : dans le monde ouvert du jeu mobile "Backwater Cold", des personnes aux émotions délicates, aux réponses réactives, aux mouvements réels et riches expressions Les PNJ intelligents sont profondément appréciés des joueurs. Les PNJ intelligents ont besoin d’énormes quantités de données de feedback humain de haute qualité pour les prendre en charge.
NetEase Fuxi Youling Crowdsourcing fournit des services multi-données impliquant la collecte vocale, l'annotation de texte, le jugement émotionnel, l'annotation d'images et d'autres services de données pour le modèle de PNJ intelligent dans le jeu, et prend finalement en charge la création d'intelligence multidimensionnelle telle que texte, voix, expressions faciales, etc. jeu PNJ. Il s'agit de l'intégration profonde que NetEase a accumulée dans les domaines des moteurs de jeu et de l'IA pour résoudre le problème en boucle fermée des données de puissance de calcul à grande échelle et des modèles de pré-formation.
Actuellement, la plateforme de crowdsourcing NetEase Fuxi Youling a traité des centaines de millions de données tout en garantissant les performances de l'IA du jeu, elle peut collecter plus efficacement les commentaires des joueurs et améliorer encore les performances de l'IA, appliquant ainsi la technologie à davantage d'applications. Dans la méta-scène. Sur la base des concepts d'ouverture, de coopération et de gagnant-gagnant, NetEase Fuxi invitera des partenaires en amont et en aval de la chaîne industrielle à créer conjointement une nouvelle ère de numérisation de l'IA+.
Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!