Nouvelles avancées dans Alipay AI : publication d'un grand modèle médical multimodal et lancement d'un plan de co-construction médicale d'IA avec 20 institutions

Le 5 juillet, lors du « Trusted Large Model Forum » de la Conférence mondiale sur l'intelligence artificielle 2024, Alipay a annoncé les dernières avancées dans l'implantation de sa technologie d'IA dans le domaine médical : elle a lancé un grand modèle médical multimodal, et à en même temps, a lancé un nouveau modèle comprenant la fiabilité médicale, une variété de solutions numériques intelligentes telles que la machine tout-en-un de confiance et le cloud de confiance. Lors de l'événement, Alipay a également lancé conjointement un plan de co-construction médicale de l'IA avec 20 institutions, dont la Maison d'édition médicale populaire, le Centre des sciences de la santé de l'Université de Pékin et la Commission provinciale de la santé du Zhejiang, pour explorer conjointement la base technologique de l'intelligence numérique de l'IA et les services d'application innovants. Le modèle médical multimodal d'Alipay est dévoilé. Après plus de six mois de tests et de perfectionnement, le modèle médical Alipay est officiellement dévoilé. Il s'agit également de l'un des premiers modèles médicaux multimodaux en Chine. Gu Jinjie, directeur général du département d'application des grands modèles d'Ant Group, a présenté la recherche et le développement technologique sous-jacents. Le grand modèle Ant Bailing possède déjà des capacités multimodales natives qui peuvent « voir », « écouter », « parler » et « dessiner ». Il peut directement comprendre et entraîner des données multimodales telles que l'audio, la vidéo, les images, le texte et bientôt. Le grand modèle médical d'Alipay l'utilise comme modèle de base et ajoute des dizaines de milliards d'images et de textes en chinois et en anglais, notamment des rapports, des images, des médicaments, etc., des centaines de milliards de corpus de textes médicaux, des dizaines de millions de cartes de connaissances médicales de haute qualité. , examens médicaux chinois et anglais et points de référence. Le test atteint ou dépasse le niveau GPT4, et la capacité professionnelle médicale se classe première dans la liste A et deuxième dans la liste B dans promptCBLUE, la liste d'évaluation médicale chinoise LLM. Dans le même temps, la structure multimodale médicale auto-développée complète permet à la précision des rapports d'identification de modèles, de médicaments, de cheveux et d'autres images d'atteindre plus de 90 %. La technologie associée a publié de nombreux résultats dans les meilleurs domaines techniques de l'industrie. revues et conférences telles que CVPR, KDD, ECCV, etc. Afin de rendre les réponses aux conversations plus fiables, pendant la phase de recherche et de développement, Alipay a également coopéré avec des centaines d'équipes médicales professionnelles et d'experts pour étiqueter les données afin de garantir l'autorité et la crédibilité des informations. En même temps, elle a lancé le premier chinois. Ensemble de données de raisonnement de questions et réponses de spécialité médicale RJUA en collaboration avec l'hôpital Renji de Shanghai -QA. Au cours de la phase de test du modèle, les utilisateurs, les patients et les médecins ont participé à des commentaires par questions et réponses, tout en faisant preuve de professionnalisme et en prenant soin des patients.

Site de publication du modèle médical Alipay
Actuellement, ce modèle médical multimodal fournit non seulement des questions et réponses intelligentes, une structuration et une récupération des dossiers médicaux et un diagnostic auxiliaire, mais peut également identifier et interpréter des médicaments et des centaines de rapports médicaux complexes à réaliser. santé capillaire Tests, etc., ceux-ci peuvent être intégrés dans l'ensemble du processus médical des hôpitaux et autres institutions. Tout en innovant dans les services médicaux, ils peuvent également contribuer à améliorer l'efficacité opérationnelle de l'institution.
Gu Jinjie a déclaré que l'application approfondie de l'IA impose non seulement des exigences plus élevées en matière de données, d'algorithmes et de puissance de calcul, mais pose également davantage de défis en matière de fiabilité, de sécurité et de confidentialité. Dans les scénarios médicaux, il est crucial de garantir les aspects techniques. fiabilité et sécurité de la confidentialité des données. À cette fin, Alipay a lancé une nouvelle solution « machine médicale tout-en-un de confiance + cloud de confiance » pour l'industrie Grâce à une informatique et un stockage denses, les données médicales sont rendues disponibles et invisibles, et le stockage institutionnel est plus sûr.
Selon les rapports, le noyau de la machine tout-en-un Bailing Medical Trusted résout le problème de la puissance de calcul insuffisante auquel sont confrontés les hôpitaux. Il peut être utilisé immédiatement, intègre la formation et la promotion, prend en charge la puissance de calcul nationale, ainsi que les logiciels et le matériel. optimisation et accélération collaboratives. La solution cloud de confiance pour les grands modèles médicaux déploie un raisonnement d'état dense à travers des cloud publics et des cloud privés, en se concentrant sur la résolution des problèmes de sécurité de la confidentialité des données et de protection des secrets commerciaux.
L'Alliance pour les applications d'innovation médicale en IA est là
Depuis l'année dernière, Alipay a accéléré l'ouverture et le déploiement de la technologie de l'IA dans le domaine médical. En novembre de l'année dernière, la Commission de la santé du Zhejiang a appliqué la solution « AI Medical Assistant » ouverte par Alipay et s'est appuyée sur de grands modèles et la technologie humaine numérique pour créer le premier personnel de santé numérique du pays « Anclin » pour fournir aux résidents du Zhejiang une consultation médicale basée sur le cloud. , Les consultations de santé et autres services ont servi plus de 1 000 établissements médicaux depuis leur lancement. Le premier hôpital populaire de Shanghai, utilisant de grands modèles d'IA, a non seulement lancé le premier « assistant numérique » interactif vocal de Shanghai, mais a également été le pionnier d'un dossier médical électronique génératif dans l'industrie, réduisant ainsi la paperasse compliquée des 10 minutes initiales.
L'innovation dans le domaine de la technologie médicale nécessite les efforts conjoints des plateformes, des industries et du monde universitaire. Sur le site de la conférence, Alipay, la maison d'édition médicale du peuple, le centre des sciences de la santé de l'université de Pékin, la commission provinciale de la santé du Zhejiang, la commission municipale de la santé de Xiamen, l'hôpital populaire de la province du Zhejiang, l'hôpital Renji affilié à l'école de médecine de l'université Jiao Tong de Shanghai, l'hôpital populaire de l'université de Pékin, Oncologie de l'Université de Fudan Plus de 20 institutions et entreprises, dont l'hôpital, le Shanghai First People's Hospital et l'hôpital affilié de la Capital Medical University, ont lancé conjointement un plan de co-construction médicale de l'IA pour explorer conjointement l'application de grands modèles et la recherche et le développement innovants. de différents modèles spécialisés.

Le site de lancement du plan de co-construction médicale d'IA d'Alipay

Zhang Junjie, vice-président et directeur général d'Alipay de l'unité commerciale de santé numérique, a déclaré :

"Alipay espère utiliser la technologie la plus de pointe pour fournir les services les plus inclusifs, afin que l'IA puisse être comme « Scanner le code QR pour payer rendra la vie de chacun plus pratique. Alipay continuera à ouvrir la technologie de l'IA et les solutions industrielles, et à travailler avec des partenaires pour promouvoir l'inclusivité et la vulgarisation de l'intelligence artificielle. soins médicaux. »

Il est entendu que

• En 2014, Alipay a soutenu le premier paiement d'inscription à distance dans le pays.

• Après dix ans de développement, la plateforme a servi plus de 600 millions de personnes recherchant un traitement médical, ce qui en fait la plus grande en Chine :

  • Plateforme de services en ligne tiers d'assurance médicale
  • Plateforme unique de services médicaux et de santé

Actuellement

• Plus de 3 600 hôpitaux dans plus de 300 villes à travers le pays fournissent des services médicaux numériques à guichet unique sur Alipay.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!