Maison  >  Article  >  Périphériques technologiques  >  La vraie création 3D est là, vous devez utiliser vos mains pour faire des gestes ! L'IA ne peut pas prendre mon travail cette fois, n'est-ce pas ?

La vraie création 3D est là, vous devez utiliser vos mains pour faire des gestes ! L'IA ne peut pas prendre mon travail cette fois, n'est-ce pas ?

PHPz
PHPzavant
2023-03-31 22:38:49796parcourir

Sur la route de l'avancement de la RA. De nouveaux rôles industriels et de nouvelles forces techniques continueront à se joindre à nous, poussant conjointement la RA vers notre imagination ultime : la réalité augmentée pour les masses au vrai sens du terme.

​Cet article est réimprimé avec l'autorisation d'AI New Media Qubit (ID de compte public : QbitAI). Veuillez contacter la source pour la réimpression.

AR existe depuis longtemps.

Au cours de la dernière période, les fabricants de réalité augmentée se sont précipités pour lancer des lunettes de réalité augmentée grand public, avec de nouvelles astuces en termes de poids, d'autonomie de la batterie et de fonctions. Cependant, elles ne peuvent échapper aux critiques :

Quoi d'autre. peux-tu faire autre chose que regarder des films ?

La réalité augmentée grand public actuelle est-elle vraiment une réalité augmentée ?

Pour les utilisateurs, si le rôle des lunettes AR est simplement de réduire un projecteur à la taille d'un objectif et de le placer devant leurs yeux, il sera difficile de répondre aux nouveaux besoins émergents des consommateurs à long terme.

Avez-vous emprunté l'écosystème de contenu depuis votre téléphone mobile ?

Cela ne semble pas souhaitable. Après tout, la plus grande imagination de la RA est de savoir comment devenir un nouveau terminal indépendant. De plus, le contenu des téléphones mobiles est limité à la 2D, ce qui est fondamentalement différent de la 3D mentionnée à plusieurs reprises dans la définition de base de la réalité augmentée.

Alors que devons-nous faire ?

L'acteur leader du secteur qui a vendu à découvert son propre stock de 60 000 unitésde lunettes AR a récemment fait face au reflux du Metaverse et a remis sa propre feuille de réponses :

Grâce à une application AR, ils permettent aux gens ordinaires de construire leurs propres affaires en 10 minutes Votre propre espace numérique AR.

Et c’est toujours le genre de création qui doit être réalisée avec les mains dans l’espace physique. L’IA n’a-t-elle rien à dire cette fois-ci ?

Bien sûr, c'est une blague, le véritable objectif derrière cela est de permettre à davantage de développeurs et de créateurs d'utiliser leur imagination dans l'espace AR, d'élargir l'écosystème de contenu AR et de promouvoir davantage l'AR auprès du grand public.

Alors, quelle est exactement cette application ? Peut-il atteindre seul un objectif aussi ambitieux ? Quels courants sous-jacents à l’industrie de la réalité augmentée sont révélés dans les coulisses ?

Qu'est-ce que le domaine spirituel ?

Le fondateur et PDG de Rokid, Zhu Mingming, a déclaré que Lingjing est un produit historique dans l'industrie de la RA, permettant à chacun de participer à la création de contenu numérique AR.

Définition officielle,

Lingjing est un outil de création d'espace AR Ce qu'il peut faire, c'est créer du contenu AR dans l'espace 3D, et le seuil est très bas, et il peut être utilisé par tout le monde.

Les étapes de fonctionnement spécifiques sont divisées en 5 étapes :

    Scanner l'espace avec un téléphone mobile
  • Reconstruction de l'espace cloud
  • Mise en page de la scène en ligne
  • Publication en un clic pour plusieurs terminaux
  • Expérience du terminal AR
C'est-à-dire par exemple, grâce à l'appareil photo ordinaire d'un téléphone portable, les informations spatiales du domaine spirituel peuvent être obtenues puis reconstruites dans le cloud. Ensuite, vous pourrez compléter la création selon vos propres idées.

La vraie création 3D est là, vous devez utiliser vos mains pour faire des gestes ! LIA ne peut pas prendre mon travail cette fois, nest-ce pas ?

Le contenu AR créé peut être publié directement sur la plateforme, et plusieurs personnes peuvent publier leurs créations dans un seul espace. Enfin, il vous suffit de porter des lunettes AR pour en faire l'expérience.

Après tout le processus, un espace d'environ 10 mètres carrés peut être complété en seulement

10 minutes.

La vraie création 3D est là, vous devez utiliser vos mains pour faire des gestes ! LIA ne peut pas prendre mon travail cette fois, nest-ce pas ?

Selon les rapports, le rendu du contenu de Lingjing est également basé sur le propre moteur de rendu 3D de Rokid, ce qui peut réduire considérablement le temps et les coûts de main-d'œuvre liés à l'ensemble de la création et de la mise en œuvre du contenu.

Vous devez savoir que le processus actuel de mise en œuvre de la création de contenu AR est fondamentalement encore un processus à longue chaîne.

Cela nécessite certaines ressources de produit, ressources de développement et ressources de création de contenu, puis une équipe de professionnels emballe les ressources pour les tests sur site et l'acceptation finale. Les outils de création couramment utilisés tels que Unity et UnrealEngine présentent également des obstacles à l'utilisation, exigeant que les utilisateurs disposent de certaines capacités de développement de base.

Et le domaine spirituel met également l'accent sur une caractéristique majeure : la

Coopération.

Non seulement il permet d'obtenir une cohérence multi-terminal, c'est-à-dire que l'espace de contenu créatif peut être vu sur les téléphones mobiles, les PC et les lunettes AR ; il permet également à plusieurs personnes de participer à la création AR dans le même espace.


Ce positionnement est évidemment plus populaire. Les utilisateurs de l'industrie et les consommateurs ordinaires peuvent s'y lancer et en faire l'expérience. Dans le même temps, de nouvelles exigences seront également mises en avant, telles que des exigences de concurrence élevées, la puissance de calcul des terminaux, effets de création de contenu, etc.

Ensuite, la question se pose :

Comment atteint-on le domaine spirituel ?

Derrière cela se cache en fait une mise à niveau complète d'un

ensemble complet de piles technologiques, comprenant le matériel, les systèmes, les services cloud, les algorithmes, etc.

Regardons d'abord le matériel. Cette fois, en conjonction avec la sortie de Lingjing, Rokid a mis à niveau les lunettes AR de la traditionnelle « solution double fisheye + RVB à trois caméras » à «

SLAM léger RVB à une seule caméra ».

Les avantages de la solution monoculaire sont très directs : structure simple, complexité de conception matérielle réduite, petite surface de carte mère, rapport coût/puissance considérablement réduit, et l'utilisateur peut directement ressentir l'amélioration du confort de port et de la durée de vie de la batterie.

En termes d'applications d'atterrissage, il est rapporté que le matériel équipé de Lingjing possède également une seule caméra.

Parce que le nombre de caméras est réduit jusqu'au dernier, la solution monoculaire peut apporter une consommation d'énergie inférieure, une structure plus simple, un coût inférieur et de nombreux autres avantages, un port confortable et un prix plus abordable, en ligne avec le royaume des esprits. . La nécessité de « rendre la RA plus inclusive ».

Mais la solution monoculaire présente des inconvénients. Par exemple, elle ne peut pas obtenir des informations d'échelle absolues, elle doit donc restaurer les informations d'échelle via l'initialisation, et la qualité de l'initialisation affecte directement la précision finale de l'algorithme. La précision absolue de l’échelle du calcul monoculaire n’est pas suffisamment élevée, et il existe également une incertitude quant à la convergence des échelles. Cela pose de grands défis au développement d’algorithmes SLAM monoculaires et affectera directement l’expérience AR.

Cependant, Rokid a déclaré que des solutions correspondantes sont déjà apparues dans l'industrie.

En termes d'algorithme, avec l'aide de l'IMU, il existe de nombreuses solutions pour l'initialisation statique et l'initialisation dynamique à usage unique. Une fois l'initialisation terminée, une échelle absolue plus précise est essentiellement obtenue. En combinaison avec des algorithmes basés sur le filtrage, par exemple, divers paramètres SLAM peuvent être optimisés en continu lors du processus d'utilisation ultérieur pour améliorer encore la précision de positionnement de l'algorithme. Dans le même temps, il existe également de nombreuses explorations techniques dans les algorithmes SLAM basées sur l'apprentissage en profondeur. technologie.

De là, nous pouvons également sentir que la philosophie de Rokid est la suivante : les produits AR ne sont pas seulement des capteurs empilés, mais des logiciels, du matériel, des algorithmes et des scénarios dans leur ensemble pour offrir aux utilisateurs une expérience AR complète plus confortable.

Les améliorations logicielles se reflètent principalement dans le nuage de points 3D et SLAM.

Et exploite la collaboration appareil-cloud pour équilibrer les exigences de puissance de calcul, de consommation d’énergie et de simultanéité élevée.

Rokid Application Platform Center Department Head Watson a présenté :

La technologie de positionnement visuel basée sur un nuage de points 3D et la technologie SLAM côté appareil (localisation et cartographie simultanées, positionnement simultané et construction de cartes) peut être comparée aux routes en conduite autonome Élevé -Cartes de précision et connaissance spatiale des véhicules.

Dans les scénarios AR, certains développeurs utilisent également des nuages ​​de points pour un positionnement global approximatif et SLAM pour un positionnement local précis, et les deux sont faiblement couplés.

Rokid a vaguement couplé cela et a réalisé une intégration plus profonde. Il réalise uniquement le positionnement et le suivi sur le terminal, ainsi que la cartographie spatiale sur le cloud.

Cette méthode informatique collaborative appareil-cloud peut améliorer la précision du positionnement dans certains scénarios, tels que des scènes avec des textures faibles et des environnements changeants, et peut également réduire la puissance de calcul du terminal mobile. En principe, il profite principalement des avantages du RTC (communication en temps réel) en matière de faible confrontation réseau/transmission à faible latence et de compression d'image vidéo.

La mise en œuvre du couplage étroit repose sur le système d'exploitation sous-jacent récemment mis à niveau de Rokid YodaOS-Master.

Les changements spécifiques se reflètent dans les trois niveaux du système XR, du service cloud XR et du matériel XR.

La vraie création 3D est là, vous devez utiliser vos mains pour faire des gestes ! LIA ne peut pas prendre mon travail cette fois, nest-ce pas ?

Après la mise à niveau complète du système, Rokid peut créer un écosystème de système d'exploitation en boucle fermée plus complet pour mieux connecter les développeurs et les consommateurs.

Après avoir examiné en profondeur la pile technologique de Lingjing, il n'est pas difficile de constater que Rokid est bien préparé pour cette version.

L'objectif principal est très clair : abaisser le seuil de création de contenu AR et renforcer l'équipe de création de contenu AR.

Vous n'avez besoin que d'un téléphone portable pour en faire l'expérience, et le temps est réduit à 10 minutes. C'est en effet une condition que presque tout le monde peut remplir, et vous aurez également l'occasion de ressentir ce qu'on appelle la « vraie AR ». est. Pensez-y, cela peut en effet attirer une vague de curieux.

Cela rend aussi les gens curieux, pourquoi le domaine spirituel est-il officiellement lancé en ce moment ? Et pourquoi se concentrer sur l’abaissement du seuil ?

La réponse dépend toujours des dimensions de la demande du marché, du développement de l'industrie de la RA et de la vérification de l'expérience des acteurs de l'industrie.

Pourquoi veux-tu faire du domaine spirituel ?

Le facteur d'influence le plus direct vient de la demande du marché.

Chen Xi, vice-présidente de Rokid et responsable de l'unité commerciale de la culture numérique, a déclaré qu'actuellement dans le domaine des musées culturels et du tourisme culturel, la demande de contenu AR est très importante. Elle a donné une donnée étonnante pour illustrer :

. Dans les musées culturels pendant la Fête du Printemps cette année, le nombre de personnes ayant expérimenté Rokid AR a atteint 40 000.

Dans tout le pays, comme le musée provincial du Guangdong, le musée de Xi'an, le musée naturel du Shaanxi, le musée de Suzhou, le parc du patrimoine de la ville antique de Liangzhu, etc., ont successivement lancé des visites AR.

La raison pour laquelle la RA entrera rapidement dans le domaine culturel et muséal est également facile à comprendre. Elle peut grandement enrichir le contenu de l'espace 3D et présenter les connaissances culturelles aux visiteurs d'une manière plus intuitive, riche et diversifiée.

Le nombre de musées enregistrés à travers le pays dépasse les 6 000. Alors que de plus en plus de musées présentent des demandes, le modèle de production de contenu à longue chaîne du passé rendait difficile une réponse rapide. De plus, ce modèle de mise en œuvre par plan a également des exigences élevées en termes de coûts humains et matériels.

Par conséquent, il existe un besoin urgent sur le marché d'un outil de productivité efficace et facile à utiliser, capable d'accélérer la création de contenu AR et de réduire les coûts.

D’un autre côté, c’est une situation similaire dans l’industrie.

Vice-président de Rokid et chef du centre de technologie des produitsJiang Tao a déclaré que cela ressemble un peu à la scène des musées culturels, en première ligne de la production industrielle, nous espérons également afficher autant d'informations que possible dans l'espace 3D.

De cette façon, lorsque le personnel de première ligne opère, il n'a plus besoin de se rendre à certains instruments pour visualiser les données et vérifier la situation, mais peut voir les informations requises directement sur le chantier.

Selon les mots de Jiang Tao, en partant du grand concept du métaverse industriel, achever la transformation numérique signifie compléter l'infrastructure du métaverse industriel, puis intégrer et analyser les données, puis les renvoyer au site, ce qui complète véritablement l'ensemble boucle fermée.

Étant donné que les scénarios industriels mettent naturellement en avant des exigences plus élevées en matière de réduction des coûts et d’amélioration de l’efficacité, la demande et le marché de la RA dans les scénarios industriels peuvent être plus importants.

Dans de nombreuses usines, de nombreuses véritables lignes de production de RA ont été mises en place :

La vraie création 3D est là, vous devez utiliser vos mains pour faire des gestes ! LIA ne peut pas prendre mon travail cette fois, nest-ce pas ?

De plus, dans le domaine de l'éducation, l'utilisation de l'enseignement assisté par AR est progressivement devenue populaire.

Par exemple, l'éducation à la sécurité basée sur la RA n'est plus seulement un endoctrinement sous forme écrite et vidéo. Les enfants peuvent apprendre à s'échapper dans des scènes d'incendie simulées, leurs points de mémoire seront plus profonds et l'effet éducatif sera naturellement meilleur.

Dans ce scénario, les enseignants doivent souvent mettre à jour en permanence le contenu AR en fonction des exigences du cours. Un outil de production de contenu à bas seuil pouvant être utilisé sur les téléphones mobiles répond aux besoins réels.

Ce qui précède est la demande directe apportée par le marché.

Des facteurs d’influence plus profonds sont les exigences de l’évolution actuelle de la RA.

Le manque d'écologie du contenu natif de RA a toujours été déploré, ce qui est devenu l'une des principales raisons pour lesquelles de nombreuses personnes ne souhaitent pas faire l'expérience des appareils de RA.

Emprunter de l'écologie depuis son téléphone portable ? Bien que la richesse du contenu ait augmenté à court terme, le contenu affiché est plus limité au niveau 2D. Le véritable contenu AR n'a-t-il pas été affiché ? Cela fera-t-il penser que la fin des lunettes AR est celle des accessoires pour téléphones portables ?

Ainsi, pour l’industrie de la RA, presque tout le monde se rend compte que l’enrichissement de l’écosystème de contenu est la priorité absolue du développement actuel. Par exemple, lorsque Apple explorait la réalité augmentée à ses débuts, elle a également été la première à lancer la plate-forme de développement AR Kit, continuant à utiliser le style APP Store dans le domaine de la réalité augmentée.

Après tout, ce n'est que lorsque le contenu est riche que les utilisateurs seront attirés et que la RA aura la possibilité d'avancer. La question actuelle est donc de savoir comment enrichir le contenu natif AR.

L'efficacité des fabricants de RA à elle seule n'est évidemment pas assez élevée, et les scénarios d'interaction AR explorés au cours des dernières années sont encore très limités.

Appeler davantage de développeurs et de créateurs à rejoindre devient progressivement un consensus dans l'industrie, et les barrières d'utilisation et les coûts doivent être abaissés.

Il n'est pas difficile de comprendre qu'en tant qu'acteur senior de l'industrie, Rokid a choisi de lancer un moteur spatial AR comme Lingjing.

Mais pourquoi maintenant ?

La réponse de Rokid est la suivante : son expérience accumulée dans le domaine culturel et muséal a vérifié la réelle demande du marché en matière de RA.

Chen Xi a rappelé que lorsqu'il a coopéré pour la première fois avec le parc du patrimoine de la ville antique de Liangzhu, diverses scènes étaient encore vivantes dans son esprit.

Elle se souvient que lorsque Rokid et le parc ont proposé que la RA puisse être utilisée pour restaurer des reliques culturelles, le parc a immédiatement exprimé son intérêt. L'ensemble du projet a duré environ 3 mois, de la proposition initiale à la mise en œuvre, et a finalement rencontré le public lors de la fête nationale en 2020.

La vraie création 3D est là, vous devez utiliser vos mains pour faire des gestes ! LIA ne peut pas prendre mon travail cette fois, nest-ce pas ?

Au début, Rokid proposait 200 paires de lunettes AR à louer par jour. En conséquence, tout le matériel était loué en une heure environ. Et la plupart des personnes curieuses de la RA sont des personnes âgées et des enfants, ce qui dépasse les attentes de Rokid.

Et avec l'application de scénarios réels, nous pouvons en fait accumuler une expérience de développement très précieuse en première ligne. Par exemple, on suppose que les gens visiteront dans l'ordre de la visite, mais en réalité ce n'est pas le cas. Rokid doit s'assurer qu'une visite dans le désordre n'affectera pas l'affichage de l'effet AR. En réponse aux mauvaises conditions d'éclairage intérieur du musée, l'équipe technique a également procédé à des optimisations particulières... Au final, ces optimisations et itérations se sont reflétées dans la conception du domaine spirituel.

Chen Xi a également déclaré avec émotion qu'il est indéniable que tout le monde n'est pas prêt à dépenser des milliers de yuans pour acheter un appareil spécial permettant de faire l'expérience de la RA, mais s'il ne coûte que 50 yuans à louer, de nombreuses personnes sont prêtes à l'essayer .

Ensuite, à l'avenir, lorsqu'il y aura suffisamment de scénarios d'application, la valeur se reflétera lentement. À ce moment-là, ce sera peut-être le moment où la RA passera véritablement du côté du consommateur.

À partir de là, il n'est pas difficile de comprendre pourquoi le domaine spirituel est lancé en ce moment.

Parce qu'il peut utiliser un petit levier pour tirer parti d'un vaste groupe de développeurs et de créateurs, et mobiliser des centaines ou des milliers de personnes pour explorer conjointement un large éventail de contenus et de scénarios d'application de RA.

Et de cette façon, la RA peut atteindre le public plus rapidement et devenir un véritable terminal informatique mobile de nouvelle génération.

Qu'apportera le domaine spirituel ?

En tant qu'outil de productivité de contenu AR natif, l'émergence de Lingjing envoie un signal tant à l'intérieur qu'à l'extérieur de l'industrie :

Il est temps de développer l'écosystème de contenu AR.

Et il ne s'agit plus d'emprunter l'écologie aux téléphones portables ou autres terminaux, mais de partir de la RA elle-même pour montrer "ce qu'est la vraie AR".

D'une part, référez-vous à la domination absolue actuelle des terminaux informatiques mobiles smartphones, qui ont rapidement attiré un grand nombre d'utilisateurs précisément après l'émergence d'applications de contenu populaires.

D'un autre côté, il existe une différence fondamentale entre le contenu natif AR et le contenu des terminaux tels que les téléphones mobiles Il doit être en 3D.

Si nous continuons à emprunter l'écologie aux téléphones mobiles, la compréhension par le public de la RA pourrait n'être que le grand écran virtuel des téléphones mobiles. Cela limitera l'imagination du développement de l'ensemble de la technologie et de l'industrie, et affectera également le développement indépendant. de l'AR.

Ainsi, développer du contenu natif AR est ce qu’il faut faire maintenant.

Bien qu’actuellement limité par la puissance de calcul, le matériel et d’autres conditions, le contenu AR ne peut pas encore répondre aux attentes ultimes de chacun. Mais tout comme au début de Windows, n'avait-il pas uniquement des applications simples comme Minesweeper et Spider Solitaire ?

Nous devons donner suffisamment de patience à la technologie et attendre que des changements se produisent.

De plus, l’idée d’intégrer des appareils et des nuages ​​​​apporte une nouvelle solution au problème actuel de puissance de calcul.

Si vous regardez les choses d'un point de vue extérieur à l'industrie de la RA, l'émergence des royaumes spirituels offre également une nouvelle opportunité aux développeurs et aux créateurs. Après tout, l'essor de chaque génération de terminaux informatiques mobiles s'accompagnera de l'émergence d'un grand nombre d'applications et de logiciels de contenu de qualité.

En bref, sur la voie de l'avancement de la RA. De nouveaux rôles industriels et de nouvelles forces techniques continueront à se joindre à nous, poussant conjointement la RA vers notre imagination ultime : la réalité augmentée pour les masses au vrai sens du terme.

Qu'en pensez-vous ?

La vraie création 3D est là, vous devez utiliser vos mains pour faire des gestes ! L'IA ne peut pas prendre mon travail cette fois, n'est-ce pas ?

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Déclaration:
Cet article est reproduit dans:. en cas de violation, veuillez contacter admin@php.cn Supprimer