LLMS.TXT a expliqué

llms.txt: la nouvelle norme pour la documentation adaptée à l'IA

Récemment, de nombreux outils de développeur ont intégré la prise en charge de la norme Web émergente LLMS.TXT. Cette norme gagne rapidement du terrain, mais qu'est-ce que c'est exactement, et pourquoi est-il significatif?

tandis que robots.txt et sitemap.xml s'adressent aux moteurs de recherche, LLMs.txt est conçu pour les modèles de grand langage (LLM). Il fournit des informations sur le site Web dans un format facilement digestible par LLMS.

La montée fulgurante de LLMS.TXT:

Rôle pivot de Mintlify: le 14 novembre, la prise en charge de LLMS.TXT Incorporated LLMS.TXT dans sa plate-forme de documentation. Cette action unique a fait des milliers de documents d'outils de développeur qui entrent des plates-formes conviviales, bénéficiant à des plates-formes comme Anthropic et Cursor. Les annonces ultérieures sur X (anciennement Twitter) par Anthropic et autres, ainsi que l'adoption croissante par la documentation hébergée de mentlification, ont considérablement augmenté la visibilité de la norme. Ce moment a stimulé la création de ressources communautaires telles que directory.llmstxt.cloud (par @ifox) et llmstxt.directory (par @screenfluent), qui indexent la documentation technique adaptée à LLM. Contribuant davantage à l'écosystème, MOT (Créateur de DotenVX) a développé un générateur open source pour la documentation de Dotenvx, et Eric Ciarla de Firecrawl a construit un outil qui génère automatiquement le fichier en grattant les sites Web.

L'origine de llms.txt: Jeremy Howard, co-fondateur de Response.ai, a conçu llms.txt pour répondre aux limites des fenêtres de contexte des systèmes d'IA. Ces systèmes ont du mal à comprendre de grands sites de documentation en raison de leur capacité de traitement limitée. Les méthodes de référencement traditionnelles, optimisées pour les robots de recherche, sont inefficaces dans ce contexte. Traitement directement les pages HTML Overwhelms LLMS avec des éléments de navigation, JavaScript, CSS et autres informations inutiles, réduisant l'espace pour le contenu réel. LLMS.TXT propose une solution en fournissant à LLMS précisément les informations dont ils ont besoin dans un format facilement compréhensible.

Comprendre les fichiers llms.txt: llms.txt utilise une structure de marque spécifique, définissant deux fichiers:

1. /llms.txt: Un aperçu concis de la navigation de la documentation, permettant aux LLMS de saisir rapidement la structure du site.
2. /llms-full.txt: un fichier complet contenant l'intégralité du contenu de la documentation au format Markdown.

/llms.txt Exemple:

<code># Project Name
> Brief project summary

Additional context and important notes

## Core Documentation
- [Quick Start](url): Description of the resource
- [API Reference](url): API documentation details

## Optional
- [Additional Resources](url): Supplementary information</code>

/llms-full.txt Exemple (extrait du fichier du curseur):

<code># AI Review (Beta)

AI Review is a feature that allows you to review your recent changes in your codebase to catch any potential bugs.

<img src="/static/imghwm/default1.png" data-src="https://img.php.cn/upload/article/000/000/000/174047756651576.png" class="lazy" alt="AI Review">

... (rest of the documentation) ...</code>

llms.txt par rapport aux normes existantes: contrairement à sitemap.xml (qui répertorie les pages indexables mais n'aide pas le traitement du contenu) et robots.txt (qui contrôle l'accès du robot mais n'améliore pas la compréhension du contenu), LLMs.txt directement relève des défis spécifiques à l'IA. Il surmonte les limitations des fenêtres de contexte, élimine le balisage inutile et présente le contenu dans une structure optimisée AI.

Utilisation de LLMS.TXT avec les systèmes AI: Contrairement aux moteurs de recherche, les LLM actuels ne découvrent pas automatiquement les fichiers LLMs.txt. Vous devez fournir manuellement le contenu de fichier à votre LLM, soit en collant l'URL, en copie le contenu dans l'invite, soit en utilisant une fonction de téléchargement de fichiers. Des exemples sont fournis pour Chatgpt, Claude et Cursor.

Génération de fichiers llms.txt: plusieurs outils aident à créer des fichiers LLMs.txt, y compris la mintlify (génération automatique pour la documentation hébergée), LLMSTXT par DOTENV (Utilisation de SiteMap.xml) et LLMSTXT par Firecrawl (Siede Stracing).

L'avenir de llms.txt: llms.txt signifie un changement vers la documentation centrée sur l'IA. Tout comme le référencement est devenu vital pour la visibilité des moteurs de recherche, le contenu lisible par l'IA sera crucial pour les outils et la documentation des développeurs. À mesure que l'adoption se développe, nous pouvons nous attendre à ce que de nouveaux outils et de meilleures pratiques émergent, garantissant l'accessibilité du contenu pour les humains et les assistants de l'IA. Actuellement, LLMs.txt fournit une solution pratique pour améliorer la compréhension de l'IA du contenu Web, en particulier la documentation technique et les API.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!