Maison  >  Article  >  développement back-end  >  Bibliothèque Python légère pour le scraping avec les LLM

Bibliothèque Python légère pour le scraping avec les LLM

WBOY
WBOYoriginal
2024-08-13 20:30:10613parcourir

Lightweight python library for scraping with LLMs

Salut à tous,

Je souhaite partager ma bibliothèque Python pour un scrapping paresseux :)

J'utilise les LLM pour extraire rapidement des données structurées de sites Web sans avoir à gérer la structure DOM ni à écrire des web scrapers. Après quelques mois d'expérimentations, je partage mon code sous forme de bibliothèque Python open-source.

Par rapport aux bibliothèques open source similaires, le principal avantage est la simplicité et la concentration sur l'utilisation minimale des jetons, ce qui entraîne une réduction des coûts et un traitement plus rapide.

Consultez la bibliothèque GitHub : https://github.com/raznem/parsera

Heureux d'entendre vos commentaires !

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Déclaration:
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn