Heim  >  Artikel  >  Backend-Entwicklung  >  Leichte Python-Bibliothek zum Scrapen mit LLMs

Leichte Python-Bibliothek zum Scrapen mit LLMs

WBOY
WBOYOriginal
2024-08-13 20:30:10613Durchsuche

Lightweight python library for scraping with LLMs

Hallo zusammen,

Ich möchte meine Python-Bibliothek für Lazy Scrapping freigeben :)

Ich habe LLMs genutzt, um schnell strukturierte Daten aus Websites zu extrahieren, ohne mich mit der DOM-Struktur auseinanderzusetzen und Web-Scraper zu schreiben. Nach ein paar Monaten voller Experimente teile ich meinen Code als Open-Source-Python-Bibliothek.

Im Vergleich zu ähnlichen Open-Source-Bibliotheken liegt der Hauptvorteil in der Einfachheit und dem Fokus auf eine minimale Token-Nutzung, was zu geringeren Kosten und einer schnelleren Verarbeitung führt.

Schauen Sie sich die Bibliothek GitHub an: https://github.com/raznem/parsera

Freut mich über Ihr Feedback!

Das obige ist der detaillierte Inhalt vonLeichte Python-Bibliothek zum Scrapen mit LLMs. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Stellungnahme:
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn