Heim >Backend-Entwicklung >Python-Tutorial >Empfohlene grundlegende Einführungs-Tutorials für dynamische Websites

Empfohlene grundlegende Einführungs-Tutorials für dynamische Websites

伊谢尔伦
伊谢尔伦Original
2017-06-15 13:06:211823Durchsuche

Regular Matching wird normalerweise beim Crawlen des Webinhalts einer einzelnen Website verwendet. Die Strukturen verschiedener Websites sind jedoch so seltsam, dass es schwierig ist, sie mit einem einheitlichen regulären Ausdruck abzugleichen. Der Autor von „General Web Page Text Extraction Algorithm Based on Line Block Distribution Function“ fasste die allgemeinen Methoden zum Extrahieren von Artikeltext aus Webseiten zusammen, schlug einen Textextraktionsalgorithmus basierend auf der Zeilenblockverteilung vor und stellte Implementierungen in PHP, Java usw. bereit. Die Hauptprinzipien dieses Algorithmus basieren auf zwei Punkten: 1. Textbereichsdichte: Nach dem Entfernen aller Tags in HTML ist die Zeichendichte im Textbereich höher und es gibt weniger Leerzeilen mit mehreren Zeilen Inhalte in Nichttextbereichen sind durchschnittlich kürzer in einzelnen Beschriftungen (Zeilenblöcken). Die Algorithmusschritte sind wie folgt: 1. Entfernen Sie alle Tags, einschließlich Stile, Js-Skriptinhalt usw., behalten Sie jedoch die ursprünglichen Zeilenumbrüche bei. n2 Teilen Sie den Webseiteninhalt nach Zeilen auf und definieren Sie den Zeilenblock $block_i$ als ersten $[i, i + blockSize] $ Die Summe des Zeilentextes und gibt die Verteilungsfunktion der Zeilenblocklänge basierend auf der Zeilennummer an: 3. Der Text erscheint im längsten Zeilenblock und schneidet den Bereich von beiden Seiten bis zum ab Zeilenblocklänge von 0: 4. Wenn Sie die im Textbereich angezeigten Bilder extrahieren müssen, müssen Sie im ersten Schritt des Entfernens des Tags 1 nur

beibehalten. [Python-Tutorial] Algorithmus zum Extrahieren von Webseitentext und Inhaltsbildern

Empfohlene grundlegende Einführungs-Tutorials für dynamische Websites

Einführung: Regelmäßiger Abgleich ist Wird normalerweise beim Crawlen des Webinhalts einer einzelnen Website verwendet. Die Strukturen verschiedener Websites sind jedoch so seltsam, dass es schwierig ist, eine Übereinstimmung herzustellen. Der Autor von „General Web Page Text Extraction Algorithm Based on Line Block Distribution Function“ fasste die allgemeinen Methoden zum Extrahieren von Artikeltext aus Webseiten zusammen, schlug einen Textextraktionsalgorithmus basierend auf der Zeilenblockverteilung vor und stellte Implementierungen in PHP, Java usw. bereit. Das Hauptprinzip dieses Algorithmus basiert auf zwei Punkten:

2 🎜>Einführung: Ein Beispiel für das Extrahieren des Textinhalts einer Webseite mit PHP. Beispiel für das Extrahieren des Textinhalts einer Webseite durch PHP. Die Schwierigkeit liegt darin, den Artikelteil der Webseite zu identifizieren und zu speichern und andere nutzlose Informationen zu löschen. Er muss universell sein und darf nicht wie ein Zug sein > 3. Wo werden die Textinformationen von Webseiten im Allgemeinen gespeichert?_html/css_WEB-ITnose

Einführung: Wo sind die Textinformationen von Webseiten? Seiten im Allgemeinen gespeichert?

4. Beispiel für PHP, das den Hauptinhalt einer Webseite extrahiert

Einführung: Beispiel von PHP, das den Hauptinhalt einer Webseite extrahiert. Beispiel für das Extrahieren des Textinhalts einer Webseite durch PHP. Die Schwierigkeit liegt darin, den Artikelteil der Webseite zu identifizieren und zu speichern und andere nutzlose Informationen zu löschen. Er muss universell sein und darf nicht wie ein Zug sein >

5. Eingehende Analyse des Quellcodes der Verwendung von Python zum Erfassen des Textes von Webseiten

Einführung: Normalerweise, wenn Sie Wenn Sie eine Webseite öffnen, gibt es neben dem Textinhalt des Artikels normalerweise viele Navigations-, Werbe- und andere Informationen. Der Zweck dieses Artikels besteht darin, zu erklären, wie man den Textinhalt eines Artikels aus einer Webseite extrahiert und andere irrelevante Informationen entfernt.

6. Javascript-Sammlung von Methoden zum Ändern der Schriftgröße [Original]_Javascript-Kenntnisse

Einführung: Sorgen Sie für die Haupttext der Webseite, Umschaltfunktion zwischen kleiner, mittlerer und großer Schriftart. Verwenden Sie JS-Code, um das Attribut „fontSize“ des div-Stils festzulegen.

7. js erhält die Höhe und Breite des Doms (sichtbarer Bereich und Teil usw.)_Javascript-Fähigkeiten

Einführung: Die Breite oder Höhe des sichtbaren Bereichs der Webseite, die Breite oder Höhe des gesamten Textes der Webseite und der linke oder rechte Teil des Haupttextes der Webseite Details. Ich hoffe, dass es für alle hilfreich sein wird Quellbibliothek

Javascript – Was ist das Implementierungsprinzip des Chrome-Plug-In-Clippings von Evernote

Das obige ist der detaillierte Inhalt vonEmpfohlene grundlegende Einführungs-Tutorials für dynamische Websites. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Stellungnahme:
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn