Wie erhalten Sie Echtzeit-Anwendungs- und Zuschauerdaten auf der Arbeit von 58.com?

Wie kann ich Crawler verwenden, um Echtzeitdaten auf der 58.com-Rekrutierungsseite zu erhalten?

Wenn Sie die Rekrutierungsinformationen von 58.com durchkriechen, stoßen Sie häufig auf ein Problem: Die Anzahl der auf der Seite angezeigten Bewerber und Zuschauer werden in Echtzeit aktualisiert. Der Quellcode der Webseite wird jedoch als 0 angezeigt. Das Elemente -Feld im Browser -Entwickler -Tool (F12) zeigt jedoch die richtigen Daten an. Dies liegt daran, dass 58.com AJAX -Technologie verwendet, um Daten asynchron zu laden. In diesem Artikel wird Sie über die Erlangung dieser dynamischen Daten geleitet.

Problemanalyse

Wenn die Seite beispielsweise eine medizinische Position in Peking einnimmt, zeigt sie die Anzahl der Bewerber und Zuschauer in Echtzeit an. Die Daten im Quellcode sind jedoch immer 0, und die Elemente -Panel -Daten von F12 stimmen mit der Seite überein. Das direkte Extrahieren von Daten aus dem Quellcode funktioniert nicht.

Lösung

Die Seitendaten werden asynchron über AJAX -Anfragen geladen, und wir müssen die JSON -Daten für diese Anfragen finden und erfassen.

Nach der Analyse verwendet 58.com bestimmte API -Schnittstellen, um diese Daten bereitzustellen. Zum Beispiel:

 <code>https://statisticszp.58.com/position/totalcount/?infoId=27988...</code>

Diese Schnittstelle gibt beispielsweise JSON -Daten zurück:

 {
  "DeliveryCount": 1141,
  "Kommentar": 0,,
  "Infocount": 4,
  "Lebensleitungsredeer": 0,,
  "Referenurl": "",
  "Nexturl": "null"
}

Wobei "deliveryCount" die Anzahl der Bewerber repräsentiert und "infoCount" die Anzahl der Besucher darstellt.

Betriebsschritte

1. Positionierung von AJAX -Anforderungen: Verwenden Sie das Browser Developer Tool (F12), um AJAX -Anforderungen zu finden, die sich auf die dynamischen Seitendaten im Netzwerkbereich beziehen.
2. Senden Sie API -Anfragen: Verwenden Sie Crawler -Tools (z. B. Python requests ), um GET -Anforderungen an die obige API -Schnittstelle zu senden.
3. Analysieren Sie JSON -Daten: Extrahieren Sie die Felder "deliveryCount" und "infoCount" aus den zurückgegebenen JSON -Daten, die die Anzahl der Bewerber und Zuschauer in Echtzeit ist.

In den oben genannten Schritten können Sie die Echtzeit-Anwendungs- und Zuschauerdaten der Rekrutierungsseite 58.com erfolgreich erhalten. Bitte beachten Sie, dass infoId -Parameter gemäß der Seite "Zielrekrutierung" ersetzt werden muss. Um übermäßigen Druck auf den Server zu vermeiden, steuern Sie bitte die Kriechfrequenz.

Das obige ist der detaillierte Inhalt vonWie erhalten Sie Echtzeit-Anwendungs- und Zuschauerdaten auf der Arbeit von 58.com?. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!