ホームページ >バックエンド開発 >PHPチュートリアル >クローラーによる AJax データの取得に関する問題

クローラーによる AJax データの取得に関する問題

WBOY
WBOYオリジナル
2016-07-06 13:52:211763ブラウズ

花びらネットワークから写真をクロールするクローラーを書きたいです。 Ajaxのデータ取得で問題が発生しました
クローラーによる AJax データの取得に関する問題
画像内のリクエストされたURL、レスポンスのテキストタイプはjsonです
しかし、このURLのみにアクセスするとhtmlになります
クローラーによる AJax データの取得に関する問題

jsonデータの取得方法を教えてください

返信内容:

花びらネットワークから写真をクロールするクローラーを書きたいです。 Ajaxのデータ取得で問題が発生しました
クローラーによる AJax データの取得に関する問題
画像内のリクエストされたURL、レスポンスのテキストタイプはjsonです
しかし、このURLのみにアクセスするとhtmlになります
クローラーによる AJax データの取得に関する問題

jsonデータの取得方法を教えてください

これはヘッダーを使用して制御されます
クローラーによる AJax データの取得に関する問題

対応するリクエストヘッダーを追加するだけです。私のコードを添付します

リーリー

Referer は、このサイト外で Web ページが取得されるのを防ぐために使用される一般的なヘッダーです。クローラーを実行する場合は、必ず Referer が設定されていることを確認してください。

声明:
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。