PHP 収集中に IP がブロックされる場合の解決策_PHP チュートリアル

インターネットでいくつかの情報を検索しましたが、見つけることができませんでした。検索中に、検索エンジン クローラー スパイダーを使用する USERAGENT について言及した人がいました。少ししか触れませんでしたが、私なりに考えて解決策を列挙しました

1. Snoopy またはcurlを使用して、検索エンジン クローラーの USERAGENT 値を渡します。
検索エンジン クローラーの USERAGENT 値を表示します: http://www.jb51.net/yunying/29357.html

2. Snoopy またはcurl を使用してリファラー値を渡します。
例: $snoopy->referer = 'http://www.google.com';
$header[] = "Referer: http://www.google.com/"; 3. スヌーピーを使用します。またはカールプロキシ。
例: $snoopy->proxy_host = "59.108.44.41";
$snoopy->proxy_port = "3128";

4. IP の作成を防ぐには、Snoopy またはcurl を使用します。
例: $snoopy->rawheaders['X_FORWARDED_FOR'] = '127.0.0.1';

5. PHP とプログラムを使用して、新しい IP アドレスを取得します。

6. 再起動後もルートがブロックされている場合は、相手があなたの MAC アドレスをブロックしている可能性があります。プログラムを作成するか、手動で MAC アドレスを変更することができます。インターネット上のネットワーク カードのアドレス ツールを変更するための特別な方法もあります。

http://www.bkjia.com/PHPjc/322449.html

www.bkjia.comtru​​ehttp://www.bkjia.com/PHPjc/322449.html技術記事インターネットで情報を探しましたが、見つけることができませんでした。検索しているときに、検索エンジンのクローラー スパイダーを使用する USERAGENT について言及した人がいました。少ししか触れませんでしたが…