sphider は、ログインしたい Web サイトのコンテンツをクロールできますか?解決方法
- WBOYオリジナル
- 2016-06-13 13:52:451001ブラウズ
sphider は、ログインしたい Web サイトのコンテンツをクロールできますか?
sphider は、ログインしたい Web サイトのコンテンツをクロールできますか?
-----解決策--------------------------------
やる気さえあれば基本的には大丈夫です。
------解決策----------------------
どのスパイダーを使用していますか?通常、スパイダーはデータベースを検索しません。
データベースを検索する予定がある場合は、検索サーバーのアップグレードを検討する必要があります。そうしないと死んでしまいます。
------解決策------------------
ログインをシミュレートし、Cookie を取得して、 request ログイン後にCookieを送信します
声明：
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。