python - Jianshuをクロールして一定期間内に投稿する方法を教えてください。

Question

2013 年 4 月 13 日から 2013 年 5 月 13 日など、特定の期間の Jianshu の投稿をクロールしたいです

私が試してみたいアイデアは次のとおりです:

• 百度

  • Baidu のサイト構文の使用
    

  • 期間限定
    

  • 約 70 件の投稿を観察しました
    

• ＃＃＃グーグル＃＃＃
  Google のサイト構文

  • 
    

  期間限定

  • 
    

  約 120 件の投稿を観察しました

  • 
    

実装

: Python を使用して検索結果を直接リクエストし、取得した URL をリダイレクトして実際の短い書籍の URL を取得し、実際の URL をリクエストします。 ＃＃＃＃＃＃質問＃＃＃＃＃＃

この方法で得られた結果は信頼できるものですか?より信頼性の高い方法はありますか?

Google と Baidu のどちらを使用するべきですか?

Answer 1

包括的に言うと、すべての主流の検索エンジン インターフェイスを使用でき、特定の検索エンジン インターフェイスに限定される必要はありません。現時点では、一部の Web サイトではニーズを満たす検索方法が提供されていないため、チームメイトの一部はこのようにして特定のトピックを検索しています。ただし、検索エンジンを通じて検索される情報は包括的ではない可能性があります。ロボット協定では、検索できない場合は検索エンジンに含まれないと規定されています

。