Python - pyspiderのスケジュールされたクロールの問題

Question

#クローラーを作成しているときに、コード内で Every を設定した後、21 日に一度クロールした後、結果が今日更新されておらず、lastcrawltime がまだ 21 日のままであることがわかりました。パラメータの設定が間違っているのでしょうか？

Answer 1

投稿したタスクの写真、何のタスクですか?

投稿されたタスクはdetail_pageです

質問者は、cronjob 間隔よりも短い時間を Index_page に設定しました。ただし、detail_pageは設定されていません。このようにすると、detail_page は再スケジュールされなくなります

プロジェクトキューのステータス、最近アクティブなタスクは何ですか?

Answer 2

各年齢と年齢が一致しない可能性があります。年齢に問題がない場合は、正直に言って、これは頻繁に遭遇する難しい病気です。