python - pyspider 예약 크롤링 문제

Question

크롤러를 작성할 때 코드에 마다 설정을 하고 21일에 한 번 크롤링을 한 후 오늘 결과가 업데이트되지 않고 마지막 크롤링 시간이 여전히 21일인 것을 발견했습니다. 매개변수 설정이 잘못되었나요?

Answer 1

올린 작업 사진, 어떤 작업을 위한 작업인가요?

게시된 것은 Detail_page 작업입니다

주제는 index_page를 cronjob 간격보다 작은 시간으로 설정했습니다. 단, Detail_page는 설정되어 있지 않습니다. 이렇게 하면 Detail_page의 일정이 변경되지 않습니다

project 대기열 상태, 최근 활성 작업은 무엇인가요?

Answer 2

모든 연령대가 일치하지 않을 수도 있습니다. 나이에 문제가 없다면 솔직히 어려운 질병입니다. 저는 항상 taskdb에 가서 해당 테이블을 비운 다음 pyspider를 다시 시작하고 프로젝트를 다시 실행합니다