Scrapy が Web サイト全体のコンテンツをクロールしたい場合、コンテンツの抽出を開始する前に、すべてのページの URL をキューに入れる必要がありますか?

Question

scrapy サイト全体をクロールしたい場合、コンテンツの抽出を開始する前に、すべてのページの URL をキューに入れる必要がありますか?