Rumah  >  Soal Jawab  >  teks badan

python - Apabila menggunakan scrapy, mengapa gelung hanya boleh mendapat halaman pertama?

class OnlineSpider(scrapy.Spider):
name = "online"
allowed_domains = ["www.onlinedown.net"]
start_urls = ['http://www.onlinedown.net/new/android/','http://www.onlinedown.net/new/ios/','http://www.onlinedown.net/new/windows/']#
model = Model('onlinedown')

def start_request(self):
    for url in self.start_urls:
        for x in range(1, 100):
            detail_url = url + str(x) + '.html'
            print detail_url
            yield scrapy.Request(detail_url, callback = self.parse)
            

Terdapat 35 item setiap halaman, dan hasilnya adalah 105 item. kenapa ni.

黄舟黄舟2711 hari yang lalu676

membalas semua(2)saya akan balas

  • PHP中文网

    PHP中文网2017-05-18 11:01:02

    Cara menulis fungsi parse

    balas
    0
  • 漂亮男人

    漂亮男人2017-05-18 11:01:02

    Di manakah kaedah penghuraian anda?

    balas
    0
  • Batalbalas