cari

Rumah  >  Soal Jawab  >  teks badan

python - Gunakan rangka kerja buruk untuk merangkak gambar Baidu dan disekat

URL alamat permintaan ialah alamat json yang diperoleh melalui firefox Ia boleh dibuka dengan penyemak imbas, tetapi ia dilarang apabila merangkak dengan scrapy.

https://image.baidu.com/searc...

给我你的怀抱给我你的怀抱2804 hari yang lalu694

membalas semua(3)saya akan balas

  • 黄舟

    黄舟2017-05-24 11:36:48

    Cubalah di settings.py 将 ROBOTSTXT_OBEY = False.

    balas
    0
  • 某草草

    某草草2017-05-24 11:36:48

    Cuba tanpa mendengar

    balas
    0
  • 为情所困

    为情所困2017-05-24 11:36:48

    Saya setuju dengan tingkat atas, jika masih ada dinding. Kaedah scrapy+selenium+phantomjs boleh digunakan.

    balas
    0
  • Batalbalas