recherche

Maison  >  Questions et réponses  >  le corps du texte

python - Le Spider de Scrapy facilite l'exécution et le débogage dans l'EDI

J'ai beaucoup d'araignées, je ne peux pas créer manuellement un débogueur (scrapy crawl spider_name) à chaque fois que je le débogue

J'aimerais pouvoir faire un clic droit sur le fichier spider pour l'exécuter/déboguer directement.

typechotypecho2737 Il y a quelques jours1218

répondre à tous(2)je répondrai

  • 欧阳克

    欧阳克2017-06-28 09:27:49

    Article de référence : Résumé des problèmes courants avec les robots Scrapy

    spider est facile à exécuter/déboguer

    Dans le fichier spider, ajoutez la cmdline méthode d'appel

    import scrapy.cmdline
    
    #Your Spider Class...
    
    def main():
        scrapy.cmdline.execute(['scrapy', 'crawl', 'your_spider_name'])
    
    if __name__ == '__main__':
        main()

    répondre
    0
  • 过去多啦不再A梦

    过去多啦不再A梦2017-06-28 09:27:49

    Créez un nouveau fichier py et utilisez-le pour déboguer

    from scrapy.cmdline import execute
    
    import sys
    import os
    
    
    sys.path.append(os.path.dirname(os.path.abspath(__file__)))
    
    execute(["scrapy","crawl","YOUR_SPIDER"])

    répondre
    0
  • Annulerrépondre