python - scrapy无法爬取数据，并且不能创建txt文件

Question

( www.sf.gg ) 是中国领先的开发者技术社区。 我们希望为编程爱好者提供一个纯粹、高质的技术交流的平台， 与开发者一起学习、交流与成长，创造属于开发者的时代！

phpcn_u1582 · Answer

是xpath解析路径的问题，谢谢大家

天蓬老师 · Answer

应该是写入模式有问题，试试 ab.

大家讲道理 · Answer

在linux运行的吧，是不是有权限问题？

代言 · Answer

看日志输出好像scrapy遇到robot.txt提前退出了，在settings中将ROBOTSTXT_OBEY改为ROBOTSTXT_OBEY = False试试。还不行就打断点调试吧