Scrapy 问题集锦

修改settings.py文件

1	ROBOTSTXT_OBEY = False

再见

好了各位，以上就是这篇文章的全部内容了，能看到这里的人呀，都是人才。

白嫖不好，创作不易。各位的支持和认可，就是我创作的最大动力，我们下篇文章见！

如果本篇博客有任何错误，请批评指教，不胜感激！

↑
坚持原创技术分享，您的支持将鼓励我继续创作！

原文作者: create17
原文链接: https://841809077.github.io/2018/05/26/Scrapy/Scrapy-问题集锦.html
版权声明: 转载请注明出处(码字不易，请保留作者署名及链接，谢谢配合！)