让scrapy在debug运行
编写scrapy的时候, 可能需要调试
下面写一种调试方法
在spider文件中最下方写上此代码就可以在右键调试了
if __name__ == '__main__':
process = CrawlerProcess(get_project_settings())
process.crawl('amazon') # 你需要将此处的spider_name替换为你自己的爬虫名称
process.start()
2024-03-01 21:31:40
编写scrapy的时候, 可能需要调试
下面写一种调试方法
在spider文件中最下方写上此代码就可以在右键调试了
if __name__ == '__main__':
process = CrawlerProcess(get_project_settings())
process.crawl('amazon') # 你需要将此处的spider_name替换为你自己的爬虫名称
process.start()