从scrapy参数的脚本中运行Scrapy蜘蛛

Question

我在scrapy中写了一个蜘蛛&我成功地通过python脚本运行它。 的问题，同时通过scrapy提示符下运行蜘蛛我们提供像 “-o ScrapedData.json -t JSON” agruments我想运行 “scrapy爬myspider -o ScrapedData.json -t JSON” 通过Python脚本。 任何帮助是高度赞赏。提前致谢！

Answer 1

• -o ScrapedData.json覆盖FEED_URI设置
• 和-t json覆盖FEED_FORMAT设置

（见https://github.com/scrapy/scrapy/blob/master/scrapy/commands/crawl.py#L24）

所以，从脚本运行的蜘蛛时，你应该看看覆盖这些2个设置。

Answer 2

您的意思是？

from scrapy import cmdline 

cmdline.execute("scrapy crawl myspider -o ScrapedData.json -t json".split())