Python Scrapy错误。不再支持运行带有多个蜘蛛的'scrapy crawl'

Question

我在Scrapy Python中做了一个脚本，它在几个月内一直工作正常（没有改变）。最近，当我在Windows PowerShell中执行脚本这又引出了另一个错误：

scrapy crawl spider –o 'filename.csv' –t 'csv' 

...

Running 'scrapy crawl' with more than one spider is no longer supported 

我不知道是什么问题。

在此先感谢。

Answer 1

运行命令没有-t，它的快捷方式，根据预先定义的模板生成新的蜘蛛：

scrapy genspider [-t template] <name> <domain> 

试着这么做：

scrapy crawl <yourspidername> –o filename.csv 

文档https://doc.scrapy.org/en/0.10.3/topics/commands.html#available-tool-commands

Answer 2

确保您使用短破折号写入命令选项：-o而不是-o。 我试着复制并粘贴你的命令，但没有工作，但它可以使用短破折号。

Answer 3

尝试

scrapy crawl spider –o filename.csv 

Answer 4

可能的解决办法：

尝试它的模块中改变你的蜘蛛的名字。也许你已经在其他地方创建了一个同名的蜘蛛或者复制了它，并且scrapy会跟踪你以前运行过的东西，因此它会遇到同名的2+蜘蛛，并且因为名称必须是唯一的，所以它无法抓取它。

更改名称解决了我的问题。