使用我很新的Scrapy,想尝试以下操作: 从网页中提取一些值,将其存储在一个变量,在我的主要脚本中使用它。 所以我也跟着他们的教程,并改变了代码为我的目的: import scrapy
from scrapy.crawler import CrawlerProcess
class QuotesSpider(scrapy.Spider):
name = "quotes"
我有一只蜘蛛(下图),我希望能够每10天左右通过一次Cron作业来运行它,但是,每次我第一次运行它时都会运行它。它重写字段,而不是仅将项目追加到CSV中的相应字段。我该如何做到这一点,以便无论我运行多少次,顶部只有一组字段标题,并且下面的所有数据都包含在其中。 import scrapy
class Wotd(scrapy.Item):
word = scrapy.Field()