使用scrapy创建一个蜘蛛，并无法将数据存储到csv

-1

我是scrapy的新手，在这里我创建了一个使用亚马逊网址的蜘蛛无法获得输出到csv。使用scrapy创建一个蜘蛛，并无法将数据存储到csv

这里是我的代码：

import scrapy 

class AmazonMotoMobilesSpider(scrapy.Spider): 
name = "amazon" 
start_urls = ['https://www.amazon.in/Samsung-Mobiles/b/ref=amb_link_47?ie=UTF8&node=4363159031&pf_rd_m=A1VBAL9TL5WCBF&pf_rd_s=merchandised-search-leftnav&pf_rd_r=NGA52N9RAWY1W103MPZX&pf_rd_r=NGA52N9RAWY1W103MPZX&pf_rd_t=101&pf_rd_p=1ce3e975-c6e8-479a-8485-2e490b9f58a9&pf_rd_p=1ce3e975-c6e8-479a-8485-2e490b9f58a9&pf_rd_i=1389401031',] 
def parse(self,response): 
    product_name = response.xpath('//h2[contains(@class,"a-size-base s-inline s-access-title a-text-normal")]/text()').extract() 
    product_price = response.xpath('//span[contains(@class,"a-size-base a-color-price s-price a-text-bold")]/text()').extract() 
    yield {'product_name'product_name,'product_price': product_price}

我的壳呈现这样的结果：

len(response.xpath('//h2[contains(@class,"a-size-base s-inline s-access-tit le a-text-normal")]/text()')) 24

我是否需要更改任何设置？

来源

2017-10-10 Zarina veeru

你如何运行刮刀？你在日志中遇到任何错误？还检查错字@Arun提到的是什么导致问题 –

我运行我的蜘蛛是这样的：scrapy crawl spidername，没有错误我的外壳给我结果的计数但不输出到CSV –

要产生结果以CSV，你需要用一个输出选项

scrapy crawl -o results.csv spidername

只运行履带，当您激活输出结果被发送到文件。否则他们将由您的piplelines进行处理。如果你没有通过管道将它们保存在任何地方，那么它们将只在终端的控制台日志上

来源

2017-10-11 13:00:38

代码显示了文件“C：\ Users \ imp \ first_scrapy \ first_scrapy \ spiders \ Amazon_MotoMobiles.py”，l ine 9 yield {'ProductName'：product_name，'Price'： product_price} ^ IndentationError：意外缩进 –

在http://pastebin.com/上发布完整文件并共享调查链接 –

以下是代码https://pastebin.com/THPvAca1 –

我认为这是因为你的良率在字典中有一些语法错误。

更改此

yield {'product_name'product_name,'product_price': product_price}

到

yield {'product_name':product_name,'product_price': product_price}

来源

2017-10-11 06:02:00

我纠正了我的代码...然后过控制台扔我的错误 –

产量{“产品名称”：PRODUCT_NAME，“价格”：PRODUCT_PRICE} IndentationError：取消缩进不匹配任何外部缩进级别这是我编辑的代码 \t 产量{“产品名称”：PRODUCT_NAME ，'Price'：product_price} –

使用scrapy创建一个蜘蛛，并无法将数据存储到csv

回答

相关问题