使用Scrapy下载PDF文件

Question

我使用Scrapy（一种Python网页抓取框架）从网站上下载PDF文件。

该网站需要遵循同一届会议，以便让您下载pdf。

它适用于Scrapy's，因为它全部自动化，但是当我在几秒钟后运行脚本时，它开始给我假pdf文件，例如当我尝试直接访问pdf时，没有我的会话。

这是为什么&怎么解决这个问题？

Answer 1

我认为该网站会跟踪您的会话。如果它是一个PHP站点，请将PHPSESSID cookie传递给下载PDF文件的请求。