如何将Scrapy脚本打包到独立应用程序中？

Question

我有一套Scrapy蜘蛛。他们需要每天从桌面应用程序运行。 从用户的角度来看，在另一台Windows机器上安装并运行它最简单的方法是什么？

Answer 1

最简单的方法是，如果你正在运行Windows Server，你甚至可以安排你使用（scrapy爬行yoursprider）运行蜘蛛COMAND为他们写在Python脚本我猜...

。

Answer 2

创建一个脚本（例如run_spider.py），它运行scrapy crawl <spider_name>作为系统命令。

run_spider.py

from os import system 
output_file_name = 'results.csv' 
system('scrapy crawl myspider -o ' + output_file_name + ' -t csv') 

再喂该脚本来PyInstaller：

pyinstaller run_spider.py