Python到PHP异步数据传输

Question

我有建立一个网页抓取工具的要求。抓取部分将用python编码，结果将以PHP显示。 结果应该在PHP中异步显示，而python正在删除页面。

客户端认为python是web报废的快速和更好的选择。你认为混合python和php仍然给出了快速的结果，或者更快/更好地坚持php的网络报废？

什么是这两种语言之间异步交换数据的首选方法？

谢谢！

Answer 1

您可以使用支持自定义项目导出器的Scrapy。

通过继承BaseItemExporter类，您可以创建一个导出程序，该导出程序可能会打开一个websocket并通过它将每个抓取的项目发送到您的PHP应用程序。您甚至可以仅使用HTTP请求发送它们，也可以将它们发送到持久性消息队列（如RabbitMQ或Apache Kafka），并让PHP应用程序使用队列中的项目。