有人可以建议一个网络蜘蛛吗？

Question

是否有可以抓取论坛内容的网络蜘蛛？

我的公司不提供互联网连接，所以我想抓住论坛的主题，然后我可以看看公司的内容。

我已经试过了WebLech，它可以抓取静态页面。

Answer 1

尝试wget。我用它来镜像整个（或部分）网站以供离线使用，并且它工作正常。有关介绍，请参阅this article。