如何避免Google网站管理员工具API限制

Question

我刚刚编写了一个应用程序，它可以解决Google网站管理员工具的抓取问题。每个请求的API限制为100个条目。有没有解决方法或解决方法来一次获取所有爬网问题？

Answer 1

谷歌API查询瓶颈问题通常可以通过控制通过静态/动态内部线程运行速度（即Java并发线程池带/缓冲），每个或（批）查询线程（S）来解决。总之，你会想拥有自己的查询线程控制器。