在Java中访问网站搜索框

Question

我需要写的是一个代码片段，可以访问网站，例如www.google.com会将搜索框放入短语中，并检索结果页面/页面的HTML代码。有没有可能在Java中实现这一点？

Answer 1

是的，使用类似HttpClient的东西，尽管还有其他类似的选项。

Answer 2

很可能你应该可以传递一个参数给url（在发布搜索之后看看google的url，有很多参数）或者使用post请求（如果站点支持它，请检查一个API描述）。

如果您直接从Java中读取URL（例如，使用URL类），您将得到原样返回的HTMl。

Answer 3

我想到的第一个工具是Selenium。它主要是一个网络测试框架，但可以用来自动化浏览器来进行你所建议的操作。

http://seleniumhq.org/docs/03_webdriver.html#getting-started-with-selenium-webdriver

Answer 4

例如www.google.com

对于Google，请使用JSON/Atom Custom Search API。这是访问Google搜索的唯一（合法）方式。

Answer 5

HttpUnit也可以使用。这是一个有据可查的，开源且易于使用的单元测试框架。