如何使用python和selenium获取网页上的所有链接IDE

Question

我想使用selenium ide和python从网页获取所有链接。

例如，如果我搜索测试或谷歌网站上的任何内容，并且我想要所有与此相关的链接。

这里是我的代码

from selenium import webdriver 
from selenium.webdriver.common.keys import Keys 
baseurl="https://www.google.co.in/?gws_rd=ssl" 
driver = webdriver.Firefox() 
driver.get(baseurl) 
driver.find_element_by_id("lst-ib").click() 
driver.find_element_by_id("lst-ib").clear() 
driver.find_element_by_id("lst-ib").send_keys("test") 
link_name=driver.find_element_by_xpath(".//*[@id='rso']/div[2]/li[2]/div/h3/a") 
print link_name 
driver.close() 

输出

<selenium.webdriver.remote.webelement.WebElement object at 0x7f0ba50c2090> 

在Firebug的控制台使用XPath $x(".//*[@id='rso']/div[2]/li[2]/div/h3/a")。

输出 [一jtypes2.asp]

？我怎样才能从对象链接的内容。

Answer 1

from selenium import webdriver 
from selenium.webdriver.common.keys import Keys 
baseurl="https://www.google.co.in/?gws_rd=ssl" 
driver = webdriver.Firefox() 
driver.get(baseurl) 
driver.find_element_by_id("lst-ib").click() 
driver.find_element_by_id("lst-ib").clear() 
driver.find_element_by_id("lst-ib").send_keys("test") 
driver.find_element_by_id("lst-ib").send_keys(Keys.RETURN) 
driver.implicitly_wait(2) 
link_name=driver.find_elements_by_xpath(".//*[@id='rso']/div/li/div/h3/a") 
for link in link_name: 
    print link.get_attribute('href') 

试试上面的代码。在提供搜索关键字后，您的代码不会发送RETURN键。此外，我做了更改隐式等待2秒加载搜索结果，我改变了XPath以获得所有链接。