使用lxml获取HTML的所有链接

Question

我想使用lxml从html页面找出所有的url及其名称。

我可以解析网址，可以找出这个东西，但有没有什么简单的方法，我可以找到所有的URL链接使用lxml？

Answer 1

from lxml.html import parse 
dom = parse('http://www.google.com/').getroot() 
links = dom.cssselect('a') 

Answer 2

from lxml import etree, cssselect, html 

with open("/you/path/index.html", "r") as f: 
    fileread = f.read() 

dochtml = html.fromstring(fileread) 

select = cssselect.CSSSelector("a") 
links = [ el.get('href') for el in select(dochtml) ] 

links = iter(links) 
for n, l in enumerate(links): 
    print n, l