2014-07-15 98 views
9

我真的希望能够让美丽的汤匹配任何标签列表,像这样。我知道attr接受正则表达式,但有什么美丽的汤可以让你这样做吗?美丽的汤使用正则表达式来查找标签?

soup.findAll("(a|div)") 

输出:

<a> ASDFS 
<div> asdfasdf 
<a> asdfsdf 

我的目标是创建一个刮刀可以抓住从站点表。有时候,标签的命名不一致,我希望能够输入一个标签列表来命名表中的'数据'部分。

+3

可以使用的标签列表:'soup.find_all([“一”,“格”] )' –

+0

@ behzad.nouri你一定要把这个作为答案。 – alecxe

回答

25

find_all()是美丽的汤搜索API在最常用的方法。

您可以传递过滤器的变体。此外,通过一个list找到多个标签:

>>> soup.find_all(['a', 'div']) 

>>> from bs4 import BeautifulSoup 
>>> soup = BeautifulSoup('<html><body><div>asdfasdf</div><p><a>foo</a></p></body></html>') 
>>> soup.find_all(['a', 'div']) 
[<div>asdfasdf</div>, <a>foo</a>] 

或者你可以使用一个regular expression查找包含标签adiv

>>> import re 
>>> soup.find_all(re.compile("(a|div)")) 
+0

适用于正则表达式和非正则表达式选项。 :) – zx81

+0

正则表达式选项正是我正在寻找的 - 谢谢! – MaxU

6

请注意,您也可以使用正则表达式来搜索在标签的属性中。例如:

import re 
from bs4 import BeautifulSoup 

soup.find_all('a', {'href': re.compile('crummy.com/')}) 

这个例子查找所有<a>标签链接到包含子'crummy.com'网站。

(我知道这是一个非常古老的职位,但希望有人会发现这个额外的信息非常有用。)