BeautifulSoup标签定位方法总结

首先说明一下两个基本函数 .find() 和 .findAll()。

find()返回第一个符合要求的标签

findAll()返回一个由所有符合要求的标签组成的列表。除此之外基本相同。

   

0、直接定位

例:

<body>

<table>

<td>apple</td>

<td>banana</td>

</table>

</body>

   

label_loc = bs.body.table.td

   

1、通过标签名定位

例:<table>

<td>apple</td>

<td>banana</td>

<table>

   

bs.find("td") 返回第一个<td></td>

bs.findAll("td") 返回所有<td></td>

   

2、通过标签属性定位

例:<table>

<td name="fruit">apple</td>

<td name="fruit">apple</td>

</table>

   

bs.find(name="fruit") 返回第一个<td></td>

bs.findAll(name="fruit") 返回所有<td></td>

   

3、通过标签名+属性定位

例:<table>

<td name="fruit">apple</td>

<td name="fruit">apple</td>

</table>

   

bs.find("td",{"name":"fruit"}) 返回第一个<td></td>

findAll 同理

请注意2与3的区别。

find(name="fruit")  != find("td",{"name":"fruit"})

方法3有<td>的限制条件。

   

4、通过text定位

例:<table>

<td>apple</td>

<td>banana</td>

<table>

   

find(text="apple") 返回<td></td>

   

注意text匹配必须完全相同,而且应在同一标签内。find(text="app") 返回None

想要只匹配部分文本,应使用正则表达式,接下来介绍。

   

5、通过正则表达式与以上方式组合

例:<table>

<td name="fruit">apple</td>

<td name="fruit">apple</td>

</table>

   

find(text=re.compile("app")) 返回含有app的标签

bs.find("td",{"name":re.compile("fruit")})

   

   

   

posted @ 2018-05-04 20:31  bosslv  阅读(1589)  评论(0编辑  收藏  举报