爬取网站元素时如何捕捉第二个相同标签?
爬虫正则表达式困境:捕捉第二个相同标签
在爬取网站元素时,开发者有时会遇到这样一个问题:相同标签存在多个实例,但需要捕捉特定的一个。以一个网站片段为例:
`
这个是网站上的标签
<td style="color:#458c3f; font-size:14px; font-weight:bold; padding-top:15px; padding-bottom:8px;" align="center" class="">环境影响评价文件受理公示—镇江盛润建材有限公司年产6万立方米混凝土砌块砖项目(报告表)(京口区环保局)</td>
有一个一样的align在前面,抓取的话总是抓到第一个
`在这种情况下,仅仅使用简单的正则表达式匹配,如 r'
为了克服这个困难,需要使用更复杂的正则表达式。一种方法是使用一个包含满足条件的标签之前和之后的字符的更具体的正则表达式:
title = extract_fields(r'<td style="color:#458c3f; font-size:14px; font-weight:bold; padding-top:15px; padding-bottom:8px;" align="center">(.*?)</td>', datas,re.S) # 匹配标题
这样,正则表达式会精确定位到符合特定 style 和 align 属性的第二个标签,并提取它的内容作为标题。
以上就是爬取网站元素时如何捕捉第二个相同标签?的详细内容,更多请关注其它相关文章!