如何去除爬取网站数据中的转义字符?
如何去除爬取网站数据中的转义字符?
针对问题中出现的 "" 和 "
" 等转义字符,可以通过以下方法将其去除:1.使用正则表达式:
import re html = "<p style="width: 100%;">(.*)</p>" dr = re.compile(r'<[^>]+>', re.s) contant =re.findall(findcontant1, item) if len(contant) <= 0: contant = re.findall(findcontant2, item) contant = dr.sub('', str(contant))
2.使用beautifulsoup进行解析:
from bs4 import BeautifulSoup import re html = "<p style="width: 100%;">(.*)</p>" soup = BeautifulSoup(html, "html.parser") contant = soup.find('p').text
经过上述处理,即可去除转义字符,获得干净的文本内容。
以上就是如何去除爬取网站数据中的转义字符?的详细内容,更多请关注其它相关文章!