python爬取疫情信息html.xpath p标签_python xpath 如何过滤div中的script和style标签

爬取一个页面中的div，想获取div中的文字，我是这么写的：

selector.xpath(‘//div[@class=”text-con”]’).xpath(‘string(.)’).extract()[0].lstrip().rstrip()

但在这个 div中包含一个 style标签和两个script标签，这样把样式和script中的代码也获取了，怎么过滤script标签和style标签，然后只获取文字内容，网上看了看说用not 但是我始终没成功，不知道是不是用法不对

回答

chrome可以直接生成xpath查询条件，可以试试

selector.xpath(‘//div[@class=”text-con”]/text()’).xpath(‘string(.)’).extract()[0].lstrip().rstrip()

楼上+1，用xpath的/text()属性即可获取标签内的文本信息。推荐一个特别好的xpath教程，当年我就是跟着这个教程学的: http://zvon.org/xxl/XPathTutorial/General_chi/examples.html

如果单纯要删除

1)可以参考这篇文章，用strip_elements函数删除元素：

https://www.cnblogs.com/XD00/p/10626312.html

2)或者可以参考这篇的”方法二”，用lxml的Cleaner来过滤：

https://www.jianshu.com/p/26e443a9edb6

python爬取疫情信息html.xpath p标签_python xpath 如何过滤div中的script和style标签相关推荐

python爬取boss直聘招聘信息_Python 爬取boss直聘招聘信息！
原标题:Python 爬取boss直聘招聘信息! 1.一些公共方法的准备获取数据库链接: importpymysql ''' 遇到不懂的问题?Python学习交流群:821460695满足你的需求, ...
python爬取微博热搜写入数据库_python实现爬取微博热搜存入Mysql
python爬取微博热搜存入Mysql最终的效果使用的库目标分析一:得到数据二:链接数据库总代码最终的效果废话不多少,直接上图这里可以清楚的看到,数据库里包含了日期,内容,和网站lin ...
python爬取考研成绩什么时候出来_Python 爬取揭秘，你的考研调剂对手就有谁？...
原标题:Python 爬取揭秘,你的考研调剂对手就有谁? [CSDN编者按]考研成绩揭晓后,不少考生都要面临调剂的问题.而宁夏大学曝出的新闻,也让考生对考研额外增加了一份焦虑.那么,在考研调剂中,你的 ...
python爬取网易云音乐热评_python爬取网易云音乐评论
本文实例为大家分享了python爬取网易云音乐评论的具体代码,供大家参考,具体内容如下 import requests import bs4 import json def get_hot_comme ...
python爬取京东数据加载失败_python 爬京东数据时，无法登陆。
想使用python爬取京东的快递信息,现在需要解决的首要问题是使用python模拟浏览器登陆,遇到了下面的问题. _t _ntNBMNX ({"username":"\u ...
python爬取网易云音乐评论分析_python爬取网易云音乐评论
本文实例为大家分享了python爬取网易云音乐评论的具体代码,供大家参考,具体内容如下 import requests import bs4 import json def get_hot_comme ...
python爬取豆瓣电影top250的代码_Python爬虫——爬取豆瓣电影Top250代码实例
利用python爬取豆瓣电影Top250的相关信息,包括电影详情链接,图片链接,影片中文名,影片外国名,评分,评价数,概况,导演,主演,年份,地区,类别这12项内容,然后将爬取的信息写入Excel表中 ...
python爬取豆瓣高分书籍信息（request+xpath）
复习了xpath,感觉还是熟悉的感觉.上次爬了微博爬了贴吧,这次就用xpath爬个豆瓣图书数据,作为学习时间序列的数据吧! 面向对象编程爬取 1.把自己要做的事情分类 #获取url的规律组成url_l ...
python爬取js加载的数据_Python爬虫:爬取JS加载数据的网页
比如简书: Paste_Image.png 我们来写个程序,爬取简书网站随便一个作者的所有文章,再对其所有文章进行分词统计程序运行统计的结果见文章: 我统计了彭小六简书360篇文章中使用的词语需要 ...

python爬取疫情信息html.xpath p标签_python xpath 如何过滤div中的script和style标签

python爬取疫情信息html.xpath p标签_python xpath 如何过滤div中的script和style标签相关推荐

最新文章

热门文章