BS4 find

find_all()

find_all( name , attrs , recursive , string , **kwargs )

1.通过标签获取
soup.find_all("title") # 获取所有`title`标签元素
# [<title>The Dormouse's story</title>]
2.通过标签和属性获取获取
soup.find_all("p", "title") # 获取所有`class`为`title`的`p`标签
soup.find_all("p", class_= "title")  # 这个是全写形式
# [<p class="title"><b>The Dormouse's story</b></p>]soup.find_all(id="link2") # 获取所有`id`=`link2`的标签
# [<a class="sister" href="http://example.com/lacie" id="link2">Lacie</a>]# 可以结合正则表达式使用
soup.find_all(href=re.compile("elsie"))  # 获得`href`包含`elsie`的元素
# [<a class="sister" href="http://example.com/elsie" id="link1">Elsie</a>]3.通用属性获取方法`attrs`
css_class = soup.find(attrs={'class':'primaryconsumers'})

BS4 find_all相关推荐

python是不是特别垃圾-震惊！垃圾分类居然能用Python搞定!
目录 0 引言 1 环境 2 需求分析 3 代码实现 4 后记 0 引言纸巾再湿也是干垃圾?瓜子皮再干也是湿垃圾??最近大家都被垃圾分类折磨的不行,傻傻的你是否拎得清?��自2019.07.01开 ...
用Python做垃圾分类
0 引言纸巾再湿也是干垃圾?瓜子皮再干也是湿垃圾??最近大家都被垃圾分类折磨的不行,傻傻的你是否拎得清????自2019.07.01开始,上海已率先实施垃圾分类制度,违反规定的还会面临罚款. 为了避 ...
震惊！垃圾分类居然能用Python搞定!
目录 0 引言 1 环境 2 需求分析 3 代码实现 4 后记 0 引言纸巾再湿也是干垃圾?瓜子皮再干也是湿垃圾??最近大家都被垃圾分类折磨的不行,傻傻的你是否拎得清????自2019.07.01开 ...
循序渐进学爬虫：多线程+队列爬取豆瓣高分计算机类书籍
上一次的抓取豆瓣高分计算机书籍的案例,采用的是完全同步的方式.即单个线程依次执行完所有的逻辑,这样存在的问题就是我们的爬虫程序会非常的慢. 所以本文作为上一次案例的升级版本,通过循序渐进.动手实践的方 ...
循序渐进学爬虫：多线程+队列爬取豆瓣高分计算机类书籍 1
上一次的抓取豆瓣高分计算机书籍的案例,采用的是完全同步的方式.即单个线程依次执行完所有的逻辑,这样存在的问题就是我们的爬虫程序会非常的慢. 所以本文作为上一次案例的升级版本,通过循序渐进.动手实践的方 ...
Python 开发代码片段笔记
作者编写的一些代码片段,本版本为残废删减版,没有加入多线程,也没有实现任何有价值的功能,只是一个临时记事本,记录下本人编写代码的一些思路,有价值的完整版就不发出来了,自己组织吧,代码没啥技术含量,毕竟 ...
Python5--下载知乎关注者头像
这次这玩意折腾我了半天,终于成功了/(ㄒoㄒ)/~~.急需把中间遇到的问题详细记录下来宣泄一下在前面代码的基础上,想尝试将知乎上关注某话题的用户头像爬取下来.在参考了知乎大神们的回答之后,修改完善了 ...
python爬虫实战,爬取洛杉矶上千房源!
前言最近打算签证流程结束后,开始看看加州的房子了,毕竟研究生是不太容易住校内的,具体来说还是看看洛杉矶的房源.因为网站在国外,访问比较慢,不同页的也不好比较,于是想着把它全部爬取下来整理成docx文 ...
python bs4 find_all_BeautifulSoup中的find，find_all
1.一般来说,为了找到BeautifulSoup对象内任何第一个标签入口,使用find()方法. 以上代码是一个生态金字塔的简单展示,为了找到第一生产者,第一消费者或第二消费者,可以使用Beautif ...

BS4 find_all

find_all()

BS4 find_all相关推荐

最新文章

热门文章