获取a标签的文本 asp.net_Python小程序2获取href的值

如果一个页面上只有标题，想要获取该标题下面的文章，就需要获取文章的url，方法是：定位超链接标签标题，获取其中的href的值。

import requestsfrom bs4 import BeautifulSoupurl='http://politics.people.com.cn/n1/2020/1121/c1024-31939065.html'headers={'User-agent':'浏览器请求头的user-agent'}r=requests.get(url,headers=headers)if r.status_code==200:    r.encoding = 'gb18030'    soup=BeautifulSoup(r.text,'lxml')    #print(soup)    tags=soup.find('div','clearfix box_pic02')    hrefs=tags.find_all('a')    for href in hrefs:        print("超链接的整个标签内容为：",href)        text=href.get_text()        print("*超链接中的文本为：",text)        get_href=href.get('href')        print("*超链接为：",get_href)else:    print("连接网页不成功")

最后输出的结果为：

获取的超链接可供再次请求访问。这个网站现在貌似设置了比较敏感的反爬机制，一个headers只能爬取两三次，再次请求连接就会出现连接异常的提醒。

~End~

获取a标签的文本 asp.net_Python小程序2获取href的值相关推荐

小程序获取用户信息 php发送数据库,qq小程序如何获取用户信息并存入数据库实例...
今天给大家带来qq小程序如何获取用户信息并存入数据库的实例,希望能够帮助到大家,让大家不仅知道如何下载qq小程序源码,还能懂得去何用,如何去改,甚至是如何去创造,如果你有好的qq小程序源码出售,可以联 ...
微信小程序（十一）实战——时间的获取，比较，判断（微信小程序如何获取时间）
1.获取当前系统日期和时间在小程序中,新建项目时,就会有一个utils.js文件,就是获取日期和时间的,代码如下: utils.js: const formatTime = date => { ...
asp获取微信小程序用户手机号,asp微信小程序手机号获取,微信小程序手机号asp获取方法
今天搞的这个项目里需要用到asp获取小程序用户的手机号,在网上找了下资源,一个也没有找到,难道用asp获取不到微信小程序用户的手机号码吗?非也,经过一系列操作,成功了,asp照样可以获取小程序用户的手 ...
微信小程序获取的语言列表统计，微信小程序getSystemInfo获取的各种语言都叫什么？微信小程序国际化|多语言版本获取微信小程序语言大全【记录】
微信小程序要做国际化,需通过 wx.getSystemInfo 获取到当前使用的语言,来切换不同的语言包,或许是我没找对地方?查了一下微信手册上没有这个标准语言对照表或者记录啥的,只能自己挨个儿获取一 ...
许嵩音乐智能问答系统微信小程序之获取数据及文本分类
许嵩音乐智能问答系统微信小程序之获取数据及文本分类项目简介. 音乐播放器搭建. 获取数据及文本分类. 智能客服聊天界面. 连接前端微信小程序输入和后端python,并返回值连接知识图谱数据获取 ...
html怎样获取用户手机号码,小程序如何获取用户手机号？
在小程序获客过程中,我们有非常多的应用场景希望获取当前访客的手机号,通过小程序提供的这一便利功能,可以大大增强我们的营销效果. 在小程序中,获取手机号有下面两种方式: 一.用户进入首页(或某一页面), ...
微信小程序之获取用户地址
在微信小程序中获取定位信息今天一整天基本上都在处理在微信小程序中获取准确地址,给出定位并给出所在城市的问题.经过走了半天弯路,现在总结一下所需要的步骤. 一. 先到腾讯位置服务中心获取KEY 通过小 ...
微信小程序iBeacon获取问题（wx.onBeaconUpdate不执行）【已解决】
微信小程序iBeacon获取问题(wx.onBeaconUpdate不执行)[已解决] 问题描述软件硬件使用代码问题现象解决办法问题描述长话短说,使用某公司的iBeacon标签设备,开发微 ...
JAVA获取网页中的电影下载地址小程序
现在电影资源越来越少了,今天想看看吸血鬼日记,结果网上搜出的网址不支持迅雷批量下载,我一个一个点,很累.于是就看看网页源代码发现影片都以FTP开头,rmvb结尾.于是就写了个小程序能够获取网页中所有的 ...
小程序快速入门到项目开发 2（小程序appID获取和目录结构）
你好,[程序职场]专注于:Spring Boot ,微服务和前端APP开发,闲暇之余一起聊聊职场规划,个人成长,还能带你一起探索副业赚钱渠道,在提升技术的同时我们一起交流敏捷流程提高工作效率 ...

获取a标签的文本 asp.net_Python小程序2获取href的值

获取a标签的文本 asp.net_Python小程序2获取href的值相关推荐

最新文章

热门文章