python正则爬取微信阅读总榜单写入csv

# 爬取微信阅读top总榜
import requests
import re
import csv
url = "https://weread.qq.com/web/category/all"
res = requests.get(url)
res.encoding = 'utf-8'
# print(res.text)obj = re.compile(r'<p class="wr_bookList_item_index">(?P<index>\d+)</p>'r'.*?<p class="wr_bookList_item_title">(?P<name>.*?)</p>'r'<p class="wr_bookList_item_author"><.*?>(?P<author>.*?)</a>.*?<p class="wr_bookList_item_desc">('r'?P<description>.*?)</p>', re.S)# obj = re.compile(r'<p class="wr_bookList_item_index">(?P<index>.*?)</p>', re.S)
result = obj.finditer(res.text)
books = []
for item in result:dic = item.groupdict()dic['作者'] = dic.pop('author')dic['排名'] = dic.pop('index')dic['书名'] = dic.pop('name')dic['描述'] = dic.pop('description')books.append(dic)print(dic)header = ["排名", "作者", "书名", "描述"]
# newline是数据之间不加空行
with open('weixingRead.csv', 'w', newline='', encoding='utf-8') as f:writer = csv.DictWriter(f, fieldnames=header)  # 提前预览列名writer.writeheader() writer.writerows(books)

python正则爬取微信阅读总榜单写入csv相关推荐

Python爬虫爬取微信朋友圈的方法，感兴趣的朋友可以了解下
前言本文的文字及图片来源于网络,仅供学习.交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理. 小雨 | 作者 python教程 | 来源接下来,我们将实现微信朋友圈的 ...
Python爬虫爬取微信朋友圈
更多编程教程请到:菜鸟教程 https://www.piaodoo.com/ 友情链接: 高州阳光论坛https://www.hnthzk.com/ 人人影视http://www.op-kg.com/ ...
python+appium爬取微信运动数据，并分析好友的日常步数情况
python+appium爬取微信运动数据,并分析好友的日常步数情况声明:仅供技术交流,请勿用于非法用途,如有其它非法用途造成损失,和本博客无关目录 python+appium爬取微信运动数据,并 ...
爬取网易云歌曲榜单中网易云歌曲及其对应id xpath csv re requests python
基操爬取网易云歌曲榜单中网易云歌曲及其对应id 回顾xpath csv re requests 先进行基础抓包! 1 2 3 然后就是代码啦,兄弟们,我的代码都很完整,看懂思路,直接收藏复制粘贴就可以 ...
python爬虫爬取微信公众号小程序信息
python爬虫爬取微信公众号小程序信息爬取内容某汽车维修信息提供的维修店名称,地点以及电话(手机)号码爬取步骤啥也别管,先抓包看看,在这里,博主使用的抓包软件是charles 抓包:将网络传 ...
用Python实现爬取微信头像
如何用python实现爬取微信头像 python里面有个itchat包,用这个可以实现 1.先下载 itchat pip install itchat 2.创建一个py文件 import itchat ...
python定时器爬取豆瓣音乐Top榜歌名
python定时器爬取豆瓣音乐Top榜歌名作者:vpoet 日期:大约在夏季注:这些小demo都是前段时间为了学python写的,现在贴出来纯粹是为了和大家分享一下 #coding=utf-8im ...
【Python】爬取中国历史票房榜，可视化分析
[Python]爬取中国历史票房榜,可视化分析最近电影<哪吒之魔童转世>票房已经超过<流浪地球>,<复联4>.升到中国内地票房第二位.就好有哪些电影排进了历史票房 ...
爬取猫眼电影TOP100榜单
爬取猫眼电影Top100榜单分析网页内容提取前提:会基础的python3以及requests库,正则等. 分析网页 top100榜单网址为https://maoyan.com/board/4,通 ...

python正则爬取微信阅读总榜单写入csv

python正则爬取微信阅读总榜单写入csv相关推荐

最新文章

热门文章