百度百家号作者昵称、ID、粉丝数量获取

最近在练习爬虫，试了试爬取百度百家号的作者粉丝数量，文中代码纯属练习专用。

import requests
import re
import json
from urllib import parsedef user_id(headers, search_word):"""通过URL查找百家号用户和其ID"""for page in range(0, 10000):# 单个关键词查找的页数page = str(page * 10)id_search_url = 'https://www.baidu.com/sf/vsearch?pd=userlist&from=844b&atn=index&tn=vsearch&ss=100&sa=tb&rsv_sug4=134&inputT=117&oq=' + search_word + '&word=' + \search_word + '&pn=' + page + '&data_type=json'search_re = requests.get(id_search_url, headers=headers)# write_txt(search_re.text)search_re_json = json.loads(search_re.text)try:user_num_id = search_re_json["data"]["datalist"]for id_list in user_num_id:# 取出用户ID和用户名和粉丝数量# print(id_list)# 用户IDid_num = id_list["third_id"]# 用户粉丝数fans_num = id_list["fans_num_ori"]# 用户名username = id_list["title"]write_csv(username, id_num, fans_num)# print(id_num)# print(fans_num)# print(username)# print(id_list)except Exception as e:break# write_csv(username, id_num, fans_num)def write_csv(username, id_num, fans_num):"""将获取到的数据写入文件"""url_path = r'./data/'with open(url_path + 'id.csv', mode='a+', encoding='utf-8') as fb:fb.write('\n')username = username.replace('<em>', '')username = username.replace('</em>', '')fb.write(username)fb.write(',')fb.write(str(id_num))fb.write(',')fb.write(str(fans_num))def write_txt(jj_re):"""将返回的JSOM写入文件"""url_path = r'./data/'with open(url_path + 'id.txt', mode='w+', encoding='utf-8') as fb:fb.write(jj_re)def main():"""主函数"""headers = {"User-Agent": "Mozilla/5.0 (iPhone; CPU iPhone OS 11_0 like Mac OS X) AppleWebKit/604.1.38 (KHTML, like Gecko) Version/11.0 Mobile/15A372 Safari/604.1"}# 需要搜索的关键词列表search_words = ['娱乐', '电影', '游戏']for search_word in search_words:# 编码字符encode_search_word = parse.quote(search_word)# print(encode_search_words)user_id(headers, encode_search_word)if __name__ == '__main__':main()

百度百家号作者昵称、ID、粉丝数量获取相关推荐

企业如何借助百度百家号进行网络推广？
有些中小企业的网络推广需求很简单,就是想网上搜自己的品牌关键词及产品关键词能搜到自己企业的信息,这个最简单的方法就是用百度的百家号.百家号认证蓝V之后会增加一个百家名片的展示,且会给一些流量支持,相对 ...
爬虫如何爬取某领域下百家号作者列表
分析百家号的作者的数据信息,发现在百家号中,每一个 appid 确定一个作者.(appid,听着也和作者author毫无联系,随即也想到,百家号早就支持作者通过API调用的形式去发布视频或者图文内容了 ...
Android使用webview获取百度百家号网站源码
Android使用webview获取网站源码最近在使用webview去获取网页的源码,但是对于百度百家号的文章,网页的源代码获取出来只要标题,内容不见了,想问问有没有大佬知道这个问题.去用pytho ...
心已死，搜索引擎百度百家号已死！
近日,我的百家号被百度封停!这让我不得不反思! 在现如今的自媒体时代,创作者们的无奈和心酸,既要满足用户的需要,取悦好用户,又得看自媒体平台的脸色,稍有不顺,可能要你所有的付出当是竹篮打水一场空.使我 ...
如何查看百度百家号审核进度
百度百家号是一个比较新的自媒体,前段时间刚开放注册,但需要审核,有的朋友说秒过,有的反映说一直在等待审核中,如下图所示.百度占据了很大的流量入口,特别是pc端,然后又开放了作者广告收入模块,所以百家号 ...
百度百家号“漏洞”大曝光一篇文章十几万阅读量收入上万
越来越发现自媒体的好处,就是现在太多的平台都提供入口,基本是四大门户还有三大巨头互联网公司,百度.腾讯 .阿里都提供!那么接下来我要分享的是中国最大的搜索引擎公司-百度!,相信最近很多人都知道百度百家 ...
采集百度百家号动态加载的数据信息
问题:采集百度百家号文章.动态.视频的标题 ,发布时间 ,播放量 ,视频文件阅读数等代码: # coding = utf-8 import os import re import time i ...
【报告分享】2021内容行业研究报告-百度百家号新榜（附下载）
摘要:近年来,用户对内容消费的需求迅速增加,内容平台百家齐放,为创作者提供了多种选择的机会.为进一步盘点目前内容行业的生态,加深创作者对内容行业发展现状及趋势的认知,为创作者更好地实现个人价值和商业价 ...
李彦宏直播首秀：来百度百家号APP带货没问题
李彦宏直播首秀:来百度百家号APP带货没问题直播作为一个新的媒体形式,通过百度平台来表达信息,来表达知识,那是非常必要的,所以我自己也想亲自体会,我有可能一些问题是比较偏门的问题,在百度里头搜不一定 ...

百度百家号作者昵称、ID、粉丝数量获取

百度百家号作者昵称、ID、粉丝数量获取相关推荐

最新文章

热门文章