Python爬虫爬取豌豆荚休闲小游戏

from selenium import webdriver
import time
driver = webdriver.Chrome()
try:driver.implicitly_wait(20)driver.get('https://www.wandoujia.com/category/6001')time.sleep(5)js_code = '''window.scrollTo(0,5000)'''driver.execute_script(js_code)time.sleep(5) # 商品信息加载，等待5sapp_list = driver.find_elements_by_class_name('card')for app in app_list:# app名称app_name = app.find_element_by_css_selector('.app-title-h2 a').text# 详情页urldetail_url = app.find_element_by_css_selector('.app-title-h2 a').get_attribute('href')# 下载人数# app大小download_num_size= app.find_element_by_class_name('meta').textapp_content = """===================app名字：{}详情页url：{}下载人数：{}app大小：{}===================\n""".format(app_name,detail_url,download_num_size[:8],download_num_size[11:])print(app_content)with open('豌豆荚app.txt','a',encoding='utf-8') as f:f.write(app_content)time.sleep(3)
finally:driver.close()

转载于:https://www.cnblogs.com/merliah/p/11128739.html

Python爬虫爬取豌豆荚休闲小游戏相关推荐

Python爬虫 | 爬取高质量小姐姐照片
Python爬虫 | 爬取高质量小姐姐照片 1.数据来源分析 2.获取author_id_list和img_id 3.制作detial 4.制作detial_list 5.数据保存 6.批量获取 7. ...
Python爬虫-爬取腾讯小视频
这两天在爬TX的视频的原始下载地址,遇到的问题挺多,感觉这个网站的规律变化多端的,中间也忘了修改过多少次代码了,而且有时候抓包也抓不到一些想要的内容,最后也只能抓到一些像<拜托啦学妹>.& ...
简单python爬虫爬取游戏wiki立绘
简单python爬虫爬取游戏wiki立绘玩二次元手游是感叹美少女立绘真好看啊,可惜就是抽不到,于是看到b站wiki上有角色立绘,就写了个爬虫准备将立绘趴下来欣赏(舔). 本人爬虫的技术只算是初学,代 ...
【爬虫】利用Python爬虫爬取小麦苗itpub博客的所有文章的连接地址并写入Excel中（2）...
[爬虫]利用Python爬虫爬取小麦苗itpub博客的所有文章的连接地址并写入Excel中(2) 第一篇( http://blog.itpub.net/26736162/viewspace-22865 ...
python爬虫爬取微信公众号小程序信息
python爬虫爬取微信公众号小程序信息爬取内容某汽车维修信息提供的维修店名称,地点以及电话(手机)号码爬取步骤啥也别管,先抓包看看,在这里,博主使用的抓包软件是charles 抓包:将网络传 ...
python网易云_用python爬虫爬取网易云音乐
标签: 使用python爬虫爬取网易云音乐需要使用的模块只需要requests模块和os模块即可开始工作先去网易云音乐网页版找一下你想要听的歌曲点击进去.按键盘F12打开网页调试工具,点击Ne ...
python如何爬取网站所有目录_用python爬虫爬取网站的章节目录及其网址
认识爬虫网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本.另外一些不常使用的名字还有蚂蚁.自动索引.模拟 ...
运用Python爬虫爬取一个美女网址，爬取美女图
运用Python爬虫爬取一个美女网址,爬取美女图要运用到的python技术: 导入库 1.request 发送请求,从服务器获取数据 2.BeautifulSoup 用来解析整个网页的源代码 imp ...
Python爬虫:爬取知乎上的视频，并把下载链接保存到md文件中
Python爬虫:爬取知乎上的视频,并把下载链接保存到md文件中 1.需要的Python模块主要是requests模块,用于得到的网页的数据安装命令为:pip install requests 2 ...

Python爬虫爬取豌豆荚休闲小游戏

Python爬虫爬取豌豆荚休闲小游戏相关推荐

最新文章

热门文章

Python爬虫 爬取豌豆荚休闲小游戏

Python爬虫 爬取豌豆荚休闲小游戏相关推荐

最新文章

热门文章

Python爬虫爬取豌豆荚休闲小游戏

Python爬虫爬取豌豆荚休闲小游戏相关推荐