小福利,用selenium模块爬取qq音乐歌单
大家好,我是天空之城
爬取qq音乐歌单
话不多说,代码如下
#--coding:utf-8--
from selenium import webdriver # 从selenium库中调用webdriver模块
import time
from bs4 import BeautifulSoup# option = webdriver.ChromeOptions()
# option.add_argument('headless') # 静默模式
# # 打开chrome浏览器
# driver = webdriver.Chrome(chrome_options=option)driver = webdriver.Chrome() # 声明浏览器对象'''
driver.get('http://www.xiachufang.com/explore/') # 访问页面
time.sleep(2) # 暂停两秒,等待浏览器缓冲
tag_name = driver.find_element_by_class_name('normal-recipe-list')
list_name = tag_name.find_elements_by_class_name('info')
for i in list_name:name = i.textprint(name)
driver.close()
'''driver.get('https://y.qq.com/')
time.sleep(2)
gedan=driver.find_element_by_class_name('mod_header').find_elements_by_class_name('top_subnav__item')[4]
gedan.click()
time.sleep(2) # 等待两秒
pageSource = driver.page_source # 获取Elements中渲染完成的网页源代码
soup = BeautifulSoup(pageSource,'html.parser') # 使用bs解析网页
comments = soup.find('div',class_='mod_playlist').find_all('li',class_='playlist__item') # 使用bs提取元素
print(len(comments)) # 打印comments的数量for comment in comments: # 循环sweet = comment.find('span',class_='playlist__title_txt') # 提取评论print ('歌单名:%s\n ---\n'%sweet.text) # 打印评论
driver.close() # 关闭浏览器 # 关闭浏览器
获取数据截图如下
小福利,用selenium模块爬取qq音乐歌单相关推荐
- 小福利,用selenium模块爬取qq音乐歌单!
大家好,我是天空之城 爬取qq音乐歌单 话不多说,代码如下 #--coding:utf-8-- from selenium import webdriver # 从selenium库中调用webdri ...
- python爬取音乐并保存的格式_python爬取QQ音乐歌单歌曲保存到本地,json解析
序:python强大的功能,可以爬取网上的某些信息,本次主要是通过爬歌单信息熟悉下python基础. 用到知识点: 1.python3.urllib.request.openurl 2.json (j ...
- python爬取音乐并保存_python爬取QQ音乐歌单歌曲保存到本地,json解析
序:python强大的功能,可以爬取网上的某些信息,本次主要是通过爬歌单信息熟悉下python基础. 用到知识点: 1.python3.urllib.request.openurl 2.json (j ...
- 教你如何用Python抓取QQ音乐歌单及分析
学了python也有一段时间了,对于爬虫,后端的框架也有一些了解,但是都是在学习的时候跟着别人写的,感觉都不是自己的知识一样.我去年就给网易云音乐提了一个建议,就是通过播放量或者一个受欢迎程度来排序, ...
- Python抓取QQ音乐歌单并分析
学了python也有一段时间了,对于爬虫,后端的框架也有一些了解,但是都是在学习的时候跟着别人写的,感觉都不是自己的知识一样.我去年就给网易云音乐提了一个建议,就是通过播放量或者一个受欢迎程度来排序, ...
- scrapy爬取QQ音乐榜单歌曲及豆瓣电影信息。
系列文章目录 第一章 scrapy爬取起点中文网24小时热销榜单. 第二章 scrapy爬取苏州二手房交易信息. 第三章 scrapy爬取QQ音乐榜单歌曲及豆瓣电影信息. 目录 系列文章目录 前言 一 ...
- python爬取千千音乐榜单_Python爬取QQ音乐榜单数据
原博文 2020-08-09 12:56 − 1.爬取QQ音乐榜单数据并存入数据库(MySQL) 2.代码 import requests import json from bs4 import Be ...
- 利用selinum爬取咪咕音乐歌单信息源代码分享
话不多说,直接上代码,咪咕音乐的网页相对简单比较容易爬取 这个代码只是比较粗糙的完成了爬取工作,还有很多未完善的地方,因为使用的是ChromeDriver, 我们可以直接看到浏览器操作,可以很容易查错 ...
- 【Python爬虫实战】使用Selenium爬取QQ音乐歌曲及评论信息
本文对使用到的技术仅做简单的介绍,若想了解更多,请前往相应的官网网站进行学习. 本文适合对爬虫相关知识接触不多的新手,主要是普及Selenium如何做爬虫,大佬请跳过. 1.Selenium简单介绍 ...
最新文章
- 两个数之和等于第三个数
- ObjC load与initialize 简析
- android fragment传递数据,Android 两个Fragment之间传递数据实例详解
- jasmine.any(Function)
- 有了IDEA中的这款插件,流程图、类图轻松搞定,简直神器!
- Vim 命令行快捷键
- 遍历所有点的最短路径python_Python:如何优化所有可能的最短路径的计数?
- 低价营销网站建设是陷阱,中小企业要谨记!
- idea 读取md文件卡死
- 我的学习日志11.6
- 一道我根本猜不出来的Trajan
- win10官方iso下载
- 法语学习笔记——语音
- 【SQLite3+Qt开发】SQLite3简要介绍+在Qt5中的使用步骤
- 【Linux】 常用命令
- 【笔记】MS5837-30BA压力传感器调试笔记
- 漆学军:MACD交叉,金叉做多,死叉做空的例子程序
- windows访问共享文件夹 登录失败: 禁用当前的账户 解决方法
- Unity 3D俄罗斯方块
- Kali-linux绕过Utilman登录