python提取excel数据视频_Python-爬取b站的热门视频并导入Excel中
#encoding:utf-8
import requests
from lxml import etree
import xlwt
import os
# 爬取b站热门视频信息
def spider():
video_list = []
url = "https://www.bilibili.com/ranking?spm_id_from=333.851.b_7072696d61727950616765546162.3"
html = requests.get(url, headers={"User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.100 Safari/537.36"}).text
html = etree.HTML(html)
infolist = html.xpath("//li[@class='rank-item']")
for item in infolist:
rank = "".join(item.xpath("./div[@class='num']/text()"))
video_link = "".join(item.xpath(".//div[@class='info']/a/@href"))
title = "".join(item.xpath(".//div[@class='info']/a/text()"))
payinfo = "".join(item.xpath(".//div[@class='detail']/span/text()")).split("万")
play = payinfo[0] + "万"
comment = payinfo[1]
if comment.isdigit() == False:
comment += "万"
upname = "".join(item.xpath(".//div[@class='detail']/a/span/text()"))
uplink = "http://" + "".join(item.xpath(".//div[@class='detail']/a/@href"))
hot = "".join(item.xpath(".//div[@class='pts']/div/text()"))
video_list.append({
'rank': rank,
'videolink': video_link,
'title': title,
'play': play,
'comment': comment,
'upname': upname,
'uplink': uplink,
'hot': hot
})
return video_list
def write_Excel():
# 将爬取的信息添加到Excel
video_list = spider()
workbook = xlwt.Workbook() # 定义表格
sheet = workbook.add_sheet("b站热门视频") # 添加sheet的name
xstyle = xlwt.XFStyle() # 实例化表格样式对象
xstyle.alignment.horz = 0x02 # 字体居中
xstyle.alignment.vert = 0x01
head = ['视频名', 'up主','排名', '热度','播放量','评论数']
for h in range(len(head)):
sheet.write(0, h, head[h], xstyle)
i = 1
for item in video_list:
# 向单元格(视频名)添加该视频的超链接
if '"' in item["title"]:
item["title"] = item["title"].split('"')[1]
title_data = 'HYPERLINK("'+item["videolink"]+'";"'+item["title"]+'")' # 设置超链接
sheet.col(0).width = int(256 * len(title_data) * 3/5) # 设置列宽
sheet.write(i, 0, xlwt.Formula(title_data), xstyle)
name_data = 'HYPERLINK("'+item["uplink"]+'";"'+item["upname"]+'")'
sheet.col(1).width = int(256 * len(name_data) * 3/5)
sheet.write(i, 1, xlwt.Formula(name_data), xstyle)
sheet.write(i, 2, item["rank"], xstyle)
sheet.write(i, 3, item["hot"], xstyle)
sheet.write(i, 4, item["play"], xstyle)
sheet.write(i, 5, item["comment"], xstyle)
i += 1
# 如果文件存在,则将其删除
file = "b站热门视频信息.xls"
if os.path.exists(file):
os.remove(file)
workbook.save(file)
if __name__ == '__main__':
write_Excel()
结果展示:
python提取excel数据视频_Python-爬取b站的热门视频并导入Excel中相关推荐
- scrapy+selenium爬取B站生活区热门视频信息!
在爬取动态网页时,一般尽量先找相应网页的API接口.但当接口不好找(或者接口的URL中含有加密参数)时,这时候就需要selenium来帮忙了.但由于selenium爬取速度比较慢,此时结合scrapy ...
- python 爬取搞笑视频_Python爬取知乎上搞笑视频,一顿爆笑送给大家
前言 文的文字及图片来源于网络,仅供学习.交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理. 作者:Huangwei AI 来源:Python与机器学习之路 PS:如有需 ...
- python 爬取直播弹幕视频_Python爬取b站任意up主所有视频弹幕
爬取b站弹幕并不困难.要得到up主所有视频弹幕,我们首先进入up主视频页面,即https://space.bilibili.com/id号/video这个页面.按F12打开开发者菜单,刷新一下,在ne ...
- python提取txt关键内容_python爬取关键字所在行并输出到txt
因为手中有几千条关键信息需要整理,所有的信息都规整的用txt保存,但是我只需要其中有关键字后面的value值,怎么搞呢?几千条信息手动肯定是不可能的,然后刚刚学习python,很神奇的语言,哈哈.试着 ...
- Python爬取B站5000条视频,揭秘为何千万人为它流泪
作者 | Yura编辑 | 胡巍巍来源 | CSDN(ID:CSDNnews) 导语:我们特邀作者Yura爬取B站5000条视频,为你揭秘电影<哪吒>的更多"优秀梗", ...
- Python爬取B站5000条视频,揭秘为何千万人看「哪吒」流泪
导读:<哪吒>看哭了无数人!有很多小朋友,一开始他们还被太乙真人的滑稽,逗得哈哈笑.到了哪吒成魔要杀父亲.跪别父母.因为宿命不得以和敖丙为敌时,影院里突然安静下来. 人们喜欢<哪吒& ...
- Python 爬取 B 站 5000 条视频,揭秘为何千万人为它流泪!
[CSDN 编者按]<哪吒>看哭了无数人!编者看的那场,有很多小朋友,一开始他们还被太乙真人的滑稽,逗得哈哈笑.到了哪吒成魔要杀父亲.跪别父母.因为宿命不得以和敖丙为敌时,影院里突然安静下 ...
- python b站 排行_Python 爬取B站 视频热度排行数据
时间:2019-03-07 概述:抓取数据 爬虫 采集 Python 爬取bilibili站 视频热度排行视频数据,有文件为 bilibili.py,只需输入一个大模块名,如游戏模块名为'game', ...
- python 柱状图上显示字体_Python爬取百部电影数据,我发现了这个惊人真相!
2019年就这么匆匆过去了,就在前几天国家电影局发布了2019年中国电影市场数据,数据显示去年总票房为642.66亿元,同比增长5.4%:国产电影总票房411.75亿元,同比增长8.65%,市场占比 ...
最新文章
- 重磅 | 谷歌Waymo最新发布可完全脱离人类操控的自动驾驶汽车
- P1051 谁拿了最多奖学金
- 等价类、边界值的概念及划分
- 东莞网络推广浅析网站优化中常见的引流方式有哪些?
- 网站页面内链如何布局才更有利于SEO?
- 使用libcurl开源库和Duilib做的下载文件并显示进度条的小工具
- Net4.0---VS2010新特性
- 前端学习(1769):前端调试之什么是manifest
- python后端数据发送到前端_Python Django 前后端数据交互 之 后端向前端发送数据...
- Random Forest算法中的参数详解
- 深度学习《CNN架构续篇 - 正则化》
- corrplot包与ggcorrplot相关图(二)
- bit与Byte,KB与KiB,MB与MiB,GB与GiB等
- vue @click.native和@click.stop和@click.self
- DDI(DNS、DHCP和IPAM)解决方案的全球与中国市场2022-2028年:技术、参与者、趋势、市场规模及占有率研究报告
- android蓝牙设备类型设置 dev class设置
- 深度学习图像算法在内容安全领域的应用
- Springboot就业招聘信息系统x8y1g计算机毕业设计-课程设计-期末作业-毕设程序代做
- EnPass+WebDAV(一个跨平台密码管理解决方案)
- 粒径测量中的D10 D50 D90的含义
热门文章
- Mysql错误1366的解决办法:Incorrect string value: '\xF0\x9F...' for column 'XXX' at row 1
- char* 去除后面几个字符_【算法打卡】去除重复字母
- 快速修剪技巧_20个相见恨晚的CAD画图神技巧,让你效率飞升!
- java环境卡顿_解决Emacs在windows使用的问题,比如环境设置、卡顿……
- android阴影分割线,android shape的使用及渐变色、分割线、边框、半透明阴影
- 玩转 SpringBoot 2 快速整合 | Thymeleaf 篇
- @SpringBootApplication注解分析
- AndroidUtilCode框架 fileutils学习总结
- Android 更新UI的两种方法——handler和runOnUiThread()
- 牛头刨机械原理matlab代码