python 使用 selenium 爬取中国福利彩票双色球历史中奖号码

前期准备
版本：python3
模块：selenium、time、pprint
一开始使用的是 tree 的方式获取数据，但发现数据获取为空，中奖号码为动态生成数据，无法直接获取，使用采用selenium的方式获取数据。

from selenium import webdriver
import time
import pprint
browser = webdriver.Chrome()
browser.get('http://www.cwl.gov.cn/kjxx/ssq/kjgg/')
clicks = browser.find_element_by_xpath('/html/body/div[1]/div/div[2]/div[2]/dl/dd/ul/li[3]')
time.sleep(1)
clicks.click()
time.sleep(1)
arr = []
for i in range(90):text = browser.find_element_by_xpath('/html/body/div[1]/div/div[3]/table/tbody/tr[{}]'.format(i+1))arr.append(text.text.split(' '))
toArr = []
for list in arr:obj = {'red': list[2],'blue': list[3]}toArr.append(obj)pprint.pprint(toArr)

代码很简单，没有多少行，主要目的是搞清楚 selenium 的使用方法。下面是效果图：

可以把数据写入到 excel 表格，方法很简单，这里就不描述了

python 使用 selenium 爬取中国福利彩票双色球历史中奖号码相关推荐

python使用selenium爬取联想官网驱动（一）：获取遍历各驱动的下载网址
python使用selenium爬取联想官网驱动(一):获取遍历各驱动的下载网址然后wget命令试验下载由于初期学习,所以先拿一个型号的产品驱动试验. (1)以下为在联想某型号产品获取相关驱动下载的 ...
python爬取本地天气信息_用Python写一个爬取中国天气网的终端版天气预报爬虫
导语前几篇文章介绍了爬取静态网站的主要方法.今天写一个小项目实践一下.本项目可以在终端窗口查询全国3400多个区县的当日天气信息和近七天天气信息. 实现效果 [Python爬虫]写一个爬取中国天气网 ...
[python爬虫] Selenium爬取内容并存储至MySQL数据库
前面我通过一篇文章讲述了如何爬取CSDN的博客摘要等信息.通常,在使用Selenium爬虫爬取数据后,需要存储在TXT文本中,但是这是很难进行数据处理和数据分析的.这篇文章主要讲述通过Selenium ...
Python爬虫——selenium爬取网易云评论并做词云
大家好!我是霖hero 到点了上号网易云,很多人喜欢到夜深人静的时候,在网易云听音乐发表评论,正所谓:自古评论出人才,千古绝句随口来,奈何本人没文化,一句卧槽行天下!评论区集结各路大神,今天我们来爬取 ...
python用selenium爬取b站评论并制作词云图
文章目录前言一.爬取b站评论 1.selenium配置 2.代码二.制作词云图 1.下载停用词 2.代码 3.注意事项三.制作成品 1.初期成品 2.成品前言 b站视频下的评论是下拉加载的. ...
[python爬虫] selenium爬取局部动态刷新网站（URL始终固定）
在爬取网站过程中,通常会遇到局部动态刷新情况,当你点击"下一页"或某一页时,它的数据就进行刷新,但其顶部的URL始终不变.这种局部动态刷新的网站,怎么爬取数据呢?某网站数据显示如下 ...
python用selenium爬取网页数据_Python项目实战：使用selenium爬取拉勾网数据
" 一切不经过项目验证的代码都是耍流氓,今天我们就通过一个简单的招聘网站的数据归档进行当前热门岗位的大数据分析,最后以wordcloud进行显示.本文为数据爬取篇." 项目准备: ...
python中国大学排名爬虫写明详细步骤-Python爬虫——定向爬取“中国大学排名网”...
内容整理自中国大学MOOC--北京理工大学-蒿天-Python网络爬虫与信息提取相关实战章节我们预爬取的url如下网页节选在浏览器中读取网页源代码可以发现表格数据信息是直接写入HTML页面 ...
Python爬虫-selenium爬取网易云歌单
文章目录 (一)工欲善其事必先利其器-安装工具 Selenium 浏览器 (二)实战 (一)工欲善其事必先利其器-安装工具 Selenium Selenium是一个强大的网络数据采集工具,其最初是为网 ...

python 使用 selenium 爬取中国福利彩票双色球历史中奖号码

python 使用 selenium 爬取中国福利彩票双色球历史中奖号码

python 使用 selenium 爬取中国福利彩票双色球历史中奖号码相关推荐

最新文章

热门文章