免密登录驾考网使用selenium自动爬取模拟试题

getcookies.py

# -*- coding: utf-8 -*-
from selenium import webdriver
import time
import jsondef get_cookies():# 填写webdriver的保存目录driver = webdriver.Chrome()# 记得写完整的url 包括http和httpsdriver.get('https://user.jxedt.com/userLogin?type=xy')# 程序打开网页后30秒内手动登陆账户time.sleep(30)with open('cookies_jiaxiao.txt', 'w') as cookief:# 将cookies保存为json格式cookief.write(json.dumps(driver.get_cookies()))driver.close()get_cookies()

addcookies.py

# -*- coding: utf-8 -*-
# @Time    : 2020/12/6 0:54
# @Author  : ChenMing
# @USER    : chen
# @File    : addcookies.py
# @Software: PyCharmfrom selenium import webdriver
import json# 填写webdriver的保存目录
driver = webdriver.Chrome()# 记得写完整的url 包括http和https
driver.get('http://mnks.jxedt.com/')# 首先清除浏览器历史cookie
driver.delete_all_cookies()# 载入cookie
with open('cookies_jiaxiao.txt', 'r') as cookief:# 使用json读取cookies 注意读取的是文件 所以用load而不是loadscookieslist = json.load(cookief)for cookie in cookieslist:driver.add_cookie(cookie)# 刷新进入登录页面
driver.refresh()
driver.refresh()# 点击“模拟考试”
driver.find_element_by_xpath('/html/body/div[10]/div/div[2]/div[2]/div[3]/div[2]/a/p[1]').click()# 获取当前网页url
# current_url = driver.current_url# # 请求得到response信息包
# response = requests.get(current_url)# # 转换编码格式
# response.encoding = 'utf-8'# # 拿到html源码
# html = response.text# # 用html.parser解析格式，缩进
# soup = BeautifulSoup(html, "html.parser")
# # 找出所有a类标签
# a = soup.find_all('a')a = 0
while a < 100:# 找出所有包含class标签的tag（list类型）for link in driver.find_elements_by_xpath("//*[@class]"):# 找出class属性为name的子节点if link.get_attribute('class') == 'name':with open('kaoshi.txt', 'a', encoding='utf-8') as f:# 输出子节点的内容f.write(str(link.text))f.write('\n')driver.find_element_by_xpath('//*[@id="mnks"]/div/div[2]/div[3]/a[2]').click()a += 1

免密登录驾考网使用selenium自动爬取模拟试题相关推荐

使用selenium自动爬取斗鱼直播平台的所有房间信息
使用selenium自动爬取斗鱼直播平台的所有房间信息文章目录使用selenium自动爬取斗鱼直播平台的所有房间信息使用selenium实现动态页面模拟点击什么是selenium? selen ...
第七篇：爬虫实战— 3、自动登录123并且自动发送邮箱；自动爬取京东商品信息...
selenium模块阅读目录一.介绍二.安装三.基本使用四.选择器五.等待元素被加载六.元素交互操作七.其他八.练习一.介绍 selenium最初是一个测试工具,而爬虫中使用它主要 ...
selenium操作cookies实现免密登录，自动发微博
一直想用selenium实现个小功能,比如发微博之类的,但是有的网站在登录会有验证码,没想到太好的方法解决,于是想到利用cookies来登录网站第一步:获取一个可用的cookies,获取的cooki ...
Hadoop-2.8.0集群搭建、hadoop源码编译和安装、host配置、ssh免密登录、hadoop配置文件中的参数配置参数总结、hadoop集群测试,安装过程中的常见错误
25. 集群搭建 25.1 HADOOP集群搭建 25.1.1集群简介 HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起 HDFS集群: 负责海量数据 ...
【Git1】指令，分支，ssh免密登录
文章目录 1.init/add/commit/pull/push,status/diff/log/reflog,reset/checkout/clone:工缓归 2.分支操作:git branch - ...
华为/华三交换机配置SSH免密登录
数据通信 - 建设篇第二章华为/华三交换机配置SSH免密登录数据通信 - 建设篇系列文章回顾下章内容华为/华三交换机配置SSH免密登录背景介绍实施步骤堡垒机Linux后台使用ssh- ...
centos7免密登录
OpenSSH免密登录设置目的:一台centos服务器可以免密登录其余2台服务器备材料:三台centos虚拟机同网同网段同型号系统 IP地址为 : 192.168.217.12 192.1 ...
APP新用户注册、手机号绑定、用户登录验证新方式——一键登录（免密登录）验证方式新趋势
传统的手机APP应用注册通常需要用户输入用户名,填写用户密码,同时通过获取验证码绑定手机号.用户一旦注册后再次登录传统的方式都是提供用户名加密码,或者凭手机验证码登录.当然现在许多APP为了获取更多的 ...
【单点登录】禅道实现三方免密登录
禅道实现三方免密登录需求: 目前开发的业务系统中需要实现点击按钮直接跳转到禅道系统并登录禅道,在禅道的官网中找到了对应的API接口,特此实现一下代码禅道官网: API说明链接:禅道三方免密登录AP ...

免密登录驾考网使用selenium自动爬取模拟试题

免密登录驾考网使用selenium自动爬取模拟试题相关推荐

最新文章

热门文章