Jsoup实现java模拟登陆

1:如何获取cookies。
1.1:由于需要登录,故先模拟登陆时的那一个<form>,这里用map来装载变量名称,变量值。
Map<String, String> map = new HashMap<String, String>();
map.put("username", username);
map.put("pwd", md5.getMD5ofStr(password));
map.put("imgcode", "");
map.put("f", "json");
具体一个map要如何赋值,需要玩家自己去分析网页,找到网页中登陆的form,然后看所需的值。
1.2:httpclient的包有很多,这里我用了一个开源包Jsoup-1.7.1.jar,这一个开源包,(其实比较建议先去学习httpclient这个包的使用,因为那个包才是最基础的,其他所有的开源包应该都是在这一个的基础上进行改进的),jsoup包中一个类Connection,这个是关键的类,请求都是通过它进行的。
代码:
Connection conn = Jsoup.connect(LOGIN_URL);
conn.header("(Request-Line)", "POST /cgi-bin/login?lang=zh_CN HTTP/1.1");
conn.header("Accept", "application/json, text/javascript, */*; q=0.01");
conn.header("Accept-Encoding", "gzip, deflate");
conn.header("Accept-Language", "zh-cn");
conn.header("Cache-Control", "no-cache");
conn.header("Connection", "Keep-Alive");
conn.header("Content-Type", "application/x-www-form-urlencoded; charset=UTF-8");
conn.header("Host", "mp.weixin.qq.com");
conn.header("Referer", "https://mp.weixin.qq.com/");
conn.header("User-Agent", "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0; MALC)");
Response response = conn.ignoreContentType(true).method(Method.POST).data(map).execute();
可以看出,首先要找到登陆时的LOGIN_URL,这一个要自己去分析网页源码,好像有什么爬虫技术,不过我还没学,构造一个Connection conn对象,对象的构造需要传入一个url,接着是对conn进行假装为浏览器的模拟,即conn.header(),
里面具体要对什么值进行呢,这个哟根据实际情况,有时候可能要求没有那么严格,总之"Host","Referer","User-Agent"是一定要的,然后,让已经模拟为浏览器的conn,开始发起请求,
Response response = conn.ignoreContentType(true).method(Method.POST).data(map).execute();
可以看出,conn要调用data()方法,导入登陆表单的值map,method(method.post)还是get方法呢?这个其实是要尝试的,一般登陆都是post方法,没有发送数据请求,单纯只是点点网页的一般是get方法,总之post不行了,就试试get吧,最后调用execute()后开始执行,返回一个response类型的值,这个response里面cookies的值,以及一些返回的信息。(response返回的是一个网页,同时还有网页看不出来的cookies)
1.3:cookies可以当成事一种继承map的数据类型,即为{变量名=值  变量名=值 }这样的形式,
Map<String, String> cookies = response.cookies();
这里定义一个Map类型的值来装载cookies。这里就获取到cookies的值了?
//不知道为什么,代码里面还有下面的部分???????进一步来获取cookies?
//难道这一个cookies的值是被弃用的,难道不能用?????
//可是,下面也是调用response.cookies()方法来获取cookies的值。
//原来,下面的代码是用来获取TOKEN的值!!!!!
1.4:如何获取TOKEN的值呢?
String json=response.body();
//很明显可以看出,TOKEN的值在body里面,这里将response的body提取出来后,得到一个字符串类型的json,里面包含了TOKEN,其实我们自己就可以进行提取其中为TOKEN的变量的值了,不懂的可以直接打印出json的值,其实也不长,提取关键字的值只是基本够而已了,但是这里用了一个叫gson-2.2.2.jar的包,来帮助我们进行提取。
1.5:用gson来提取关键字的值 代码:
WeiXinResponse weiXinResponse=gson.fromJson(json, WeiXinResponse.class);
gson.fromJson需要2个值,一个是json,一个是类A,且返回值也是类A,而类A只是一个由单纯的setter,gettet组成的类,类A中的值为什么呢?这里就需要自己通过打印json来确定变量名了。
然后得到的类A就可以方便我们调用gettet来获取TOKEN了,就是这样。
上面是cookies的值的获取。
关于获取cookies的值后,又该如何利用该cookies的值来进行页面的访问呢?
2:准备条件:url,cookie
就只是这么2个,cookies的值已经通过登录获取并保存下来了,以后要用的时候可以直接使用cookies的值。
url就是你要访问的页面。
2.1:同样的,访问页面还是使用jsoup包中的connecion对象。
2.2:
Document document = Jsoup.connect(FANS_URL).cookies(cookie).get();
这里还小心的是,有时候get方法会得不到内容,那就改为post方法吧。
以后也是这样,get()还是post()不是可预测的,我们只能试试。
2.3:得到一个document的对象。
我比较喜欢
System.out.println(document.outerHtml());
答应出整个页面,就可以看看我们是否访问成功了。
2.4:如何在一个页面中获取我们想要的值呢?
我是喜欢分析页面,然后看值在的是哪一种标签,一般都是在
<script>这种类型的标签里面的:
Elements  cai = document.getElementsByTag("script");
得到很多个Element组成的Elements,通过cai.size()可以知道有几个这样的
标签。
2.5:
int position=0;
for(int b=0;b<cai.size();b++) {
if(cai.get(b).data().contains("groupsList") == true) {
position = b;
}
}
Element dr =document.getElementsByTag("script").get(position);
然后,我选取我要的<script>中,独一无二的一个关键字,groupsList,这样就能够
获得那个我们要的<script>了。
2.6:接下来就是在一个<script>中获取我们要的值。
String json = dr.data();
String [] s = json.split("\\s+");
将<script>转为字符型,并以空格为分隔符进行分隔。
2.7:
进一步分析script,以提取包含id的那一部分字符串,得到temp2
String temp2="";
for(int i=0;i<s.length;i++) {
//System.out.println(s[i]);
if(s[i].contains("id")== true) {
//System.out.println("In "+i);
temp2 =temp2+s[i];
}
}
2.8:
String fakeidstr = "";
int check2 = 0;
for(int jh=0;jh<temp2.length();jh++) {
if(temp2.charAt(jh)>=48&&temp2.charAt(jh)<=57) {
if(check2 == 0) {
fakeidstr = fakeidstr+"*";
}
fakeidstr = fakeidstr+temp2.charAt(jh);
check2 = 1;
}
else {
check2 =0;
}
}
这里我要的是数字,而且数字的长度要长于4.
总结:
1:知道如何获取cookies
2:知道如何利用cookies去进一步访问页面
3:知道怎样在页面中获取自己要的值

转载于:https://www.cnblogs.com/zfswff/p/4960214.html

Jsoup实现java模拟登陆相关推荐

  1. 233网校java_java辅导:使用java模拟登陆考试大

    java辅导:使用java模拟登陆考试大 2009年1月5日来源:233网校网校课程 在线题库评论 分享到 public static void loginexamda() { URL url = n ...

  2. java 模拟登陆exe_Java简单模拟登陆和爬虫实例---博客园老牛大讲堂

    鉴于有人说讲的不清楚,我这里再详细补充一下:更新日期:2017-11-23 本片文章适合初学者,只简单说了一下爬虫怎么用,和一个简单的小实例.不适合你的就可以不看了.----博客园老牛大讲堂 1.什么 ...

  3. java模拟登陆_java-模拟登陆练习(示例代码)

    package com.day5.test; import java.util.Scanner; public class Test1 { /** * @param args * 需求:模拟登陆,给三 ...

  4. java 模拟登陆 post_Java开发网 - 高手帮忙啊 (如何用java模拟post方式进行登陆论坛?)...

    于 2003-05-03 02:51 请教高手 我如何用java模拟post方式进行登陆论坛? 我先 URLConnection uc=htpurl.openConnection(); uc.setD ...

  5. java模拟登陆教务系统_Java模拟登录高校教务系统

    模拟登陆部分代码: 本次使用HttpClient 4.3进行开发, 该版本与之前的代码写法风格相差较大, 大家多留意下.需导入Jar包:commons-logging-1.1.3.jar / http ...

  6. java模拟登陆正方教务管理系统

    学了java后想设计一个在线提交活动中心使用申请的web网站,但问题是学生身份的验证.开始时是设想每年爬取一次全校学生信息,但速度太慢了,而且学号的规律也不清楚.然后想到借用教务管理系统自带的验证功能 ...

  7. Java模拟登陆微博获取cookie+使用微博图床api上传图片

    前言 Wbp4j 前排安利以下使用java完成的基于微博图床api实现的一个上传图片的小轮子,然后里面也有完整的代码可以查看,欢迎戳一下~ 传送门 目的 因为最近个人小项目里需要上传图片,看着自己的1 ...

  8. java 模拟登陆web系统_关于java模拟登陆WEB的问题。

    该楼层疑似违规已被系统折叠 隐藏此楼查看此楼 import java.io.BufferedReader; import java.io.IOException; import java.io.Inp ...

  9. java模拟登陆系统_Java模拟登录系统抓取内容【转载】

    1 @Component2 public class Login extendsBaseJobs {3 4 SimpleDateFormat sdf = new SimpleDateFormat(&q ...

最新文章

  1. 基于SSM实现的奶茶店会员管理系统
  2. 光流 | 特征光流之视频中物体检测一(论文分享)
  3. C++Runge-Kutta龙格-库塔法求非线性常微分方程的解(附完整源码)
  4. 计算机硬件存储器,个人计算机的存储器系统 说说内核与计算机硬件结构(5)
  5. iphone自定义铃声
  6. 飞鸽传书,,尼玛察部,大地一片生机
  7. simpla是基于laravel5的php,一个基于laravel5.1的后台
  8. 100多个很有用的JavaScript函数以及基础写法大集合
  9. http 回应头的闷事
  10. PHP 微信网页授权开发
  11. 洛谷刷题C语言:第一次,第二次,成交!、Bessie‘s Secret Pasture S、金币、Bookshelf B、东南西北
  12. 通过ahocorasick快速构建一棵actree(AC自动机)
  13. JavaScript---网络编程(9-1)--DHTML技术演示(2-1)-表格创建的几种方式
  14. 天翎携手群晖助力电商行业文档管理
  15. 美国 转专业 计算机,​转专业申请计算机硕士,美国这些学校供你选择
  16. “悟空”来也!未上市就签几亿订单,看优必选机器人梦想的超级路径
  17. 英文邮件 —— 祝贺应聘成功
  18. CentOs安装字体(解决aspose word 中文乱码问题)
  19. AWS EKS 添加IAM用户角色
  20. c语言怎么判断常量合不合法_50K大牛告诉你,没有任何编程基础,到底应该怎么自学C语言...

热门文章

  1. 用FileInputStream和FileOutputStream实现文件复制粘贴
  2. [AaronYang]C#人爱学不学[6]
  3. 22.Silverlight使用WebService调用C++,Delphi编写的DLL文件
  4. 系统集成资质-信息系统项目管理师考试综合介绍
  5. 用 HTML 格式导出 Excel 时,如何保留显示网格线
  6. sqlite配置选项
  7. java异常网,Java异常实践事项
  8. 1035. 插入与归并(25)-浙大PAT乙级真题
  9. Perl 简单读写XML 文件
  10. 直播间搭建项目——延续直播发展趋势