学Python也有段时间了,目前学到了Python的类。个人感觉Python的类不应称之为类,而应称之为数据类型,只是数据类型而已!只是数据类型而已!只是数据类型而已!重要的事情说三篇。

据书上说一个.py(常量、全局变量、函数、数据类型)文件为一个模块,那么就有了一种感觉:常量、全局变量、函数、数据类型是同一“级别的”。在此不多说了,收回自己的心思来看爬虫吧!

1、进百合网官网

单击“搜索”、单击“基本搜索”,这时会跳向另一个页面,该页面为登录页面(如图):

2、找到login.js,具体步骤:F12、F5、network、js(如图):

3、找登录时的异步请求,该请求在login.js中(如图):

4、单击“基本搜索”,会得到两个异步请求

1:获取160个id (如图):

2:根据id得到用户详细信息,为json数据(如图):

说了这么多,该上代码了(总共261行):

在此我就分享一下 所需要用到的模块

  • requests
  • time
  • pymssql

想获取源码,可以关注微信公众号:

python爬虫 爬取百合网的女人们和男人们相关推荐

  1. 在当当买了python怎么下载源代码-python爬虫爬取当当网

    [实例简介]python爬虫爬取当当网 [实例截图] [核心代码] ''' Function: 当当网图书爬虫 Author: Charles 微信公众号: Charles的皮卡丘 ''' impor ...

  2. python爬虫爬取当当网的商品信息

    python爬虫爬取当当网的商品信息 一.环境搭建 二.简介 三.当当网网页分析 1.分析网页的url规律 2.解析网页html页面 书籍商品html页面解析 其他商品html页面解析 四.代码实现 ...

  3. python爬虫爬取知网

    python爬虫爬取知网 话不多说,直接上代码! import requests import re import time import xlrd from xlrd import open_wor ...

  4. [python爬虫]爬取天气网全国所有县市的天气数据

    [python爬虫]爬取天气网全国所有县市的天气数据 访问URL 解析数据 保存数据 所要用到的库 import requests from lxml import etree import xlwt ...

  5. Python爬虫爬取东方财富网的股票信息

    简单的Python爬虫应用 目标:爬取东方财富网的股票信息 1.先找到要爬取的网页 2.第二步开始爬取信息 2.1 通过requests获取网页信息 2.2再通过BeautifulSoup解析: 2. ...

  6. python爬虫爬取慕课网中的图片

    我们简单地爬取慕课网中免费课程下的第一页的图片,如想爬取多页图片,可以添加for循环自行实现 python版本:3.6.5 爬取网址:http://www.imooc.com/course/list ...

  7. python爬虫爬取东方财富网股票走势+一些信息

    一.目标 我们的目标是爬取东方财富网(https://www.eastmoney.com/)的股票信息 我的目标是爬取100张股票信息图片 经过实际测试我的爬取范围为000001-000110,000 ...

  8. [Python爬虫]爬取东方财富网公司公告需要注意的几个问题

    在上一篇文章中,以爬取东方财富网公司公告为例,介绍了如何爬取利用ajax加载的网页,以及如何模拟翻页.但是,在实际应用的过程中,发现了一些问题.接下来就来一一分析解决. 问题一.公告数量过多,后面的公 ...

  9. python爬虫-爬取当当网书籍信息存到Excel中

    文章目录 一.任务 二.分析 (一).单页面的信息分析 源代码分析 目标信息定位与分析 代码设计 (二).所有目标页面链接分析 目标链接分析 代码设计 三.注意要点 四.完整代码 五.参考 一.任务 ...

  10. python 爬虫 爬取当当网图书信息

    初次系统的学习python,在学习完基本语法后,对爬虫进行学习,现在对当当网进行爬取,爬取了基本图书信息,包括图书名.作者等 import requests from time import slee ...

最新文章

  1. 北京实习总结——记住牛人那些话
  2. Hadoop Eclipse开发环境设置
  3. 【新星计划】Linux命令行相关指令汇总
  4. java如何把文件中的内容存到一个动态数组arraylist中_如何动态地向Java中的数组添加项目?...
  5. 电脑删除快捷键_可能是知乎最有用的 Windows 快捷键学习指南。
  6. 创建虚拟目录http://localhost:1780/失败,错误:无法访问iis元数据库。您没用足够的特权访问计算机上的IIS网站...
  7. 协程分析之 context 上下文切换
  8. 随机搜索和网格搜索以优化函数
  9. 【Ansible】非完全离线安装Ansible和Ansible-tower
  10. java里面有radix树吗_基数树(radix tree)
  11. Jay的小迷弟-字符串溢出处理取模例题
  12. 安装好office套件以后,右键新建中没有Word、Excel、PPT等怎么办
  13. 暖风机家用最好的牌子 适合家用大面积的暖风机哪种好
  14. SolidWorks的通过函数驱动绘制曲线
  15. 检讨书应该怎么写,我来做个示范
  16. Cast-Designer Weld人工智能参与的多道焊工艺参数设计
  17. LCM/OLED模组点灯检测设备
  18. 电脑开机自动登录,断网自动重连以及桌面联网小程序
  19. sql列转行逗号连接_SQL行转列,逗号隔开
  20. python自然语言处理书籍_自然语言处理有哪些可以推荐的书?

热门文章

  1. LightBulb – 保护视力,自动根据时间调整显示器伽马值
  2. 【组合数学】多项式定理 ( 多项式系数 | 多重集全排列 | 对应放球子模型方案数 | 多项式系数相关恒等式 )
  3. 求两条轨迹间的hausdorff距离_【每周三题】高二【136】分子间作用力和分子势能...
  4. 使用Fiddler抓取安卓手机APP链接
  5. java调用本地打印机,绘制打印模板,小票模板
  6. Internet Explorer无法打开站点,已终止操作
  7. Ckeditor5 整合Ckfinder3 防出错实战教程(二)整合篇
  8. sql server case when then else end as 用法
  9. 计算机原理(3)主板上的CPU,存储器,南桥北桥等的总结
  10. nulls first和nulls last