最近朋友在苦学英文，但是又不知道自己学的怎么样了，直到有一天，他找到了扇贝网，里面有个“评估你的单词量”功能非常的好，就推荐给我了！

今天我们就用python做一个小的爬虫，然后自己写一个脚本来实现这个功能吧！

目标：打造一个英文词汇量测试脚本

url：扇贝网

工具：python3.6、pycharm、requests库

思路：

和网页一样，总共分三步:

先来看看网页中数据，用F12开发者工具抓包就可以

为了更好的演示，这里网页缩小了。

点击开始，在来看看出现了什么

这里我们抓到了一个包，这个json数据中包含了所有的类别或者说是级别，一共十大类，我们点击”响应”验证下

可以看到，显示内容在我们抓到的json数据中，但是0和1中的内容有的一样，有的不一样是什么鬼？不要急，我们先选择‘高考’，在抓下包看看

选择高考后，网页直接给出了第二步，50个单词选择，注意，先看下抓到的json数据的真实地址

还记得我们在第一步抓到的包吗？0里面就是这个真实地址最后的category的值，1里面是对应的显示在网页中的内容，好了，第二步的真实url也被我们找到规律了，那下来就是分析单词了，看看有什么规律，我们点开一个看看

有几个值非常重要，也是我们的目标：

Content的值是显示的单词

Definition_choices是需要我们判断的多个词义，中间包含有正确的词义，每个词义中的rank值应该是该词义的标识

rank值是正确的词义，也由此判断上述多个词义中的正确词义

ok，到这里我们就可以开始写代码了，具体过程就不一一说明了，没有反爬，全部是json数据的读取和判断，先放上我的代码

请大家忽略我那渣渣的英语水平和排版

由于这个网站非常简单，仅仅抓包就可以得到所有数据，没有任何反爬，所以，也是我们新手练手的好地方，大家都可以试试,如果有作出更漂亮的脚本，欢迎大家在评论区一起分享！

学python要有多少英语词汇量测试_非常适合新手的一个Python爬虫项目: 打造一个英文词汇量测试脚本!...相关推荐

  1. python英语词汇量测试_非常适合新手的一个Python爬虫项目: 打造一个英文词汇量测试脚本!...

    最近朋友在苦学英文,但是又不知道自己学的怎么样了,直到有一天,他找到了扇贝网,里面有个"评估你的单词量"功能非常的好,就推荐给我了! 今天我们就用python做一个小的爬虫,然后自 ...

  2. 非常适合新手的一个Python爬虫项目: 打造一个英文词汇量测试脚本!

    最近朋友在苦学英文,但是又不知道自己学的怎么样了,直到有一天,他找到了扇贝网,里面有个"评估你的单词量"功能非常的好,就推荐给我了! 今天我们就用python做一个小的爬虫,然后自 ...

  3. python新手练习项目_最适合新手练习的Python小项目！还是有难度的！用了五天整理...

    要想实现web服务器,首先要明白web服务器应该具备怎样的功能:比如说浏览器发送了http请求(GET或POST),服务器要首先接收客户端发送的TCP请求,与之建立链接,然后接收http请求,解析并响 ...

  4. python难不难学-超级适合新手学习的python教程，入门其实不难？

    在互联网时代很多人都希望掌握一个与互联网相关的知识,比如Python的知识就非常重要,因为无论是操作新媒体平台还是去制作一些软件,我们都需要掌握一些Python的技巧,而且学习一些Python的知识, ...

  5. python基础教程第二版和第三版哪个好-python基础教程 2版和3版哪个适合新手？!...

    python基础教程 2版和3版哪个适合新手? 现在学是学python3. 两者的差异发者本身影响并不大,个别语法细微的差比如python3的print数方式使用,一些常用模块的名称差异,一些机制的差 ...

  6. python基础教程第三版和第二版选哪个-python基础教程 2版和3版哪个适合新手？!...

    python基础教程 2版和3版哪个适合新手? 现在学是学python3. 两者的差异发者本身影响并不大,个别语法细微的差比如python3的print数方式使用,一些常用模块的名称差异,一些机制的差 ...

  7. 学python要有多少英语词汇量测试_“扫地僧”！自学Python编程、英语词汇量15000……北大保安再上热搜...

    原标题:"扫地僧"!自学Python编程.英语词汇量15000--北大保安再上热搜 近日, 北大保安再次冲上热搜, 让不少网友惊了! 在北京大学第一届 "争做数一数二的保 ...

  8. 学python要有多少英语词汇量_“扫地僧”！自学Python编程、英语词汇量15000……北大保安再上热搜...

    原标题:"扫地僧"!自学Python编程.英语词汇量15000--北大保安再上热搜 近日, 北大保安再次冲上热搜, 让不少网友惊了! 在北京大学第一届 "争做数一数二的保 ...

  9. python爬虫英文单词_非常适合新手的一个Python爬虫项目：打造一个英文词汇量测试脚本...

    最近朋友在苦学英文,但是又不知道自己学的怎么样了,直到有一天,他找到了扇贝网,里面有个"评估你的单词量"功能非常的好,就推荐给我了! 今天我们就用python做一个小的爬虫,然后自 ...

最新文章

  1. 【译】 WebSocket 协议第十一章——IANA 注意事项（IANA Considerations）
  2. Spring+SpringMvc+Hibernate 框架搭建
  3. intel 汇编中断解释
  4. Python.exe下载太慢怎么办？
  5. Jdbc访问mysql查询聚合函数_JDBC连接参数设置对Oracle数据库的影响分析
  6. 使用代码获得Hybris Commerce里显示的产品图片
  7. profile matlab,使用profile功能对Matlab性能调优
  8. java开发平台普元_java开发平台的两种实现模式
  9. 73页PPT，教你从0到1构建用户画像系统（附下载）
  10. java实体类中有枚举类型_实体类的枚举属性--原来支持枚举类型这么简单，没有EF5.0也可以...
  11. dz3.0数据库操作函数分析说明
  12. STM32Cube IDE环境安装
  13. 努力是为了让自己不平庸
  14. 软件工程——初识文档
  15. 抖音小店入驻条件及费用最新版，2022抖音开店，商家入门指南
  16. 移动端css动态字体大小fontSize rem
  17. 添加自定义MIB的三种方法
  18. nodemcu 智能插座
  19. 2020年11月9日
  20. 当你心态不好的时候，可以看看这些句子。Reset your Brain!

热门文章

  1. 直播丨数据库上云趋势下，如何面对海量数据迁移及落地实践-2021云和恩墨大讲堂...
  2. 主备库内存不一致的Data Guard环境搭建全过程
  3. Oracle/云MySQL/MsSQL“大迁移”真相及最优方案
  4. 应用传送网络(ADN)：率先架起“东数西算”的“高速公路”
  5. Kubernetes实战：高可用集群的搭建和部署
  6. 测试攻城狮必备技能点！一文带你解读DevOps下的测试技术
  7. Spark优化之小文件是否需要合并?
  8. 全面拥抱 FastApi — 多应用程序项目结构规划
  9. 【鲲鹏来了】手把手教你创造一个属于自己的鲲鹏开发者环境
  10. 初识弹性文件服务：可靠的共享文件存储