前言

对于很多人来说，拥有一个漂亮的女朋友是一件非常幸福的事情。知乎上就有一个非常热门的话题，叫做有个漂亮女朋友是种怎样的体验？，在知乎上阅读量已经达到了2.2亿的阅读量，受到了十万多人的关注。

小编今天就带领大家去抓取并分析一下这个话题下的回答者的一些内容，感受一下拥有一个漂亮的女朋友是种怎样的体验。

Python爬虫、数据分析、网站开发等案例教程视频免费在线观看

https://space.bilibili.com/523606542

Python学习交流群：1039649593

01.如何爬取

对于数据的获取，我们需要构建特定的知乎数据接口，就能够获取得到回答者的回答内容。对于数据接口的获取，如下图所示：

大家只需要在开发者模式下的network中打开XHR选项，然后找到以anwsers开头的json数据内容。可以看到数据中包含了回答者的评论内容等信息，接下来大家只需要复制接口的链接，然后利用程序来向接口请求数据即可。大家可能感觉接口十分的复杂，该如何去构造呢？其实并不是特别的复杂，小编在程序中已经为大家构造好了请求链接，程序如下图所示:

程序中，通过for循环来不断的构造数据的接口，接口中包含了include、limit、offset等关键词，大家想要抓取其他回答的数据时，只需要更改不同问题的数字索引部分，例如下下述链接中的数字部分：

https://www.zhihu.com/api/v4/questions/28997505/answers?

程序通过self.get_json函数，来获取接口返回的json数据。并通过self.get_comments函数来解析json数据，提取数据。self.get_comments如下图所示:

在self.get_comments函数中，通过BeautifulSoup库来解析json数据中的html文件，从而获取回答者的回答内容，并抓取回答者上传的图片内容。同时在json数据中，可以直接解析获得回答者的姓名、性别等内容信息。

运行上述的程序后，一共得到了3600+的回答者内容信息，得到的信息如下：

02.对数据进行挖掘

在得到数据信息后，接下来我们对于大家的回答来进行简单的分析，看看从中能够得到哪些启发。

1).性别分析

在对回答内容进行抓取的时候，小编发现在回答者性别的分布中，并不只是清一色的男生，通过可视化我们来更加直观的感受一下回答者的性别分布是如何的。

程序首先通过内置库collections中的Counter类来统计回答者的性别，然后通过饼形图来进行可视化展示。

通过上图可以看到，在这个题目的回答者中，除去未知性别的回答者，虽然男生以压倒性的比例占据了绝大多数，但是女生回答者仍旧占到了8.38%的比例。

2).点赞数和评论数

我们知道，点赞和评论的数量越多，则代表了一个回答者回答内容受到了更多读者的赞同和支持。接下来，我们以点赞数量对所有的内容进行排序。看看点赞数量前十名中，点赞和评论数量的分布情况。

上图中，柱状图代表的是评论数量的分布，其纵坐标参考左侧的坐标轴，而线型图则是代表着点赞数量的分布，其纵坐标参考右侧的坐标轴。从图中可以看出，汤家云野的那个汤和郑正两位回答者获得了最多的评论数量，但是同“汤家云野的那个汤”获得高点赞数不同，”郑正“获得了较少的点赞的数量。

3).词云的分布

而针对大家的回答内容，则更能展现出来大家真实的体验和感受，我们通过词云的展示，来看一下大家的关键词都有哪些？

程序中，首先利用jieba库将大家的回答进行分词处理，然后利用stylecould库进行词云的可视化展示。

可以看到大家的词云中，关键词包含女朋友、漂亮、好看、喜欢、我们等内容，小编真的是越看越酸。

4).谁是最佳回答者

对于谁是最佳的回答者，知乎已经给出了我们答案，这个问题最上方的回答者——汤家云野的那个汤，无论从点赞数量还是评论数量，都是最多的，理应获得最佳回答者。作者非常走心的描述了自己的女朋友，不单单是外表上的美，更重要的是心灵美，多才多艺，会书法，会做菜。

5).谁是晒图狂魔

在众多的回答者中，很多人都晒出了自己和女朋友的照片，这些人里面究竟谁晒的图片最多，谁是晒图狂魔呢，一起来看看吧。

程序根据不同的回答者的名字创建专属的文件夹，然后将回答者晒的图片全部都抓取出来，并保存到了特定的文件夹中。

经过统计之后，发现名字叫速溶猩猩的用户呢，在这个问题上一共晒出了127张图片，成为了十足的晒图狂魔，至于该用户所晒得图片呢，大家可以去看一下，这里小编就不做过多的评论啦。

有个漂亮女朋友是种怎样的体验？爬取知乎2.2亿的阅读量的话题相关推荐

平常人可以漂亮到什么程度？教你爬取知乎大神们的回答一探究竟！
大家好,今天才哥带大家看看知乎这个高达14.3万关注,2.6亿浏览,回答数超过1.27万的问题<平常人可以漂亮到什么程度?>. 最近呢,可能是因为写了几篇关于爬虫获取美女照片的文章的缘故? ...
python爬取知乎话题：日常穿jk制服是怎样一种体验？下的所有图片
''' 第一次尝试python爬取图片,请多指正回答者的答案单独存放一个文件夹 ''' from urllib import request import math import requests ...
女生要不要去北航学计算机,在北航读书有个女朋友是种怎样的体验？
北航学生总体的男女比大概是3.5:1,而我在的软件学院更夸张,男女比达到了7:1以上.这么失调的男女比例,男生怎么脱单呢?这个问题,我航知名校友,歼十五总设计师,中国工程院院士孙聪在央视节目<开 ...
爬取了知乎2.2亿阅读量有漂亮女朋友是什么体验，结果发现...
对于很多人来说,拥有一个漂亮的女朋友是一件非常幸福的事情.知乎上就有一个非常热门的话题,叫做有个漂亮女朋友是种怎样的体验?,在知乎上阅读量已经达到了2.2亿的阅读量,受到了十万多人的关注. 小编今天就 ...
爬取了知乎2.2亿阅读量 “有漂亮女朋友是什么体验“，结果发现...
对于很多人来说,拥有一个漂亮的女朋友是一件非常幸福的事情.知乎上就有一个非常热门的话题,叫做有个漂亮女朋友是种怎样的体验?,在知乎上阅读量已经达到了2.2亿的阅读量,受到了十万多人的关注. 小编今天就 ...
python爬虫爬取图片代码_Python爬虫入门：批量爬取网上图片的两种简单实现方式——基于urllib与requests...
Python到底多强大,绝对超乎菜鸟们(当然也包括我了)的想象.近期我接触到了爬虫,被小小地震撼一下.总体的感觉就两个词--"强大"和"有趣".今天就跟大家分享 ...
python爬虫快速下载图片_Python爬虫入门：批量爬取网上图片的两种简单实现方式——基于urllib与requests...
Python到底多强大,绝对超乎菜鸟们(当然也包括我了)的想象.近期我接触到了爬虫,被小小地震撼一下.总体的感觉就两个词--"强大"和"有趣".今天就跟大家分享 ...
两种方式对boss直聘招聘岗位的爬取
上次留了个坑,采取两种方式对需要爬取的网站进行数据抓取.首先使用selenium+chromedriver进行抓取,这种方式速度慢,但是可以跳过各种反爬设置,并对各种反爬能够直接以网页的形式进行显示. ...
程序猿身边有个漂亮女程序媛~~~那是种什么样的体验？
今儿在我们极客吧的社群中,有个群友说跟妹子约在一起要去写代码,这样有动力~~~啊哈哈( ⊙ o ⊙ )!想必在互联网公司各位程序猿身边要是再有个漂亮的程序媛,总的来说,就是会游戏(部分),关注科技产品 ...

有个漂亮女朋友是种怎样的体验？爬取知乎2.2亿的阅读量的话题

前言

Python学习交流群：1039649593

01.如何爬取

02.对数据进行挖掘

有个漂亮女朋友是种怎样的体验？爬取知乎2.2亿的阅读量的话题相关推荐

最新文章

热门文章