数据分析中数据概览神器pandas

Numpy、Scipy、Pandas、Matlpotlib在数据分析工程师手里几乎都是必备的工具选项，每一个库都有他自己强势的领域，让人爱不释手，当然还有其他的很多库，这里没有去一一列举出来。

在我前面的博文里面有一篇文章详细地介绍了一个详细的数据分析挖掘流程，地址在这里，感兴趣的话可以去看看。

数据分析领域中有一个部分是很重要的，那就是数据探索，不同的人可能进行数据探索的角度、方法都不一样，今天这个文章就是想介绍一款工具，能够用一行代码就实现原始数据集的概览分析，这对于我们在尚未进行编码之前辅助我们了解数据集的分布等情况是很有帮助。

这款工具名叫：pandas_profiling，安装方式很简单，如下：

pip install pandas_profiling

用法如下：

结果如下：

默认是 Peasorn相关系数矩阵，也可以查看别的相关系数矩阵，如下：

上面的结果是在jupyter-notebook得到的，我们也可以将上述报告生成静态的html文件存储本地使用：

本文中我们使用到的数据集来源于国家空气监测总站里面的一段时间的数据，在单因子的分析结果里面我们可以看到，通过简单的数据概览，给出来的结果是：几个因为相关程度过高建议丢弃，当然这是数据概览模块给出来的直接计算结果，我们在实际使用的时候肯定也是需要考虑到具体的业务长场景的。

下面是整个使用到的数据集的可视化曲线：

记录学习了。

数据分析中数据概览神器pandas_profiling介绍相关推荐

Python数据分析中数据预处理：编码将文字型数据转换为数值型
[小白从小学Python.C.Java] [Python-计算机等级考试二级] [Python-数据分析] Python数据分析中数据预处理:编码将文字型数据转换为数值型选择题对于以下pyth ...
数据概览神器—Pandas-profiling
分析一个问题,从对样本进行探索开始.Python中有很多常用的数据分析函数,可以帮助我们对样本有一个初步的认识,比如describe()函数,可以很方便地生成每个变量的最大值.最小值.分位数等. ...
提取图中数据的神器→→→plot_digitizer
plot_digitizer 认识识图工具plot_digitizer 打开需要处理的图片并校准 1.file→open image file→选择需要出的图片 2.tools→calibrate p ...
【数据运营】数据分析中，文本分析远比数值型分析重要！（下）
本文是<数据分析中,文本分析远比数值型分析重要!>的下篇,以一个实际案例来聊文本分析在实际运营如何落地.行为脉络如下:先简要讲述文本分析的分支---情绪分析的基本原理,然后以亚马逊的Kin ...
数据分析中的统计概率_了解统计和概率：成为专家数据科学家
数据分析中的统计概率 Data Science is a hot topic nowadays. Organizations consider data scientists to be the Cr ...
数据分析与挖掘中常用Python库的介绍与实践案例
数据分析与挖掘中常用Python库的介绍与实践案例一.Python介绍现在python一词对我们来说并不陌生,尤其是在学术圈,它的影响力远超其它任何一种编程语言, 作为一门简单易学且功能强大的编程 ...
数据分析中如何清洗数据？
在数据分析中我们重点研究的是数据,但是不是每个数据都是我们需要分析的,这就需要我们去清洗数据,通过清洗数据,这样我们就能够保证数据分析出一个很好的结果,所以说一个干净的数据能够提高数据分析的效率,因此 ...
比较两组数据的差异用什么图更直观_芯片数据分析中常见的一些图的作用
今天给大家讲讲芯片数据分析中常见的一些图的作用,让大家伙儿知道它们在BB些啥. 箱式图(Box plot) 基因芯片的原始数据是需要进行标准化处理的,主要目的是消除由于实验技术(如荧光标记效率.扫描参 ...
android中intent放数据类型,Android Intent传递数据底层分析详细介绍
Android Intent传递数据底层分析详细介绍我们知道在Activity切换时,如果需要向下一个ActivityB传递数据,可以借助Intent对象的putExtra方法. 但是不知各位有没 ...
（数据科学学习手札32）Python中re模块的详细介绍
一.简介关于正则表达式,我在前一篇(数据科学学习手札31)中已经做了详细介绍,本篇将对Python中自带模块re的常用功能进行总结: re作为Python中专为正则表达式相关功能做出支持的模块,提供 ...

数据分析中数据概览神器pandas_profiling介绍

数据分析中数据概览神器pandas_profiling介绍相关推荐

最新文章

热门文章