【数据竞赛】盘点Kaggle中常见的AutoEDA工具库

2024-06-06 18:36:36

在完成竞赛和数据挖掘的过程中，数据分析一直是非常耗时的一个环节，但也是必要的一个环节。

能否使用一个工具代替人来完成数据分析的过程呢，现有的AutoEDA工具可以一定程度上完成上述过程。本文将盘点常见的AutoEDA工具，欢迎收藏转发。

Pandas Profiling

https://pandas-profiling.github.io/pandas-profiling/docs/master/index.html

Pandas Profiling是款比较成熟的工具，可以直接传入DataFrame即可完成分析过程，将结果展示为HTML格式，同时分析功能也比较强大。

功能：字段类型分析、变量分布分析、相关性分析、缺失值分析、重复行分析
耗时：较少

AutoViz

https://github.com/AutoViML/AutoViz

AutoViz是款美观的数据分析工具，在进行可视化的同时将结果保存为图片格式。

功能：相关性分析、数值变量箱线图、数值变量分布图
耗时：较多

Dataprep

https://dataprep.ai/

Dataprep是款比较灵活也比较强大的工具，也是笔者最喜欢的。它可以指定列进行分析，同时也可以在Notebook中进行交互式分析。

功能：字段类型分析、变量分布分析、相关性分析、缺失值分析、交互式分析。
耗时：较多

SweetViz

https://github.com/fbdesignpro/sweetviz

SweetViz是款强大的数据分析工具，可以很好的分析训练集和测试集，以及目标标签与特征之间的关系。

功能：数据集对比分析、字段类型分析、变量分布分析、目标变量分析
耗时：中等

D-Tale

https://github.com/man-group/dtale

D-Tale是款功能最为强大的数据分析工具，对单变量的分析过程支持比较好。

功能：字段类型分析、变量分布分析、相关性分析、缺失值分析、交互式分析。
耗时：中等

往期精彩回顾适合初学者入门人工智能的路线及资料下载机器学习及深度学习笔记等资料打印机器学习在线手册深度学习笔记专辑《统计学习方法》的代码复现专辑
AI基础下载黄海广老师《机器学习课程》视频课黄海广老师《机器学习课程》711页完整版课件

本站qq群955171419，加入微信群请扫码：

【数据竞赛】盘点Kaggle中常见的AutoEDA工具库相关推荐

【机器学习】盘点Kaggle中常见的AutoML工具库及用法
在日常的Kaggle比赛和工作中,经常会遇到AutoML工具.本文总结了常见的AutoML库,可供大家选择. LightAutoML 项目链接:https://github.com/sberbank- ...
盘点数据挖掘中常见的5种 AutoEDA 工具
大家好,我们都知道在数据挖掘的过程中,数据探索性分析一直是非常耗时的一个环节,但也是绕不开的一个环节. 我们能否使用一些自动化工具代替人来完成数据分析的过程呢,现有一些成熟的 AutoEDA 工具可以 ...
【数据竞赛】Kaggle竞赛如何保证线上线下一致性？
作者: 尘沙樱落.杰少.新峰.谢嘉嘉.DOTA.有夕验证策略设计这是一个系列篇,后续我们会按照我们第一章中的框架进行更新,因为大家平时都较忙,不会定期更新,如有兴趣欢迎长期关注我们的公众号,如有任 ...
大数据竞赛平台——Kaggle 入门
大数据竞赛平台--Kaggle 入门篇这篇文章适合那些刚接触Kaggle.想尽快熟悉Kaggle并且独立完成一个竞赛项目的网友,对于已经在Kaggle上参赛过的网友来说,大可不必耗费时间阅读本文.本 ...
【数据竞赛】Kaggle实战之特征工程篇-20大文本特征（下）
作者:尘沙杰少.樱落.新峰.DOTA.谢嘉嘉特征工程--文本特征下半篇! 前言这是一个系列篇,后续我们会按照我们第一章中的框架进行更新,因为大家平时都较忙,不会定期更新,如有兴趣欢迎长期关注我们 ...
【数据竞赛】Kaggle实战之特征工程篇-20大文本特征（上）
作者:尘沙杰少.樱落.新峰.DOTA.谢嘉嘉特征工程--文本特征上半篇! 前言这是一个系列篇,后续我们会按照我们第一章中的框架进行更新,因为大家平时都较忙,不会定期更新,如有兴趣欢迎长期关注我们 ...
【数据竞赛】Kaggle实战之单类别变量特征工程总结！
作者:尘沙杰少.樱落.新峰.DOTA.谢嘉嘉特征工程--类别变量完结篇! 前言这是一个系列篇,后续我们会按照我们第一章中的框架进行更新,因为大家平时都较忙,不会定期更新,如有兴趣欢迎长期关注我们 ...
【数据竞赛】kaggle竞赛宝典-样本组织篇！
作者: 尘沙杰少.樱落.谢嘉嘉.DOTA.有夕样本筛选.样本组织之样本组织部分这是一个系列篇,后续我们会按照我们第一章中的框架进行更新,因为大家平时都较忙,不会定期更新,如有兴趣欢迎长期关注我们的 ...
【数据竞赛】Kaggle神技：一项堪比Dropout的NN训练技巧！
↑↑↑关注后"星标"kaggle竞赛宝典 kaggle竞赛宝典作者:杰少 Swap Noise: 一种论文中所没有的NN神技 01 背景本文介绍一种论文中所没有,但是却效果极佳 ...

最新文章

热门文章