点击上方“菜鸟学Python”，选择“星标”公众号
超级无敌干货，第一时间送达！！！
探索性数据分析是数据科学模型开发和数据集研究的重要组成部分之一。在拿到一个新数据集时首先就需要花费大量时间进行EDA来研究数据集中内在的信息。自动化的EDA Python包可以用几行Python代码执行EDA。在本文中整理了10个可以自动执行EDA并生成有关数据的见解的Python包，看看他们都有什么功能，能在多大程度上帮我们自动化解决EDA的需求。
DTale
Pandas-profiling
sweetviz
autoviz
dataprep
KLib
dabl
speedML
datatile
edaviz
1、D-Tale
D-Tale使用Flask作为后端、React前端并且可以与ipython notebook和终端无缝集成。D-Tale可以支持Pandas的DataFrame, Series, MultiIndex, DatetimeIndex和RangeIndex。
importdtaleimportpandasaspddtale.show(pd.read_csv("titanic.csv"))
D-Tale库用一行代码就可以生成一个报告，其中包含数据集、相关性、图表和热图的总体总结，并突出显示缺失的值等。D-Tale还可以为报告中的每个图表进行分析，上面截图中我们可以看到图表是可以进行交互操作的。
2、Pandas-Profiling
Pandas-Profiling可以生成Pandas DataFrame的概要报告。panda-profiling扩展了pandas DataFrame df.profile_report()，并且在大型数据集上工作得非常好，它可以在几秒钟内创建报告。
#Installthebelowlibariesbeforeimportingimportpandasaspdfrompandas_profilingimportProfileReport#EDAusingpandas-profilingprofile=ProfileReport(pd.read_csv('titanic.csv'),explorative=True)#SavingresultstoaHTMLfileprofile.to_file("output.html")
3、Sweetviz
Sweetviz是一个开源的Python库，只需要两行Python代码就可以生成漂亮的可视化图，将EDA(探索性数据分析)作为一个HTML应用程序启动。Sweetviz包是围绕快速可视化目标值和比较数据集构建的。
importpandasaspdimportsweetvizassv#EDAusingAutovizsweet_report=sv.analyze(pd.read_csv("titanic.csv"))#SavingresultstoHTMLfilesweet_report.show_html('sweet_report.html')
Sweetviz库生成的报告包含数据集、相关性、分类和数字特征关联等的总体总结。
4、AutoViz
Autoviz包可以用一行代码自动可视化任何大小的数据集，并自动生成HTML、bokeh等报告。用户可以与AutoViz包生成的HTML报告进行交互。
importpandasaspdfromautoviz.AutoViz_ClassimportAutoViz_Class#EDAusingAutovizautoviz=AutoViz_Class().AutoViz('train.csv')
5、Dataprep
Dataprep是一个用于分析、准备和处理数据的开源Python包。DataPrep构建在Pandas和Dask DataFrame之上，可以很容易地与其他Python库集成。
DataPrep的运行速度这10个包中最快的，他在几秒钟内就可以为Pandas/Dask DataFrame生成报告。
fromdataprep.datasetsimportload_datasetfromdataprep.edaimportcreate_reportdf=load_dataset("titanic.csv")create_report(df).show_browser()
6、Klib
klib是一个用于导入、清理、分析和预处理数据的Python库。
importklibimportpandasaspddf=pd.read_csv('DATASET.csv')klib.missingval_plot(df)
klib.corr_plot(df_cleaned,annot=False)
klib.dist_plot(df_cleaned['Win_Prob'])
klib.cat_plot(df,figsize=(50,15))
klibe虽然提供了很多的分析函数，但是对于每一个分析需要我们手动的编写代码，所以只能说是半自动化的操作，但是如果我们需要更定制化的分析，他是非常方便的。
7、Dabl
Dabl不太关注单个列的统计度量，而是更多地关注通过可视化提供快速概述，以及方便的机器学习预处理和模型搜索。
dabl中的Plot()函数可以通过绘制各种图来实现可视化，包括:
目标分布图
散点图
线性判别分析
importpandasaspdimportdabldf=pd.read_csv("titanic.csv")dabl.plot(df,target_col="Survived")
8、Speedml
SpeedML是用于快速启动机器学习管道的Python包。SpeedML整合了一些常用的ML包，包括 Pandas，Numpy，Sklearn，Xgboost 和 Matplotlib，所以说其实SpeedML不仅仅包含自动化EDA的功能。
SpeedML官方说，使用它可以基于迭代进行开发，将编码时间缩短了70％。
fromspeedmlimportSpeedmlsml=Speedml('../input/train.csv','../input/test.csv',target='Survived',uid='PassengerId')sml.train.head()
sml.plot.correlate()
sml.plot.distribute()
sml.plot.ordinal('Parch')
sml.plot.ordinal('SibSp')
sml.plot.continuous('Age')
9、DataTile
DataTile（以前称为Pandas-Summary）是一个开源的Python软件包，负责管理，汇总和可视化数据。DataTile基本上是PANDAS DataFrame describe（）函数的扩展。
importpandasaspdfromdatatile.summary.dfimportDataFrameSummarydf=pd.read_csv('titanic.csv')dfs=DataFrameSummary(df)dfs.summary()
10、edaviz
edaviz是一个可以在Jupyter Notebook和Jupyter Lab中进行数据探索和可视化的python库，他本来是非常好用的，但是后来被砖厂(Databricks)收购并且整合到bamboolib 中，所以这里就简单的给个演示。
总结
在本文中，我们介绍了10个自动探索性数据分析Python软件包，这些软件包可以在几行Python代码中生成数据摘要并进行可视化。通过自动化的工作可以节省我们的很多时间。
Dataprep是我最常用的EDA包，AutoViz和D-table也是不错的选择，如果你需要定制化分析可以使用Klib，SpeedML整合的东西比较多，单独使用它啊进行EDA分析不是特别的适用，其他的包可以根据个人喜好选择，其实都还是很好用的，最后edaviz就不要考虑了，因为已经不开源了。
来源丨数据STUDIO
推荐阅读:入门:最全的零基础学Python的问题 |零基础学了8个月的Python|实战项目|学Python就是这条捷径干货:爬取豆瓣短评，电影《后来的我们》|38年NBA最佳球员分析| 从万众期待到口碑扑街！唐探3令人失望 |笑看新倚天屠龙记|灯谜答题王｜用Python做个海量小姐姐素描图｜碟中谍这么火，我用机器学习做个迷你推荐系统电影趣味:弹球游戏 |九宫格 |漂亮的花|两百行Python《天天酷跑》游戏!AI:会做诗的机器人|给图片上色|预测收入|碟中谍这么火，我用机器学习做个迷你推荐系统电影小工具:Pdf转Word，轻松搞定表格和水印！|一键把html网页保存为pdf！|再见PDF提取收费！|用90行代码打造最强PDF转换器，word、PPT、excel、markdown、html一键转换|制作一款钉钉低价机票提示器！｜60行代码做了一个语音壁纸切换器天天看小姐姐！｜
年度爆款文案
1).卧槽！Pdf转Word用Python轻松搞定！
2).学Python真香！我用100行代码做了个网站，帮人PS旅行图片，赚个鸡腿吃
3).首播过亿，火爆全网，我分析了《乘风破浪的姐姐》，发现了这些秘密
4).80行代码！用Python做一个哆来A梦分身
5).你必须掌握的20个python代码，短小精悍，用处无穷
6).30个Python奇淫技巧集
7).我总结的80页《菜鸟学Python精选干货.pdf》,都是干货
8).再见Python！我要学Go了！2500字深度分析！
9).发现一个舔狗福利！这个Python爬虫神器太爽了，自动下载妹子图片
点阅读原文，看B站我的视频！
