CategoryResourceRepost/极客时间专栏/数据分析实战45讲/第一模块:数据分析基础篇/15丨一次学会Python数据可视化的10种技能.md
louzefeng d3828a7aee mod
2024-07-11 05:50:32 +00:00

20 KiB
Raw Permalink Blame History

今天我来给你讲讲Python的可视化技术。

如果你想要用Python进行数据分析就需要在项目初期开始进行探索性的数据分析这样方便你对数据有一定的了解。其中最直观的就是采用数据可视化技术这样数据不仅一目了然而且更容易被解读。同样在数据分析得到结果之后我们还需要用到可视化技术把最终的结果呈现出来。

可视化视图都有哪些?

按照数据之间的关系我们可以把可视化视图划分为4类它们分别是比较、联系、构成和分布。我来简单介绍下这四种关系的特点

  • 比较:比较数据间各类别的关系,或者是它们随着时间的变化趋势,比如折线图;
  • 联系:查看两个或两个以上变量之间的关系,比如散点图;
  • 构成:每个部分占整体的百分比,或者是随着时间的百分比变化,比如饼图;
  • 分布:关注单个变量,或者多个变量的分布情况,比如直方图。
  • 同样,按照变量的个数,我们可以把可视化视图划分为单变量分析和多变量分析。

    单变量分析指的是一次只关注一个变量。比如我们只关注“身高”这个变量,来看身高的取值分布,而暂时忽略其他变量。

    多变量分析可以让你在一张图上可以查看两个以上变量的关系。比如“身高”和“年龄”,你可以理解是同一个人的两个参数,这样在同一张图中可以看到每个人的“身高”和“年龄”的取值,从而分析出来这两个变量之间是否存在某种联系。

    可视化的视图可以说是分门别类多种多样今天我主要介绍常用的10种视图这些视图包括了散点图、折线图、直方图、条形图、箱线图、饼图、热力图、蜘蛛图、二元变量分布和成对关系。

    下面我给你一一进行介绍。

    散点图

    散点图的英文叫做scatter plot它将两个变量的值显示在二维坐标中非常适合展示两个变量之间的关系。当然除了二维的散点图我们还有三维的散点图。

    我在上一讲中给你简单介绍了下Matplotlib这个工具在Matplotlib中我们经常会用到pyplot这个工具包它包括了很多绘图函数类似Matlab的绘图框架。在使用前你需要进行引用

    import matplotlib.pyplot as plt
    
    

    在工具包引用后画散点图需要使用plt.scatter(x, y, marker=None)函数。x、y 是坐标marker代表了标记的符号。比如“x”、“>”或者“o”。选择不同的marker呈现出来的符号样式也会不同你可以自己试一下。

    下面三张图分别对应“x”“>”和“o”。


    除了Matplotlib外你也可以使用Seaborn进行散点图的绘制。在使用Seaborn前也需要进行包引用

    import seaborn as sns
    
    

    在引用seaborn工具包之后就可以使用seaborn工具包的函数了。如果想要做散点图可以直接使用sns.jointplot(x, y, data=None, kind='scatter')函数。其中x、y是data中的下标。data就是我们要传入的数据一般是DataFrame类型。kind这类我们取scatter代表散点的意思。当然kind还可以取其他值这个我在后面的视图中会讲到不同的kind代表不同的视图绘制方式。

    好了让我们来模拟下假设我们的数据是随机的1000个点。

    import numpy as np
    import pandas as pd
    import matplotlib.pyplot as plt
    import seaborn as sns
    # 数据准备
    N = 1000
    x = np.random.randn(N)
    y = np.random.randn(N)
    # 用Matplotlib画散点图
    plt.scatter(x, y,marker='x')
    plt.show()
    # 用Seaborn画散点图
    df = pd.DataFrame({'x': x, 'y': y})
    sns.jointplot(x="x", y="y", data=df, kind='scatter');
    plt.show()
    
    

    我们运行一下这个代码就可以看到下面的视图第一张图为Matplotlib绘制的第二张图为Seaborn绘制的。其实你能看到Matplotlib和Seaborn的视图呈现还是有差别的。Matplotlib默认情况下呈现出来的是个长方形。而Seaborn呈现的是个正方形而且不仅显示出了散点图还给了这两个变量的分布情况。

    Matplotlib绘制

    Seaborn绘制

    折线图

    折线图可以用来表示数据随着时间变化的趋势。

    在Matplotlib中我们可以直接使用plt.plot()函数当然需要提前把数据按照x轴的大小进行排序要不画出来的折线图就无法按照x轴递增的顺序展示。

    在Seaborn中我们使用sns.lineplot (x, y, data=None)函数。其中x、y是data中的下标。data就是我们要传入的数据一般是DataFrame类型。

    这里我们设置了x、y的数组。x数组代表时间y数组我们随便设置几个取值。下面是详细的代码。

    import pandas as pd
    import matplotlib.pyplot as plt
    import seaborn as sns
    # 数据准备
    x = [2010, 2011, 2012, 2013, 2014, 2015, 2016, 2017, 2018, 2019]
    y = [5, 3, 6, 20, 17, 16, 19, 30, 32, 35]
    # 使用Matplotlib画折线图
    plt.plot(x, y)
    plt.show()
    # 使用Seaborn画折线图
    df = pd.DataFrame({'x': x, 'y': y})
    sns.lineplot(x="x", y="y", data=df)
    plt.show()
    
    

    然后我们分别用Matplotlib和Seaborn进行画图可以得到下面的图示。你可以看出这两个图示的结果是完全一样的只是在seaborn中标记了x和y轴的含义。

    直方图

    直方图是比较常见的视图它是把横坐标等分成了一定数量的小区间这个小区间也叫作“箱子”然后在每个“箱子”内用矩形条bars展示该箱子的箱子数也就是y值这样就完成了对数据集的直方图分布的可视化。

    在Matplotlib中我们使用plt.hist(x, bins=10)函数其中参数x是一维数组bins代表直方图中的箱子数量默认是10。

    在Seaborn中我们使用sns.distplot(x, bins=10, kde=True)函数。其中参数x是一维数组bins代表直方图中的箱子数量kde代表显示核密度估计默认是True我们也可以把kde设置为False不进行显示。核密度估计是通过核函数帮我们来估计概率密度的方法。

    这是一段绘制直方图的代码。

    import numpy as np
    import pandas as pd
    import matplotlib.pyplot as plt
    import seaborn as sns
    # 数据准备
    a = np.random.randn(100)
    s = pd.Series(a) 
    # 用Matplotlib画直方图
    plt.hist(s)
    plt.show()
    # 用Seaborn画直方图
    sns.distplot(s, kde=False)
    plt.show()
    sns.distplot(s, kde=True)
    plt.show()
    
    

    我们创建一个随机的一维数组然后分别用Matplotlib和Seaborn进行直方图的显示结果如下你可以看出没有任何差别其中最后一张图就是kde默认为Ture时的显示情况。

    条形图

    如果说通过直方图可以看到变量的数值分布,那么条形图可以帮我们查看类别的特征。在条形图中,长条形的长度表示类别的频数,宽度表示类别。

    在Matplotlib中我们使用plt.bar(x, height)函数其中参数x代表x轴的位置序列height是y轴的数值序列也就是柱子的高度。

    在Seaborn中我们使用sns.barplot(x=None, y=None, data=None)函数。其中参数data为DataFrame类型x、y是data中的变量。

    import matplotlib.pyplot as plt
    import seaborn as sns
    # 数据准备
    x = ['Cat1', 'Cat2', 'Cat3', 'Cat4', 'Cat5']
    y = [5, 4, 8, 12, 7]
    # 用Matplotlib画条形图
    plt.bar(x, y)
    plt.show()
    # 用Seaborn画条形图
    sns.barplot(x, y)
    plt.show()
    
    

    我们创建了x、y两个数组分别代表类别和类别的频数然后用Matplotlib和Seaborn进行条形图的显示结果如下

    箱线图

    箱线图又称盒式图它是在1977年提出的由五个数值点组成最大值(max)、最小值(min)、中位数(median)和上下四分位数(Q3, Q1)。它可以帮我们分析出数据的差异性、离散程度和异常值等。

    在Matplotlib中我们使用plt.boxplot(x, labels=None)函数其中参数x代表要绘制箱线图的数据labels是缺省值可以为箱线图添加标签。

    在Seaborn中我们使用sns.boxplot(x=None, y=None, data=None)函数。其中参数data为DataFrame类型x、y是data中的变量。

    # 数据准备
    # 生成10*4维度数据
    data=np.random.normal(size=(10,4)) 
    labels = ['A','B','C','D']
    # 用Matplotlib画箱线图
    plt.boxplot(data,labels=labels)
    plt.show()
    # 用Seaborn画箱线图
    df = pd.DataFrame(data, columns=labels)
    sns.boxplot(data=df)
    plt.show()
    
    

    这段代码中我生成0-1之间的10*4维度数据然后分别用Matplotlib和Seaborn进行箱线图的展示结果如下。

    Matplotlib绘制

    Seaborn绘制

    饼图

    饼图是常用的统计学模块可以显示每个部分大小与总和之间的比例。在Python数据可视化中它用的不算多。我们主要采用Matplotlib的pie函数实现它。

    在Matplotlib中我们使用plt.pie(x, labels=None)函数其中参数x代表要绘制饼图的数据labels是缺省值可以为饼图添加标签。

    这里我设置了labels数组分别代表高中、本科、硕士、博士和其他几种学历的分类标签。nums代表这些学历对应的人数。

    import matplotlib.pyplot as plt
    # 数据准备
    nums = [25, 37, 33, 37, 6]
    labels = ['High-school','Bachelor','Master','Ph.d', 'Others']
    # 用Matplotlib画饼图
    plt.pie(x = nums, labels=labels)
    plt.show()
    
    

    通过Matplotlib的pie函数我们可以得出下面的饼图

    热力图

    热力图英文叫heat map是一种矩阵表示方法其中矩阵中的元素值用颜色来代表不同的颜色代表不同大小的值。通过颜色就能直观地知道某个位置上数值的大小。另外你也可以将这个位置上的颜色与数据集中的其他位置颜色进行比较。

    热力图是一种非常直观的多元变量分析方法。

    我们一般使用Seaborn中的sns.heatmap(data)函数其中data代表需要绘制的热力图数据。

    这里我们使用Seaborn中自带的数据集flights该数据集记录了1949年到1960年期间每个月的航班乘客的数量。

    import matplotlib.pyplot as plt
    import seaborn as sns
    # 数据准备
    flights = sns.load_dataset("flights")
    data=flights.pivot('year','month','passengers')
    # 用Seaborn画热力图
    sns.heatmap(data)
    plt.show()
    
    

    通过seaborn的heatmap函数我们可以观察到不同年份不同月份的乘客数量变化情况其中颜色越浅的代表乘客数量越多如下图所示

    蜘蛛图

    蜘蛛图是一种显示一对多关系的方法。在蜘蛛图中,一个变量相对于另一个变量的显著性是清晰可见的。

    假设我们想要给王者荣耀的玩家做一个战力图指标一共包括推进、KDA、生存、团战、发育和输出。那该如何做呢

    这里我们需要使用Matplotlib来进行画图首先设置两个数组labels和stats。他们分别保存了这些属性的名称和属性值。

    因为蜘蛛图是一个圆形,你需要计算每个坐标的角度,然后对这些数值进行设置。当画完最后一个点后,需要与第一个点进行连线。

    因为需要计算角度所以我们要准备angles数组又因为需要设定统计结果的数值所以我们要设定stats数组。并且需要在原有angles和stats数组上增加一位也就是添加数组的第一个元素。

    import numpy as np
    import matplotlib.pyplot as plt
    import seaborn as sns
    from matplotlib.font_manager import FontProperties  
    # 数据准备
    labels=np.array([u"推进","KDA",u"生存",u"团战",u"发育",u"输出"])
    stats=[83, 61, 95, 67, 76, 88]
    # 画图数据准备,角度、状态值
    angles=np.linspace(0, 2*np.pi, len(labels), endpoint=False)
    stats=np.concatenate((stats,[stats[0]]))
    angles=np.concatenate((angles,[angles[0]]))
    # 用Matplotlib画蜘蛛图
    fig = plt.figure()
    ax = fig.add_subplot(111, polar=True)   
    ax.plot(angles, stats, 'o-', linewidth=2)
    ax.fill(angles, stats, alpha=0.25)
    # 设置中文字体
    font = FontProperties(fname=r"C:\Windows\Fonts\simhei.ttf", size=14)  
    ax.set_thetagrids(angles * 180/np.pi, labels, FontProperties=font)
    plt.show()
    
    

    代码中flt.figure是创建一个空白的figure对象这样做的目的相当于画画前先准备一个空白的画板。然后add_subplot(111)可以把画板划分成1行1列。再用ax.plot和ax.fill进行连线以及给图形上色。最后我们在相应的位置上显示出属性名。这里需要用到中文Matplotlib对中文的显示不是很友好因此我设置了中文的字体font这个需要在调用前进行定义。最后我们可以得到下面的蜘蛛图看起来是不是很酷

    二元变量分布

    如果我们想要看两个变量之间的关系,就需要用到二元变量分布。当然二元变量分布有多种呈现方式,开头给你介绍的散点图就是一种二元变量分布。

    在Seaborn里使用二元变量分布是非常方便的直接使用sns.jointplot(x, y, data=None, kind)函数即可。其中用kind表示不同的视图类型“kind='scatter'”代表散点图“kind='kde'”代表核密度图“kind='hex' ”代表Hexbin图它代表的是直方图的二维模拟。

    这里我们使用Seaborn中自带的数据集tips这个数据集记录了不同顾客在餐厅的消费账单及小费情况。代码中total_bill保存了客户的账单金额tip是该客户给出的小费金额。我们可以用Seaborn中的jointplot来探索这两个变量之间的关系。

    import matplotlib.pyplot as plt
    import seaborn as sns
    # 数据准备
    tips = sns.load_dataset("tips")
    print(tips.head(10))
    # 用Seaborn画二元变量分布图散点图核密度图Hexbin图
    sns.jointplot(x="total_bill", y="tip", data=tips, kind='scatter')
    sns.jointplot(x="total_bill", y="tip", data=tips, kind='kde')
    sns.jointplot(x="total_bill", y="tip", data=tips, kind='hex')
    plt.show()
    
    

    代码中我用kind分别显示了他们的散点图、核密度图和Hexbin图如下图所示。

    散点图:

    核密度图:

    Hexbin图

    成对关系

    如果想要探索数据集中的多个成对双变量的分布可以直接采用sns.pairplot()函数。它会同时展示出DataFrame中每对变量的关系另外在对角线上你能看到每个变量自身作为单变量的分布情况。它可以说是探索性分析中的常用函数可以很快帮我们理解变量对之间的关系。

    pairplot函数的使用就像在DataFrame中使用describe()函数一样方便,是数据探索中的常用函数。

    这里我们使用Seaborn中自带的iris数据集这个数据集也叫鸢尾花数据集。鸢尾花可以分成Setosa、Versicolour和Virginica三个品种在这个数据集中针对每一个品种都有50个数据每个数据中包括了4个属性分别是花萼长度、花萼宽度、花瓣长度和花瓣宽度。通过这些数据需要你来预测鸢尾花卉属于三个品种中的哪一种。

    import matplotlib.pyplot as plt
    import seaborn as sns
    # 数据准备
    iris = sns.load_dataset('iris')
    # 用Seaborn画成对关系
    sns.pairplot(iris)
    plt.show()
    
    

    这里我们用Seaborn中的pairplot函数来对数据集中的多个双变量的关系进行探索如下图所示。从图上你能看出一共有sepal_length、sepal_width、petal_length和petal_width4个变量它们分别是花萼长度、花萼宽度、花瓣长度和花瓣宽度。

    下面这张图相当于这4个变量两两之间的关系。比如矩阵中的第一张图代表的就是花萼长度自身的分布图它右侧的这张图代表的是花萼长度与花萼宽度这两个变量之间的关系。

    总结

    我今天给你讲了Python可视化工具包Matplotlib和Seaborn工具包的使用。他们两者之间的关系就相当于NumPy和Pandas的关系。Seaborn是基于Matplotlib更加高级的可视化库。

    另外针对我讲到的这10种可视化视图可以按照变量之间的关系对它们进行分类这些关系分别是比较、联系、构成和分布。当然我们也可以按照随机变量的个数来进行划分比如单变量分析和多变量分析。在数据探索中成对关系pairplot()的使用相好比Pandas中的describe()使用一样方便,常用于项目初期的数据可视化探索。

    在Matplotlib和Seaborn的函数中我只列了最基础的使用也方便你快速上手。当然如果你也可以设置修改颜色、宽度等视图属性。你可以自己查看相关的函数帮助文档。这些留给你来进行探索。

    关于本次Python可视化的学习我希望你能掌握

  • 视图的分类,以及可以从哪些维度对它们进行分类;
  • 十种常见视图的概念以及如何在Python中进行使用都需要用到哪些函数
  • 需要自己动手跑一遍案例中的代码体验下Python数据可视化的过程。
  • 最后我给你留两道思考题吧Seaborn数据集中自带了car_crashes数据集这是一个国外车祸的数据集你要如何对这个数据集进行成对关系的探索呢第二个问题就是请你用Seaborn画二元变量分布图如果想要画散点图核密度图Hexbin图函数该怎样写

    欢迎你在评论区与我分享你的答案,也欢迎点击“请朋友读”,把这篇文章分享给你的朋友或者同事,一起来动手练习一下。