python基础-17-数据分析python——pandas——

作者: 比特跃动 | 来源:发表于2019-03-30 12:13 被阅读0次

2019-10-12
python的pandas函数学习
python基础-17-数据分析python——pandas——
pandas简介
Python关于数据分析各种学习文章链接
Python爬虫数据分析三剑客：Numpy、pandas、Mat
Pandas 数据分析教程
Python 数据科学入门教程：Pandas
萝卜头学python:pandas 对EXCEL处理
Anaconda的安装和基本操作

本章内容包括：数据透视，目前已经将数据读取、清洗、合并讲完了

//input1
import pandas as pd
import numpy as np
position = pd.read_csv('DataAnalyst_utf.csv',encoding='utf')
position.head()


//output1

positionId  city    education   bottom  top avg workYear
0   2537336 上海  硕士  7   9   8.0 应届毕业生
1   2427485 上海  本科  10  15  12.5    应届毕业生
2   2511252 上海  本科  4   6   5.0 应届毕业生
3   2427530 上海  本科  6   8   7.0 应届毕业生
4   2245819 上海  本科  2   3   2.5 应届毕业生








//input2
position.pivot_table(index = ['city','education'],
                     columns = 'workYear',
                     values = ['avg','top'],
                     aggfunc = {'avg':np.mean,'top':np.sum})




//output2
avg top
workYear    1-3年    10年以上   1年以下    3-5年    5-10年   不限  应届毕业生   1-3年    10年以上   1年以下    3-5年    5-10年   不限  应届毕业生
city    education                                                       
上海  不限  12.666667   40.000000   6.250000    15.416667   18.500000   13.578125   NaN 287.0   50.0    15.0    240.0   71.0    558.0   NaN
博士  12.500000   NaN NaN NaN NaN 20.000000   NaN 32.0    NaN NaN NaN NaN 25.0    NaN
大专  10.790698   NaN 4.500000    17.466667   20.500000   5.541667    4.500000    584.0   NaN 11.0    984.0   175.0   83.0    5.0
本科  14.259657   38.750000   11.090909   20.539773   27.548246   9.757812    6.942308    4191.0  90.0    156.0   6809.0  3929.0  804.0   219.0
硕士  14.477273   22.500000   6.000000    20.800000   41.653846   9.566667    8.250000    407.0   30.0    7.0 406.0   690.0   182.0   60.0
北京  不限  15.133333   NaN 9.000000    21.021739   32.600000   13.563636   5.750000    578.0   NaN 69.0    625.0   213.0   944.0   29.0
博士  22.500000   NaN NaN 27.500000   NaN NaN NaN 30.0    NaN NaN 35.0    NaN NaN NaN
大专  9.734848    NaN 6.642857    17.956522   23.958333   9.920000    5.000000    806.0   NaN 60.0    1028.0  370.0   624.0   49.0
本科  16.162521   40.714286   8.125000    21.759542   28.147465   13.191748   7.270270    12477.0 350.0   121.0   21694.0 7617.0  3469.0  332.0
硕士  19.162791   60.000000   4.000000    25.280488   30.470588   11.618421   9.333333    1057.0  70.0    5.0 1330.0  630.0   564.0   105.0
南京  不限  6.500000    NaN NaN NaN 16.000000   3.000000    NaN 17.0    NaN NaN NaN 20.0    8.0 NaN
大专  9.875000    NaN NaN 14.000000   NaN 4.333333    7.500000    48.0    NaN NaN 53.0    NaN 16.0    9.0
本科  9.500000    NaN 3.750000    14.600000   22.125000   8.038462    7.500000    214.0   NaN 10.0    372.0   111.0   135.0   28.0
硕士  NaN NaN NaN 20.000000   NaN 12.200000   NaN NaN NaN NaN 25.0    NaN 80.0    NaN
厦门  不限  NaN NaN NaN NaN NaN 12.500000   NaN NaN NaN NaN NaN NaN 50.0    NaN
大专  7.900000    NaN NaN NaN NaN 4.000000    NaN 52.0    NaN NaN NaN NaN 10.0    NaN
本科  11.550000   NaN NaN 13.400000   NaN 11.250000   7.500000    147.0   NaN NaN 86.0    NaN 30.0    10.0
硕士  NaN NaN NaN NaN NaN 15.750000   NaN NaN NaN NaN NaN NaN 42.0    NaN
天津  不限  NaN NaN NaN NaN NaN 3.500000    NaN NaN NaN NaN NaN NaN 4.0 NaN
大专  6.000000    NaN NaN NaN NaN 4.000000    NaN 22.0    NaN NaN NaN NaN 5.0 NaN
本科  6.000000    NaN NaN 11.400000   17.500000   8.800000    3.000000    22.0    NaN NaN 72.0    20.0    55.0    4.0
广州  不限  5.000000    NaN NaN 13.833333   NaN 8.062500    NaN 6.0 NaN NaN 53.0    NaN 81.0    NaN
大专  8.440476    NaN NaN 12.750000   14.000000   5.633333    4.166667    442.0   NaN NaN 288.0   83.0    103.0   16.0
本科  12.274725   NaN 15.000000   15.493151   26.844828   6.727273    4.800000    1423.0  NaN 20.0    1429.0  977.0   280.0   29.0
硕士  10.500000   NaN NaN 8.666667    30.000000   25.000000   NaN 26.0    NaN NaN 33.0    40.0    30.0    NaN
成都  不限  NaN NaN 3.500000    17.750000   9.500000    9.000000    NaN NaN NaN 4.0 44.0    12.0    48.0    NaN
大专  8.083333    NaN 3.000000    13.375000   16.666667   6.000000    NaN 62.0    NaN 4.0 202.0   62.0    31.0    NaN
本科  10.470588   NaN NaN 14.930556   19.466667   11.750000   NaN 454.0   NaN NaN 680.0   364.0   179.0   NaN
硕士  5.500000    NaN NaN NaN 20.000000   NaN NaN 7.0 NaN NaN NaN 25.0    NaN NaN
杭州  不限  13.055556   NaN NaN 25.500000   30.000000   16.142857   10.500000   152.0   NaN NaN 259.0   40.0    147.0   14.0
大专  9.863636    NaN NaN 18.944444   NaN 8.200000    3.750000    411.0   NaN NaN 442.0   NaN 54.0    9.0
本科  12.723684   30.000000   6.500000    19.907692   25.000000   14.659091   9.437500    1862.0  40.0    16.0    3310.0  759.0   418.0   99.0
硕士  15.000000   NaN NaN 34.166667   25.000000   17.375000   11.500000   115.0   NaN NaN 130.0   120.0   86.0    15.0
武汉  不限  7.750000    NaN NaN 16.625000   16.500000   3.666667    NaN 20.0    NaN NaN 85.0    20.0    13.0    NaN
大专  6.833333    NaN NaN 13.357143   13.833333   1.500000    NaN 27.0    NaN NaN 122.0   50.0    2.0 NaN
本科  9.066667    NaN 3.500000    13.156250   17.500000   8.833333    3.500000    177.0   NaN 4.0 270.0   158.0   35.0    9.0
硕士  NaN NaN NaN NaN NaN 7.000000    NaN NaN NaN NaN NaN NaN 8.0 NaN
深圳  不限  11.500000   22.500000   8.000000    18.000000   21.333333   15.750000   3.500000    83.0    30.0    10.0    91.0    77.0    80.0    4.0
博士  NaN NaN NaN NaN NaN NaN 35.000000   NaN NaN NaN NaN NaN NaN 40.0
大专  10.625000   21.500000   NaN 14.416667   25.416667   9.323529    4.250000    376.0   25.0    NaN 430.0   568.0   190.0   31.0
本科  13.388393   30.000000   22.500000   20.436747   27.100000   12.681818   8.800000    1918.0  75.0    30.0    4370.0  2068.0  718.0   54.0
硕士  19.500000   NaN NaN 21.200000   25.000000   13.928571   NaN 104.0   NaN NaN 138.0   30.0    124.0   NaN
苏州  大专  10.000000   NaN NaN 14.333333   20.000000   NaN NaN 13.0    NaN NaN 55.0    25.0    NaN NaN
本科  11.875000   NaN NaN 13.666667   24.700000   8.333333    7.500000    119.0   NaN NaN 208.0   159.0   31.0    10.0
硕士  11.500000   NaN NaN NaN 27.500000   NaN NaN 30.0    NaN NaN NaN 35.0    NaN NaN
西安  不限  11.500000   NaN NaN NaN NaN 2.500000    NaN 15.0    NaN NaN NaN NaN 3.0 NaN
大专  5.500000    NaN NaN 11.250000   13.500000   4.000000    NaN 14.0    NaN NaN 54.0    15.0    16.0    NaN
本科  9.062500    NaN NaN 14.222222   19.750000   3.000000    7.500000    94.0    NaN NaN 165.0   98.0    8.0 9.0
硕士  5.000000    NaN NaN NaN NaN NaN NaN 6.0 NaN NaN NaN NaN NaN NaN
长沙  不限  9.750000    NaN NaN 7.500000    NaN 6.333333    NaN 23.0    NaN NaN 17.0    NaN 23.0    NaN
大专  NaN NaN NaN 13.500000   NaN NaN 4.500000    NaN NaN NaN 18.0    NaN NaN 6.0
本科  9.714286    NaN NaN 12.250000   10.500000   7.500000    NaN 88.0    NaN NaN 97.0    12.0    10.0    NaN
硕士  NaN NaN NaN 9.000000    NaN NaN NaN NaN NaN NaN 12.0    NaN NaN NaN