印象中帝都的天气大多时候是雾霾天气,今天我们来看看帝都的天气到底怎么样吧
数据导入:
![](https://img.haomeiwen.com/i7729379/fcbdbe568869ffc8.png)
![](https://img.haomeiwen.com/i7729379/56fb019f2e259814.png)
为方便后面分析,这里将数据的列进行重新定义。
数据的详细信息:
![](https://img.haomeiwen.com/i7729379/8e9c7866153c78f7.png)
![](https://img.haomeiwen.com/i7729379/5b6c4a5e04ac4aab.png)
![](https://img.haomeiwen.com/i7729379/63977a4718701340.png)
可以看到这一年里数据缺失比较严重,这里对数据进行过滤,保持数据的真实性。
![](https://img.haomeiwen.com/i7729379/bbdd6f9684ff1b9c.png)
![](https://img.haomeiwen.com/i7729379/0204846659cff99f.png)
![](https://img.haomeiwen.com/i7729379/5c8fcf4c93c61a56.png)
2015的数据比较完整,这里就不对数据进行进一步的处理了。
![](https://img.haomeiwen.com/i7729379/ae9facff18781187.png)
这里看到2016年的数据缺失较少,我们使用fillna不去数据缺失的地方。
![](https://img.haomeiwen.com/i7729379/b0f0b31960d0f158.png)
![](https://img.haomeiwen.com/i7729379/e417744610226c72.png)
以上2017的数据缺失也较为严重,这里也使用dropna删除数据缺失的行。
![](https://img.haomeiwen.com/i7729379/d54ca794927c3f2a.png)
将数据清理之后,我们将四年的数据合并成一个数据进行分析。
![](https://img.haomeiwen.com/i7729379/c97ab7766dcc2aad.png)
这里我们看到数据的索引是无序的,我们对数据的索引稍微处理一下。
![](https://img.haomeiwen.com/i7729379/8b1435297fff5435.png)
再来查看数据合并之后的详细信息。
![](https://img.haomeiwen.com/i7729379/7ae4c25a2946b926.png)
数据进行清理合并之后只有1094行了,白白除掉那么多数据还是有点肉痛啊。
数据可视化:
![](https://img.haomeiwen.com/i7729379/62a91895d9959a40.png)
![](https://img.haomeiwen.com/i7729379/370da244acbc7b1b.png)
![](https://img.haomeiwen.com/i7729379/68284447beac4783.png)
可能大多数人对PM2.5更为熟悉,这里就使用了PM2.5与各数据进行可视化分析。从上面的视图中可以发现,除了O3,其他各项指标和PM2.5都有一定的正相关。让我们用数据的均值来更直接表示各年数据的变化情况。
![](https://img.haomeiwen.com/i7729379/c59c2cf34066e28d.png)
数据均值的可视化:
![](https://img.haomeiwen.com/i7729379/9332f2c5bfdac05d.png)
从上面可以明显看到,AQI和PM2.5的变化轨迹较为相似,除了O3最后表现为增加之外,其他指标最后的变化都和AQI较为相似。而神奇的是AQI 指数居然变小了,什么鬼?难道帝都的天气渐渐变好了么。。。我有点不相信自己的眼睛。O3指数这几年越来越高,是与全球变暖有关吗?
![](https://img.haomeiwen.com/i7729379/22f834f937d9681c.png)
![](https://img.haomeiwen.com/i7729379/610ffa0453b682ca.png)
不知道是不是箱图太小,感觉各数据变化不太明显,好了我们用置信区间来看看吧。
95%的置信区间:
先定义置信区间
![](https://img.haomeiwen.com/i7729379/236b2587271ef8d2.png)
先求各年AQI指标的置信区间:
![](https://img.haomeiwen.com/i7729379/cb7acba29f1ced9e.png)
这里看到四年的AQI 指标的置信区间各有交接,貌似AQI 指标变化不太明显。
假设检验AQI指标是否发生明显的改变:
![](https://img.haomeiwen.com/i7729379/ead184536ef58bbe.png)
貌似这几年的AQI 确实没有发生明显的变化。
![](https://img.haomeiwen.com/i7729379/65df1f5359d6a8e3.png)
2014年与2017年的置信区间已有间段,这里用假设检验检验PM10的指标是否发生明显的改变。
![](https://img.haomeiwen.com/i7729379/febc6b15f4d1f41c.png)
p_value<0.01,这里PM10确实发生了明显的改变。
![](https://img.haomeiwen.com/i7729379/8483566171a97766.png)
![](https://img.haomeiwen.com/i7729379/e20101010f5dda85.png)
![](https://img.haomeiwen.com/i7729379/c07bbe96cf09ab12.png)
![](https://img.haomeiwen.com/i7729379/57bf3abc5c0f5587.png)
![](https://img.haomeiwen.com/i7729379/1926f08445016964.png)
![](https://img.haomeiwen.com/i7729379/040a8173e2c45d33.png)
![](https://img.haomeiwen.com/i7729379/19fe7f1cf85f3b8b.png)
![](https://img.haomeiwen.com/i7729379/61e05a3106f6670d.png)
![](https://img.haomeiwen.com/i7729379/15786a0b1bbdcbc2.png)
![](https://img.haomeiwen.com/i7729379/5dbd4ad34231024e.png)
结合置信区间和假设检验来看,PM10,NO2,SO2,O3确实发生了明显的改变。而AQI,PM2.5和CO的p_value>0.05,不能断定是否发生了明显的变化。
检测各指标之间的相关关系:
由于2014年与2015年的数据较为完整,这里用2014年的数据和2015年的数据来画散点图。
![](https://img.haomeiwen.com/i7729379/8ce2800307041711.png)
![](https://img.haomeiwen.com/i7729379/c8f339f968d82e6c.png)
![](https://img.haomeiwen.com/i7729379/17bb4e20d1c6ae87.png)
![](https://img.haomeiwen.com/i7729379/491c9964c6bab8a8.png)
![](https://img.haomeiwen.com/i7729379/cf380162bb70277b.png)
![](https://img.haomeiwen.com/i7729379/2c4913e92d33fef2.png)
![](https://img.haomeiwen.com/i7729379/e029c09a3ff4516b.png)
![](https://img.haomeiwen.com/i7729379/520934c2d6e32732.png)
![](https://img.haomeiwen.com/i7729379/e35571729716337d.png)
AQI指标与PM2.5指标的相关性越来越强,PM2.5的指标与AQI指标的变化有很大的正相关性。(从上面的折线图中可以印证这一说法,PM2.5的折线变化几乎和AQI变化一致)都开始怀疑自己分析的准确性了,明明这两年PM2.5指标越来越火热的啊。。。。
接下来分析AQI与气体污染物的相关关系:
![](https://img.haomeiwen.com/i7729379/ebf5dc8420a79ced.png)
![](https://img.haomeiwen.com/i7729379/58527f8b12849507.png)
![](https://img.haomeiwen.com/i7729379/519153a8bbe5070c.png)
![](https://img.haomeiwen.com/i7729379/54e6246397a94fdd.png)
![](https://img.haomeiwen.com/i7729379/d609862607035fce.png)
![](https://img.haomeiwen.com/i7729379/c23a60ea1a174446.png)
![](https://img.haomeiwen.com/i7729379/279b31c740c1b62b.png)
![](https://img.haomeiwen.com/i7729379/779428e878b1c38f.png)
![](https://img.haomeiwen.com/i7729379/2477fce138c3504f.png)
![](https://img.haomeiwen.com/i7729379/a0f5c7bfb89a3ae6.png)
![](https://img.haomeiwen.com/i7729379/91659e902a449a06.png)
![](https://img.haomeiwen.com/i7729379/a9e024ae4446832a.png)
这里AQI与NO2和CO有较强的相关性,与SO2的相关性较弱,与O3呈现负相关性
![](https://img.haomeiwen.com/i7729379/3f23699b18dc7f3a.png)
PM2.5与NO2和CO也有较强的相关性,与SO2的相关性较弱,与O3呈现负相关性,再次印证了前面的结论。
判断是否具有显著的相关性:
![](https://img.haomeiwen.com/i7729379/c46b27d2b74327c4.png)
![](https://img.haomeiwen.com/i7729379/ba001eda4a9cfb92.png)
![](https://img.haomeiwen.com/i7729379/883787bdeceb903c.png)
![](https://img.haomeiwen.com/i7729379/ef3cd1fea662822d.png)
AQI 与PM10,PM2.5,NO和NO2都具有较强的相关性,与SO2的相关稍微弱一点,与O3呈负相关。下面看看O3与其他气体污染物的显著相关性。
![](https://img.haomeiwen.com/i7729379/4eeec480db3bc70f.png)
可以看到O3与其他污染物呈显著的负相关性,也在一次印证,其他气体污染物与AQI有较强的相关性。
AQI指数为0-50,空气质量级别为一级,空气质量状况属于优。
AQI指数为51-100,空气质量级别为二级,空气质量状况属于良。
AQI指数为101-150,空气质量级别为三级,空气质量状况属于轻度污染。
AQI指数为151-200,空气质量级别为四级,空气质量状况属于中度污染。
AQI指数为201-300,空气质量级别为五级,空气质量状况属于重度污染。
AQI指数为大于300,空气质量级别为六级,空气质量状况属于严重污染。
结论:
1.AQI 指数明显降低,从2017年AQI指数折线图波动情况来看,今年的AQI指数波动幅度相比往年降低。往年多数时候是重度污染,也有严重污染的时候,而今年从AQI指数变化来看空气指数均在200以下,处于轻度污染和中度污染的阶段。北京今年的空气质量真的变好了么?(怎么还是有点不愿意相信呢)
2.AQI指数与PM2.5具有较强的相关性,从AQI指数便变化情况可知道PM2.5的变化情况。
3.空气中的SO2,CO,NO2与AQI也具有较强的相关性,这个合情合理,毕竟AQI表示空气质量的好坏,空气质量越好,空气中的污染物气就越少。
4.O3与AQI呈现负相关性(百度了下,好像现在科学界还没有搞清楚他们两为什么呈现这种关系,但是臭氧本身就是衡量AQI的要素之一,降低AQI和降低O3才是最终的目标,他们并不是此消彼长的关系)
网友评论