前几天发现了一个很有趣的包——openair,可以将年度时间序列刻画成周年日历热图,感觉这种形式非常适合用于呈现年度空气质量可视化,所以抓空爬了一些大连市2016年年度空气质量数据拿来玩玩,目标网站网页结构比较简单,爬取过程很轻松,界面部分很规律,感觉这个代码可以作为模板用,感兴趣的小伙伴儿可以试着玩一玩!
+ +
|
|
###数据爬取过程:
+构造月度url地址(网站是按照月度数据存储的,需要按月爬取)
以上过程也可先通过观察大连市的月度空气质量url地址规律,然后通过paste函数直接生成。
+
|
|
这是简单粗暴的方式,但是不保证任何网址都可以使用
+先写完一个看下具体情况
+
|
|
编写单次爬取函数,使用for循环遍历网址进行数据获取(原谅我又用了for循环)
使用动态表格查看数据
++备份一份数据,以防原数据损坏
+
1 mytableb<-mytable
###调整时间变量
AQI指数年度分布日力图
PM2.5指数年度分布日力图
###使用ggplot函数制作同样的日力图
这次使用lubridate包来处理时间日期变量(超级好用)
AQI指数为污染级别以上的天数分布
PM2.5指数为污染级别以上的天数分布
大体来看,大连整个2016年度污染天气相对来讲,还算是挺良心的,跟帝都比起来要好很多。AQI和PM2.5在污染级别以上的天数不超过两个月。
+###时间维度考察
+接下来呢,我们做一些详细的统计工作,具体就是从时间细分维度来查看季度、月度、周度等平均AQI、PM2.5指数分布情况
首选查看五个污染级别在2016年度出现的频率:
基于季度空气质量平均水平分布图:
基于月度空气质量平均水平分布图:
基于月度空气质量平均水平分布图:
从以上周度AQI平均指标上来看,大连市2016年度的周度平均AQI指数大部分周都在100以下,看到这个感觉生活在大连还是蛮幸福的,看着北上的小伙伴儿隔三差五的在朋友圈晒人间仙境也是一件很有趣的事哈哈!
++
联系方式:
wechat:ljty1991
Mail:578708965@qq.com
个人公众号:数据小魔方(datamofang)
团队公众号:EasyCharts
qq交流群:[魔方学院]298236508
个人简介:
杜雨
财经专业研究僧;
伪数据可视化达人;
文科背景的编程小白;
喜欢研究商务图表与地理信息数据可视化,爱倒腾PowerBI、SAP DashBoard、Tableau、R ggplot2、Think-cell chart等诸如此类的数据可视化软件,创建并运营微信公众号“数据小魔方”。
Mail:578708965@qq.com
+
备注信息:
本作品采用知识共享署名-非商业性使用 4.0 国际许可协议