当前位置:首页 > 娱乐星闻

001122专题之Power Query 百度实时高速拥堵路况数据

#高速拥挤#

在11号高速公路上堵车已经不是新闻了,但出发前要检查路况。否则高速堵塞会很不方便。

百度推出的节假日出行仪表板中就有全国高速拥堵情况的数据。如果你选中其中一条高速就会显示拥堵的路段:

我们今天就来测试一下抓取高速实时拥堵路况数据。

网站分析

在谷歌浏览器检查中找到roadrank这一行:

这就是我们需要高速拥堵排行数据,点选一条高速再找到highwayroadinfo这一行:

就是具体的高速拥堵路径点。

以上两组数据都是jsoncallback,我们只要提取括号中的内容就能做json格式分析。

试抓:

大家有没有发现,地图上提供的各种数据,好像都比较容易抓取,没有那么多的验证,希望百度这个数据也是这样。

果然这样,连时间戳都不用修改,就能直接抓,太方便了。

路径点数据也是一样的。

接下来的就是数据展开与整理,拥堵排名数据里有个日期时间的整理值得说一下:

我们要把字符串格式的日期时间转换成日期时间格式:

Da([data_time],8,"T"))

我们要在202010071130中间添加一个T变成这样20201007T1130,这样就可以被Da函数识别了。

路径数据整理涉及到一个逆透视排列经纬度的工作,就是要添加索引,用MOD,INT函数来处理编号,然后再透视就可以了:

要有两列0101的列与001122的列,然后用0101列做透视,就排好了:

定义函数

全国的数据太多,我们要抓取某省份的数据,就要通过省份的编号来抓取:

省份编号列表在一个js文件中:

也是json格式,直接复制出来就可以了。

我们测试一下抓取广东数据:

定义路径点函数:

同样做一个测试:

抓取

我们要在第一个函数引用结果之上抓取各条高速的路径点数据然后展开:

展开数据:

把这份数据加载,做一个图出来:


几条小蚯蚓,慢慢爬行。

1.《001122专题之Power Query 百度实时高速拥堵路况数据》援引自互联网,旨在传递更多网络信息知识,仅代表作者本人观点,与本网站无关,侵删请联系页脚下方联系方式。

2.《001122专题之Power Query 百度实时高速拥堵路况数据》仅供读者参考,本网站未对该内容进行证实,对其原创性、真实性、完整性、及时性不作任何保证。

3.文章转载时请保留本站内容来源地址,https://www.lu-xu.com/yule/2030283.html

上一篇

【1.11111E+14】专题6条笑话:那位是冀E11111跑车的主人,希望您能去后面挪一下车

下一篇

1.11111E+14,干货看这篇!苏州最牛的10个靓号,没顶级豪车,便宜的仅3万,回头率不输跑车

001122,干货看这篇!Power Query 百度实时高速拥堵路况数据

  • 001122,干货看这篇!Power Query 百度实时高速拥堵路况数据
  • 001122,干货看这篇!Power Query 百度实时高速拥堵路况数据
  • 001122,干货看这篇!Power Query 百度实时高速拥堵路况数据

001122看这里!2019各地高中省内/全国排名发布!重高和普高的区别到底在哪里

  • 001122看这里!2019各地高中省内/全国排名发布!重高和普高的区别到底在哪里
  • 001122看这里!2019各地高中省内/全国排名发布!重高和普高的区别到底在哪里
  • 001122看这里!2019各地高中省内/全国排名发布!重高和普高的区别到底在哪里

关于001122我想说2019各地高中省内/全国排名发布!重高和普高的区别到底在哪里

  • 关于001122我想说2019各地高中省内/全国排名发布!重高和普高的区别到底在哪里
  • 关于001122我想说2019各地高中省内/全国排名发布!重高和普高的区别到底在哪里
  • 关于001122我想说2019各地高中省内/全国排名发布!重高和普高的区别到底在哪里
001122,干货看这篇!鹏华弘利混合:基金合同生效公告

001122,干货看这篇!鹏华弘利混合:基金合同生效公告

001122相关介绍,鹏华弘利柔性混合型证券投资基金合同生效公告。 公告提交日期:2015年3月13日 1.公告基本信息 基金名称彭华宏利灵活分配混合证券投资基金 基金被称为鹏华弘利混合。 基金主代码鹏华弘利混合A类336...

【001122】专题鹏华弘利混合:基金合同生效公告

【001122】专题鹏华弘利混合:基金合同生效公告

001122相关介绍,鹏华弘利柔性混合型证券投资基金合同生效公告。 公告提交日期:2015年3月13日 1.公告基本信息 基金名称彭华宏利灵活分配混合证券投资基金 基金被称为鹏华弘利混合。 基金主代码鹏华弘利混合A类336...