python和perl绘制中国北京跑步地图的方法

当你在一个城市,穿越大街小巷,跑步跑了几千公里之后,一个显而易见的想法是,我到底和之前比快了多少,跑量有何变化,如果能把在这个城市的所有路线全部画出来,会是怎样的景象呢?

1.数据来源:益动gps

文章代码比较多,为了不吊人胃口,先看看最终效果:

[/code]

首先需要有原始数据信息,手机上众多跑步软件提供了详细的记录,但它们共同的问题是不允许自由导入导出(可能是为了用户粘性吧)。因此有一块智能运动手表应该是不二之选。我的是garmin fenix3,推荐一下:

益动gps算是业界良心了,能够同步咕咚,garmin手表,悦跑圈的数据,因此我将其作为一个入口,抓取所有的gps数据。

至于如何同步,可参考网站上的相关介绍,下面是我登录该网站后的截图:

http://edooon.com/user/5699607196/record/15414378

随便点进去以后,就可以看到导出路线的按钮:

无比坑爹的是,它不提供批量导出的按钮,几百条记录,依次导出都累死了。于是考虑用代码来编辑吧。

2. 获取益动网站上的数据

登录之后,可以看出它是动态加载,当滚轮滚到最下时,自动加载后面的内容。本来是应该嗅探和分析http请求的,后来懒惰了。当拖到底,全部加载完毕后,保存了当前的html文件。

接下来就是解析这个html,基本上是通过xpath的来做的。有经验的同学看了下图就都明白了:

图中高亮的部分,就是要下载gpx文件的实际地址。我们将其保存在urllist中。同时,元数据被保存在json文件里。

folder = u’d:/buptzym的同步盘/百度云/我的文档/数据分析/datasets/rungps/’;
cookie=’jsessionbuptzym@qq.com”; __utma=54733311.82935663.1447906150.1447937410.1456907433.7; __utmb=54733311.5.10.1456907433; __utmc=54733311; __utmz=54733311.1456907433.7.3.utmcsr=baidu|utmccn=(organic)|utmcmd=organic; cookie_site=auto’
user;
f = codecs.open(folder + ‘desert.htm’, ‘r’, ‘utf-8’);
html = f.read();
f.close();
root = etree.html(html)
tree = etree.elementtree(root);
listnode=tree.xpath(‘//*[@]’);
numre=re.compile(u’骑行|跑步|公里|,|耗时|消耗|大卡’);
urllists=[]
records=[];
for child in listnode[0].iterchildren():
record={};
temp=child.xpath(‘p[2]/p[1]/a[2]’)
if len(temp)==0:
continue;
source= temp[0].attrib[‘href’];
record[‘id’]=source.split(‘/’)[-1];
info=temp[0].text;
numinfo= numre.split(info);
if len(numinfo)

Posted in 未分类

发表评论