获取高德地图省市区县列表
转载自:http://blog.csdn.net/xjbclz/article/details/52305084
项目中需要用省市区来进行检索,原想高德地图肯定会有API来获得这些数据,结果没有找到,有一个接口好像可以用,但是会附带大量的边界坐标点。
所以就不如自己把高德的省市区列表扒下来,自己写接口来完成这个功能。
看到高德地图的js的demo里面有这样的展示页面:http://lbs.amap.com/api/JavaScript-api/example/u/2001-2/,所以我就直接利用它来分析。
1. 省列表
省的列表是直接写死在这个界面里的,所以我也照搬,把省都直接写死:
provinceList = ['北京市', '天津市', '河北省', '山西省', '内蒙古自治区', '辽宁省', '吉林省','黑龙江省', '上海市', '江苏省', '浙江省', '安徽省', '福建省', '江西省', '山东省','河南省', '湖北省', '湖南省', '广东省', '广西壮族自治区', '海南省', '重庆市','四川省', '贵州省', '云南省', '**自治区', '陕西省', '甘肃省', '青海省', '宁夏回族自治区', '新疆维吾尔自治区', '台灣', '香港特别行>政区', '澳门特别行政区'];
2. 市列表
从市列表开始,就要扒高德地图的接口了,首先模仿浏览器的访问设置几个Http头:
send_headers ={'Accept':'*/*','Accept-Encoding':'gzip, deflate, sdch','Accept-Language':'zh-CN,zh;q=0.8','Connection':'keep-alive','Host':'restapi.amap.com','Referer':'http://lbs.amap.com/fn/iframe/?id=3556', }
然后是根据省名获取市列表的函数:
defgetCity(province):print "Province->" +provinceurl= "http://restapi.amap.com/v3/config/district?subdistrict=1&extensions=all&level=province&key=608d75903d29ad471362f8c58c550daf&s=rsv3&output=json&callback=jsonp_" + getJsonP() + "_&keywords=" +province;data=getData(url)item= data['districts'][0];if item['citycode'] ==[]:item['citycode'] = ''save([item['citycode'], item['adcode'], item['name'], item['center'], item['level'], ''])for item in data['districts'][0]['districts']:save([item['citycode'], item['adcode'], item['name'], item['center'], item['level'], ''])while 1:try:getDistrict(item)breakexceptException, e:print 'retry:' + item['name'] + "->" + str(e)
这里有跨域访问用的getJsonP、发起网络请求的getData、存数据库的save,这三个函数的具体实现一会再说,先看其它逻辑,高德服务端返回数据是长得这个样子的:
districts域就是搜索的结果,因为这是按名称进行搜索,而不是id,所以很可能会搜出来多个结果,当然省名不会重,但一样得到的是一个 JSONArray,所以用data['districts'][0]来得到省的信息,除了直辖市之外,省级单位的citycode都是空的,用 item['citycode'] = ''给它一个空字符串做默认值,然后调用save方法把它存入数据库,在上图中也看到了,data['districts'][0]里面还有一个 districts域,这里面就是所有市的信息,同样把它们存入数据库,然后针对每个市,去获取区的列表,这里有可能会出现网络问题,所以加上了失败重 试。
下面依次来看上面几个关键方法的实现:
1)getJsonP:
跨域访问是通过jsonp回调的方式进行的,函数名都是jsonp_**xx_()的形式,这个**xx是一个变化的随机数字,我采用依次递增的形式来生成这个jsonp的数字:
jsonp = 9999 defgetJsonP():globaljsonpjsonp= jsonp + 1if (jsonp > 99999):jsonp= 10000return str(jsonp)
这里我保证这个数字是一个5位数(理论上几位都可以),因为在图里可以看到,返回值是jsonp_**xx_({aaa})的形式,我们要分析json串需要把前后没用的字符去掉,如果长度固定就很好删了。
2)getData:
发起网络请求并把返回的数据转成JSONObject:
defgetDataWithEx(url):req= urllib2.Request(url,headers=send_headers)r= urllib2.urlopen(req,timeout=30)if r.info().get('Content-Encoding') == 'gzip':buf=StringIO(r.read())f= gzip.GzipFile(fileobj=buf)data=f.read()else:data=r.read()return json.loads(data[13:-1])defgetData(url):while 1:try:response=getDataWithEx(url)breakexceptException, e:print 'retry:' + url + "with error" +str(e)return response
这里也加入了失败重试,一般的数据都要用gzip进行解码,但是我忘了是哪个了,好像是有一个区的数据很特别没有用gzip,所以这里要分开判断,getJsonP里面介绍了,返回的数据前后是写无用的字符,用data[13:-1]删掉。
3)save
这是往MySQL里存数据的函数,没有特殊的点需要介绍,直接上代码:
defsave(value):try:conn=MySQLdb.connect(host='www.**.com',user='**',passwd='**',port=3306,charset="utf8")conn.select_db('test')cur=conn.cursor()cur.EⅩEcute("insert into amap(citycode, adcode, name, center, level, areacode) values(%s,%s,%s,%s,%s,%s)",value)conn.commit()cur.close()conn.close()exceptMySQLdb.Error,e:print "Mysql Error %d: %s" % (e.args[0], e.args[1])
3. 区列表
跟获取城市列表相似:
defgetDistrict(city):print "->City->" + city['name']url= "http://restapi.amap.com/v3/config/district?subdistrict=1&extensions=all&level=city&key=608d75903d29ad471362f8c58c550daf&s=rsv3&output=json&callback=jsonp_" + getJsonP() + "_&keywords=" + city['name']data=getData(url)for possible in data['districts']:if possible['adcode'] == city['adcode']:for item in possible['districts']:save([item['citycode'], item['adcode'], item['name'], item['center'], item['level'], ''])while 1:try:getBusiness(item)breakexceptException, e:print 'retry:' + item['name'] + "->" +str(e)break
和获取市列表稍微不同的是这里不能直接data['districts'][0]了,按市、区搜就有可能重名了,所以用城市的adcode来匹配,针对匹配上的市,遍历区的信息存入数据库,然后再针对区搜索商圈。
4. 商圈列表
跟获取市列表和获取区列表没有太大的区别:
defgetBusiness(district):print "->->District->" + district['name']url= "http://restapi.amap.com/v3/config/district?subdistrict=1&extensions=all&level=district&key=608d75903d29ad471362f8c58c550daf&s=rsv3&output=json&callback=jsonp_" + getJsonP() + "_&keywords=" + district['name']data=getData(url)for possible in data['districts']:if possible['adcode'] == district['adcode']:values=[]for item in possible['districts']:values.append((item['citycode'], item['adcode'], item['name'], item['center'], item['level'], item['areacode'])) saveAll(values)break
唯一不同的是直接用saveAll一次性存储所有的数据而不是一条条的save:
defsaveAll(values):try:conn=MySQLdb.connect(host='www.**.com',user='**',passwd='**',port=3306,charset="utf8")conn.select_db('test')cur=conn.cursor()cur.EⅩEcutemany("insert into amap(citycode, adcode, name, center, level, areacode) values(%s,%s,%s,%s,%s,%s)",values)conn.commit()cur.close()conn.close()exceptMySQLdb.Error,e:print "Mysql Error %d: %s" % (e.args[0], e.args[1])
关键的逻辑就都介绍完了,下面是头部库的导入和编码设置:
#-*- coding: utf-8 -*-#encoding=utf-8importurllib2importsys, jsonfrom StringIO importStringIOimportgzipimportMySQLdbimportdatetimereload(sys) sys.setdefaultencoding('utf-8')
这里要说的一点是:不知道为什么编译器会报错说setdefaultencoding方法不存在,有这个错误的话不用理会,可以正常运行,如果不设置会出现乱码。
最后是上述方法的调用:
starttime =datetime.datetime.now()for province inprovinceList:getCity(province)print 'over'endtime=datetime.datetime.now()print (endtime - starttime).seconds
扒数据的时间很长,n多小时,我忘了具体是多久了,而且为了避免出错我是把所有省分成了好几段分别扒的。
如果不想自己扒数据,想直接得到省市区的数据,可以直接下载我转存的sql文件。
也可以临时使用我的接口:
获取省列表:http://www.yxbilu.com/sites/tools/amap/province;
获取市列表:http://www.yxbilu.com/sites/tools/amap/city?adcode=110000(省的adcode);
获取区列表:http://www.yxbilu.com/sites/tools/amap/district?adcode=110100(市的adcode)。
获取高德地图省市区县列表相关推荐
- python高德 查询县_Python获取高德地图省市区县列表
项目中需要用省市区来进行检索,原想高德地图肯定会有API来获得这些数据,结果没有找到,有一个接口好像可以用,但是会附带大量的边界坐标点. 所以就不如自己把高德的省市区列表扒下来,自己写接口来完成这个功 ...
- python高德 查询县_【python】获取高德地图省市区县列表
项目中需要用省市区来进行检索,原想高德地图肯定会有API来获得这些数据,结果没有找到,有一个接口好像可以用,但是会附带大量的边界坐标点. 所以就不如自己把高德的省市区列表扒下来,自己写接口来完成这个功 ...
- python获取高德地图POI——关键字搜索
本文主要内容是利用python获取高德地图上的感兴趣点(POIs). 高德开放平台:https://lbs.amap.com/ 下载POI分类编码和城市编码表 搜索POI相关文档:https://lb ...
- Vue3 Echarts散点图+高德地图+卫星地图(一)——获取高德地图API
前言:在开发的过程中,对于Vue3的情况下,对于Echarts地图的文章操作很少,并且官方不通俗易懂,所以在此进行记录探索过程.还是一如既往贴近直接C/V操作,如果对于Echarts基本配置不会的同学 ...
- 百度地图 省市区县 信息展示
先上效果图(PS:数据为mock数据): 1.一级地图 2.二级地图 3.三级地图 . 4.四级地图 概述 效果图是不是有点多呀,不过能看到这里的估计这些效果图就是你们想要的效果啦,好,下面就来介绍一 ...
- iOS获取高德地图实现持续定位功能
首先,根据高德地图开发平台在Xcode里面配置相应的环境 自动部署用cocoapods,请按照http://lbs.amap.com/api/ios-location-sdk/guide/create ...
- echarts地图省市区县名称显示位置调整
问题"崇州市"显示跑错地方了: 1.地图经纬度查询地址: 先查询出具体经纬度, 然后 2.修改json地图上显示名称的位置坐标[与上面查询的经纬前后相反]的"cp&quo ...
- 如何使用Python获取高德地图中的地铁线路数据(geojson版本)
目录 数据来源 文件管理 引用的库 获取文件夹名称 读取文件 提取转化为线文件 提取转化为点文件 主程序 最终成果 数据来源 通过在高德地图搜索框直接搜索地铁线路,地图上会高亮显示地铁线路.通过尝试发 ...
- 浙江省地图省市区县geoJSON数据
Three还有各种Echarts地图 浙江通用地图geoJson 浙江全省市区县数据 最近工作中用到的东西做了梳理,有需求的自取,如有缺失请联系邮箱1507805586@qq.com 附带链接 :浙江 ...
- 腾讯地图 省市区县 信息展示
话不多说,先上图: 1.点击省份显示市级信息标记,点击市显示区县信息标记 2.缩放到市级级别时显示市级信息标记,缩放到区县级别时显示区县信息标记 (PS:此技术也可以用来开发仿滴滴打车软件里的显示附近 ...
最新文章
- CUDA 11功能展示
- linux下字符串处理工具二:awk(1)
- 浅析Kubernetes StatefulSet
- java 偶数求和 数组_JAVA实现幻方
- ehlib 用法记录
- java 冒泡排序_Java冒泡排序详解
- 远程抄表系统(AMR/AMI)中无线模块选型指南
- Android官方开发文档Training系列课程中文版:电池续航时间优化之按需开启广播接收器
- JavaScript-Date日期对象
- 如何打造一个搞垮公司的产品?
- c++ post请求_Golang GinWeb框架5绑定请求字符串/URI/请求头/复选框/表单类型
- QT不让windows休眠的方法
- iOS -- block
- 嗜血者高盛:北京上空的秃鹰?
- 如何配置Sql Server 2005之ODBC数据源连接
- 一次旅行:汕尾-汕头-梅州
- 独家深挖!F1赛车协会“刹车表现”是如何进行数据分析的?
- 计算机考证忘记密码了怎么办,计算机忘记开机密码怎么办?
- 遥感或DEM像素深度如何降为8bit
- SpringBoot+Vue实现邮箱登录注册功能
热门文章
- 【pytest官方文档】解读-fixtures函数和测试函数的参数化
- 微信小程序登录后,用户名显示微信用户,头像显示灰色,用户自己的头像和名称无法正常显示的问题(附解决方案)
- 360校招笔试题总结1
- python @property 解释
- Win11打不开本地组策略编辑器怎么办
- solaris学习6:帐号、安全管理
- mysql 字段 decimals_[转]分析MySQL数据类型的长度【mysql数据字段 中length和decimals的作用!熟悉mysql必看】...
- 小米5 android 4.1.2,三星GALAXY NOTE i9220 Miui V5完美运行 Android4.1.2 华丽流畅体验
- 游戏鼠标的dpi测试软件,鼠标dpi查看_自己就可以测试鼠标的DPI
- 基于php+mysql的网上购物商城系统