python 獲取全國最新省市區資料,並存入表
本文透過調取高德行政區劃查詢介面,獲取最新的資料資訊(省、市、區、經緯度、行政級別、城市編碼、行政編碼等),並透過 mysql.connector 存入 mysql 資料庫
表結構設計如下:
CREATE TABLE `districts` (
`districtId` int(11) NOT NULL AUTO_INCREMENT,
`districtPid` int(11) DEFAULT NULL COMMENT ' 上級 ID',
`name` varchar(32) DEFAULT NULL COMMENT ' 行政區名稱 ',
`citycode` varchar(6) DEFAULT NULL COMMENT ' 城市編碼 ',
`adcode` varchar(6) DEFAULT NULL COMMENT ' 城市區域編碼 ',
`lng` float(13,10) DEFAULT NULL COMMENT ' 經度 ',
`lat` float(13,10) DEFAULT NULL COMMENT ' 緯度 ',
`level` varchar(10) DEFAULT NULL COMMENT '外匯跟單gendan5.com 行政區劃級別 ',
`createTime` timestamp NULL DEFAULT CURRENT_TIMESTAMP,
`updateTime` timestamp NULL DEFAULT NULL ON UPDATE CURRENT_TIMESTAMP,
PRIMARY KEY (`districtId`)
) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8mb4
python 程式碼如下: ( 需替換成自己的資料庫地址帳號密碼、及換入自己的高德 key 值 )
# coding = utf-8
"""
@autor: linuxdba
"""
import json
import mysql.connector
import requests
header = {
'User-Agent': 'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.107 Mobile Safari/537.36'
}
mydb = mysql.connector.connect(host='ip.....', user='username.....', password='pwd.....', port=3306,
database='test')
mycursor = mydb.cursor()
insert_sql = "INSERT INTO `districts` ( `districtpid`,`name`, `adcode`, `lng`, `lat`, `level`) VALUES (%s,%s, %s, %s, %s, %s);"
insert_city_sql = "INSERT INTO `districts` ( `districtpid`,`name`, `citycode`,`adcode`, `lng`, `lat`, `level`) VALUES (%s, %s, %s, %s, %s, %s, %s);"
select_sql = 'select districtId from districts where adcode = %s'
def updatedb(sql, *args):
try:
mycursor.execute(sql, args)
mydb.commit()
except Exception as e:
print(e)
def selectdb(sql, *args):
mycursor.execute(sql, args)
return mycursor
updatedb(insert_sql, 0, ' 中華人民共和國 ', '100000', '116.3683244', '39.915085', 'country')
provinces = [' 北京市 ', ' 天津市 ', ' 河北省 ', ' 山西省 ', ' 內蒙古自治區 ', ' 遼寧省 ', ' 吉林省 ', ' 黑龍江省 ', ' 上海市 ', ' 江蘇省 ', ' 浙江省 ', ' 安徽省 ', ' 福建省 ', ' 江西省 ',
' 山東省 ', ' 河南省 ', ' 湖北省 ', ' 湖南省 ', ' 廣東省 ', ' 廣西壯族自治區 ', ' 海南省 ', ' 重慶市 ', ' 四川省 ', ' 貴州省 ', ' 雲南省 ', ' 西藏自治區 ', ' 陝西省 ', ' 甘肅省 ',
' 青海省 ', ' 寧夏回族自治區 ', ' 新疆維吾爾自治區 ', ' 臺灣省 ', ' 香港特別行政區 ', ' 澳門特別行政區 ']
for i in provinces:
code_url = '{}&subdistrict=2'.format(
i)
res = requests.get(code_url, headers=header)
print(code_url)
print(res.text)
province = json.loads(res.text)['districts']
adcode = province[0]['adcode']
pname = province[0]['name']
center = province[0]['center']
pcitycode = province[0]['citycode']
level = province[0]['level']
lng = province[0]['center'].split(',')[0]
lat = province[0]['center'].split(',')[1]
city_list = province[0]['districts']
# print(pname, pcitycode, adcode, lng, lat, level)
updatedb(insert_sql, 1, pname, adcode, lng, lat, level)
districtpid = selectdb(select_sql, adcode).fetchone()[0]
# print(city_list)
for city in city_list:
citycode = city['citycode']
adcode = city['adcode']
name = city['name']
level = city['level']
lng = city['center'].split(',')[0]
lat = city['center'].split(',')[1]
district_list = city['districts']
# print(name, citycode, adcode, lng, lat, level)
updatedb(insert_city_sql, districtpid, name, citycode, adcode, lng, lat, level)
citypid = selectdb(select_sql, adcode).fetchone()[0]
for district in district_list:
citycode = district['citycode']
adcode = district['adcode']
name = district['name']
level = district['level']
lng = district['center'].split(',')[0]
lat = district['center'].split(',')[1]
district_list = district['districts']
if level in ['district']:
updatedb(insert_city_sql, citypid, name, citycode, adcode, lng, lat, level)
print(name, citycode, adcode, lng, lat, level)
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69946337/viewspace-2786476/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- python獲取全國地鐵資料Python
- 最新全國省市區縣鄉鎮街道行政區劃資料提取(2022年)
- 最最最簡單從政府官方獲取最新省市縣聯動資料
- 最新全國省市區縣鄉鎮街道行政區劃資料和座標邊界資料更新提取(2023年)
- 讀取JSON資料存入表格JSON
- vue+node全棧移動商城【11】連線mongodb並存入資料Vue全棧MongoDB
- Python獲取jsonp資料PythonJSON
- 用python抓取智聯招聘資訊並存入excelPythonExcel
- 最新最完整的省市縣json資料JSON
- python爬取股票最新資料並用excel繪製樹狀圖PythonExcel
- laravel 擴充套件分享 — 省市區資料表生成器Laravel套件
- 全國主要省市2022春節銷售資料出爐
- Python網路爬蟲抓取動態網頁並將資料存入資料庫MYSQLPython爬蟲網頁資料庫MySql
- python爬取基金股票最新資料,並用excel繪製樹狀圖PythonExcel
- 從json物件中讀取資料存入表格JSON物件
- Java擷取指定區間內的陣列元素並存入新陣列Java陣列
- Go抓取網頁資料並存入MySQL和返回json資料Go網頁MySqlJSON
- 根據 IP 獲取省市名稱
- DataGridView如何獲取選中行資料並更新View
- 利用API獲取金融資料並畫圖API
- python 使用 imagehash 庫生成 ahash,並存入 milvusPython
- python爬取股票資料並存到資料庫Python資料庫
- 獲取資料並繫結到 UI | MAD SkillsUI
- Python 自動化拉取 MySQL 資料並建表裝載到 OraclePythonMySqlOracle
- python的queue佇列獲取資料Python佇列
- 如何用python分析xml獲取資料?PythonXML
- 透過Python SDK 獲取tushare資料Python
- Python教程之獲取網路資料!Python
- python 爬蟲 5i5j房屋資訊 獲取並儲存到資料庫Python爬蟲資料庫
- python執行shell並獲取結果Python
- Python Cookie HTTP獲取cookie並處理PythonCookieHTTP
- 使用selenium定位獲取標籤物件並提取資料物件
- 全國省市區縣和鄉鎮街道行政區劃向量邊界座標經緯度地圖最新資料免費下載 支援shp geojson json sql格式地圖JSONSQL
- Scrapy爬蟲(6)爬取銀行理財產品並存入MongoDB(共12w+資料)爬蟲MongoDB
- python 獲取excel資料 自動登陸PythonExcel
- 使用Python獲取HTTP請求頭資料PythonHTTP
- python獲取歷屆金雞獎資料Python
- Python教程分享:Python Cookie HTTP獲取cookie並處理PythonCookieHTTP