用Python爬取高德地图路径规划数据——01. 指定起终点爬取-Python程序及详解

news2024/11/17 23:07:14

这个Python程序旨在从高德地图API获取路径规划数据,解析这些数据,并最终将其保存到JSON和CSV文件中。下面,我将详细讲解每个部分的功能和实现方式。

1. 导入所需的模块

import requests
import json
import time
import csv
  • requests: 用于发送HTTP请求并接收响应。
  • json: 用于处理JSON格式的数据。
  • time: 用于在请求之间添加延迟,避免频繁请求。
  • csv: 用于将解析后的数据保存到CSV文件中。

2. 获取路径规划数据

def get_route_planning(start_point, end_point, api_key):
    base_url = 'https://restapi.amap.com/v5/direction/transit/integrated'
    parameters = {
        'origin': start_point,
        'destination': end_point,
        'key': api_key,
        'city1': '0871',
        'city2': '0871',
        'show_fields':'cost'        
    }

    response = requests.get(base_url, params=parameters)
    
    if response.status_code == 200:
        result = response.json()
        return result
    else:
        print(f"Error: {response.status_code}")
        return None
  • get_route_planning 函数用于根据起点和终点的经纬度,通过高德地图API获取路径规划数据。
  • base_url 是API的基础URL,v5/direction/transit/integrated 代表公交换乘路径规划服务。
  • parameters 包含请求的参数,包括起点 (origin)、终点 (destination)、API Key (key)、城市代码 (city1city2),以及需要返回的字段 (show_fields)。
  • 通过 requests.get 发送HTTP请求并获取响应。如果响应状态码为200,则返回解析后的JSON数据;否则输出错误信息。

3. 批量处理多个路径规划

def batch_process(locations, api_key):
    route_data_all = []

    for start, end in locations:
        route_data = get_route_planning(start, end, api_key)
        if route_data:
            route_data_all.append(route_data)
            time.sleep(0.1)  # 控制请求速率,避免频繁请求被限制

    return route_data_all
  • batch_process 函数用于批量处理多个路径规划请求。
  • locations 是一个包含多个起点和终点元组的列表。
  • 函数会依次调用 get_route_planning 函数,并将每次获取的数据添加到 route_data_all 列表中。
  • time.sleep(0.1) 添加了0.1秒的延迟,用于避免请求过于频繁,防止IP被API服务暂时封禁。

4. 保存数据到文件

def save_to_file(data, filename='route_data.json'):
    with open(filename, 'w', encoding='utf-8') as file:
        json.dump(data, file, ensure_ascii=False, indent=2)
  • save_to_file 函数用于将收集到的路径规划数据保存到JSON文件中。
  • 使用 json.dump 将Python对象转换为JSON格式并写入文件。

5. 主程序入口

def main():
    your_api_key = "替换为自己的key"

    locations = [
        ("102.860168,24.870209", "102.618095,24.984176"), # 昆明南站——西山公园
        ("102.842417,24.835941", "102.720305,25.056113"), # 大学城站——火车北站
        ("102.719665,25.038080", "102.699926,25.032055"), # 东风广场——弥勒寺站
    ]

    route_data_all = batch_process(locations, your_api_key)
    
    if route_data_all:
        save_to_file(route_data_all, 'batch_route_data.json')
        print("路径规划数据已保存到 batch_route_data.json 文件中")

注意:your_api_key = "替换为自己的key"处需要将自己申请的key粘贴到此处,替换“替换为自己的key”,申请方法详见:http://t.csdnimg.cn/xeUj9icon-default.png?t=N7T8http://t.csdnimg.cn/xeUj9

  • main 函数是程序的入口。
  • 这里你可以替换 your_api_key 为你自己的高德地图API Key。
  • locations 是包含多个起点和终点经纬度的列表。
  • 程序会批量处理这些路径规划,并将结果保存到 batch_route_data.json 文件中。

6. 查看和解析JSON数据

with open('batch_route_data.json', 'r', encoding='utf-8') as f:
    data = json.load(f)
    
print(data) # 输出读取到的数据
  • 这段代码用于读取 batch_route_data.json 文件中的数据并打印到控制台上。

7. 解析并输出JSON数据

for item in data:
    status = item['status']
    info = item['info']
    infocode = item['infocode']
    route = item['route']

    origin = route['origin']
    destination = route['destination']
    distance = route['distance']
    
    cost_info = route['cost']
    taxi_fee = cost_info.get('taxi_fee')
    
    for transit in route['transits']:
        transit_cost = transit['cost']
        transit_duration = transit_cost['duration']
        transit_transit_fee = transit_cost.get('transit_fee')

        transit_distance = transit['distance']
        walking_distance = transit['walking_distance']
        
        for segment in transit['segments']:
            if 'bus' in segment:
                bus_info = segment['bus']
                bus_name = bus_info['buslines'][0]['name']
                bus_distance = bus_info['buslines'][0]['distance']
                print(f"Bus Name: {bus_name}")
                print(f"Bus Distance: {bus_distance}")

            if 'walking' in segment:
                walking_info = segment['walking']
                walking_distance = walking_info['distance']
                print(f"Walking Distance: {walking_distance}")

            print("-----")
        print("==========")
  • 这部分代码详细解析了JSON数据,提取了路径的基本信息、花费、距离、换乘信息等,并逐段输出每个公交和步行信息。

8. 保存解析后的数据到CSV文件

csv_filename = 'transit_routes.csv'
fieldnames = ['Status', 'Info', 'Infocode', 'Origin', 'Destination', 'Distance',
              'Taxi Fee', 'Transit Duration', 'Transit Fee', 'Transit Distance',
              'Walking Distance', 'Bus Names', 'Bus Distances', 'Walking Distances']

with open(csv_filename, mode='w', newline='', encoding='utf-8') as csvfile:
    writer = csv.DictWriter(csvfile, fieldnames=fieldnames)
    writer.writeheader()

    for item in data:
        status = item['status']
        info = item['info']
        infocode = item['infocode']
        route = item['route']

        origin = route['origin']
        destination = route['destination']
        distance = route['distance']

        cost_info = route['cost']
        taxi_fee = cost_info.get('taxi_fee')

        for transit in route['transits']:
            transit_cost = transit['cost']
            transit_duration = transit_cost['duration']
            transit_transit_fee = transit_cost.get('transit_fee')

            transit_distance = transit['distance']
            walking_distance = transit['walking_distance']

            transit_segments = transit['segments']
            bus_names = []
            bus_distances = []
            walking_distances = []

            for segment in transit_segments:
                if 'bus' in segment:
                    bus_info = segment['bus']
                    bus_name = bus_info['buslines'][0]['name']
                    bus_distance = bus_info['buslines'][0]['distance']

                    bus_names.append(bus_name)
                    bus_distances.append(bus_distance)
                elif 'walking' in segment:
                    walking_info = segment['walking']
                    walking_distance = walking_info['distance']

                    walking_distances.append(walking_distance)

            row_data = {
                'Status': status,
                'Info': info,
                'Infocode': infocode,
                'Origin': origin,
                'Destination': destination,
                'Distance': distance,
                'Taxi Fee': taxi_fee,
                'Transit Duration': transit_duration,
                'Transit Fee': transit_transit_fee,
                'Transit Distance': transit_distance,
                'Walking Distance': walking_distance,
                'Bus Names': ' / '.join(bus_names),
                'Bus Distances': ' / '.join(bus_distances),
                'Walking Distances': ' / '.join(walking_distances)
            }

            writer.writerow(row_data)

print(f'CSV 文件 "{csv_filename}" 已创建并成功写入。')
  • 最后,解析后的数据被组织成字典,并写入到 transit_routes.csv 文件中。
  • fieldnames 定义了CSV文件的列名。
  • 通过 csv.DictWriter,程序将每个换乘方案的详细信息写入CSV文件的一行。

总结

这个程序涵盖了从API获取数据、批量处理、数据解析、JSON和CSV文件存储等一系列功能。你可以使用这个程序来获取特定地点之间的公交换乘方案,并将详细信息保存以供后续分析和使用。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2052284.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

spring boot自动配置

Spring自动配置是Spring框架的一个核心特性,它允许开发者通过在类路径下的配置类发现bean,而无需在应用程序中显式地进行bean的声明。Spring Boot利用这一特性,通过starter依赖的机制和EnableAutoConfiguration注解,帮助开发者快速…

Adobe After Effects AE V2023-23.6.6.2 解锁版下载安装教程 (视频合成和特效制作)

前言 Adobe After Effects(简称AE)是一款专业的图形视频处理软件,数字影视特效合成软件,视频后期特效制作软件。主要用来创建动态图形和视觉特效,支持2D以及3D,是基于非线性编辑的软件,透过图层…

原生js用Export2Excel导出excel单级表头和多级表头数据方式实现

原生js用Export2Excel导出excel单级表头和多级表头数据方式实现 原生js用Export2Excel导出excel单级表头和多级表头数据方式实现HTML文件导入需要的文件HTML文件中实现导出函数HTML总代码实现汇总(直接复制代码,注意js引入路径) 原生js用Expo…

小区社区超市商城停车场管理系统-计算机毕设Java|springboot实战项目

🍊作者:计算机毕设匠心工作室 🍊简介:毕业后就一直专业从事计算机软件程序开发,至今也有8年工作经验。擅长Java、Python、微信小程序、安卓、大数据、PHP、.NET|C#、Golang等。 擅长:按照需求定制化开发项目…

Ai学术叫叫兽全网最新创新点改进系列:丰富文章的热力图如何制作,论文装逼必用神器!极大丰富文章内容,并提升论文实验效果及其质量!

Ai学术叫叫兽全网最新创新点改进系列:丰富文章的热力图如何制作,论文装逼必用神器!极大丰富文章内容,并提升论文实验效果及其质量! 所有改进代码均经过实验测试跑通!截止发稿时YOLOv8、YOLOv10均已改进40&…

tekton什么情况下在Dockerfile中需要用copy

kaniko配置如下 如果docker中的workDir跟tekton中的workDir不一致需要copy。也可以通过mv,cp达到类似效果

大数据——Flink原理

摘要 Apache Flink是一个框架和分布式处理引擎,用于对无界和有界数据流进行有状态计算。Flink被设计在所有常见的集群环境中运行,以内存执行速度和任意规模来执行计算。 1. FLink特点 1.1. 事件驱动型(Event-driven) 事件驱动型应用是一类具有状态的应…

基于 NXP LPC5516 + MC33665 + MC33774 的菊花链 HVBMS 储能方案

在 ESS 储能系统中,HVBMS 一般会采用两级或三级架构,从而实现从电池模组到电池簇,再到电池堆的分级管理和控制。本方案则给大家讲解基于 LPC5516 MC33665 MC33774 菊花链 HVBMS 方案,涵盖了 BMU、BJB、CMU,构建 HVBM…

简洁清新个人博客网页模板演示学习

30多款个人博客、个人网站、个人主页divcss,html在线预览,个人静态页面模板(wordpress、帝国cms、typecho主题模板).这些简洁和优雅的博客网页模板,为那些想成为创建博客的个人或媒体提供灵感设计。网页模板可以记录旅游、生活方式、食品或摄影博客等网站。部分网页模板来源网友…

MySQL8.0.0.28数据库安装配置

MySQL8.0.0.28数据库安装配置 1. 安装前的准备工作 1.1 确认目前服务器上是否存在MySQL 命令:rpm -qa | grep mysql 说明:若返回空信息,就说明当前环境没有安装MySQL;直接跳到第4步操作后续。 1.2 检查当前环境是否有自带的m…

系统编程-文件属性和目录操作

4 文件属性和目录操作 一、目录操作 -- 目录操作主要的目的:让程序知道路径下有什么文件存在 -- 注:程序在哪里运行他的工作路径就在哪里 ,程序中所有的相对路径的文件就是基于工作路径来实现的 1、获取当前程序运行的工作路径 -- 函数头…

爬取豆瓣TOP250电影详解

一.分析网页DOM树结构 1.分析网页结构及简单爬取 豆瓣(Douban)是一个社区网站,创立于2005年3月6日。该网站以书影音起家,提供关于书籍、电影、音乐等作品的信息,其作品描述和评论都是由用户提供(User-Gen…

MATLAB 手动实现一种高度覆盖值提取建筑物点云的方法(74)

专栏往期文章,包含本章 MATLAB 手动实现一种高度覆盖值提取建筑物点云的方法(74) 一、算法介绍二、算法实现1.代码2.效果总结一、算法介绍 手动实现一种基于高度覆盖值的建筑物点云提取方法,适用于高大的城市建筑物,比只利用高度提取建筑物的方法更加稳定和具有价值,主要…

NC 丑数

系列文章目录 文章目录 系列文章目录前言 前言 前些天发现了一个巨牛的人工智能学习网站,通俗易懂,风趣幽默,忍不住分享一下给大家。点击跳转到网站,这篇文章男女通用,看懂了就去分享给你的码吧。 描述 把只包含质因…

Linux_Shell三剑客grep,awk,sed-08

三剑客的概述: awk、grep、sed是linux操作文本的三大利器,合称文本三剑客,也是必须掌握的linux命令之一。三者的功能都是处理文本,但侧重点各不相同,其中属awk功能最强大,但也最复杂。grep更适合单纯的查找…

英伟达开源 Nemotron-4-4B:小型模型,大能量

前沿科技速递🚀 在人工智能领域,语言模型已经成为推动自然语言处理(NLP)进步的关键力量。然而,随着模型规模的不断扩大,训练和部署这些大型语言模型(LLM)的资源成本也在急剧增加。为…

2024年8月 trueNas 容器端口只能设置大于9000问题解决

前言 这两天在搭建个人nas,想顺便在局域网搭建一个dns服务器,我采用的是jpillora/dnsmasq的docker镜像搭建的,但是遇到一个问题始终无法解决容器端口必须大于9000,而dns使用的端口是53是改不了的,找了很多资料发现有老…

地图相册系统的设计与实现

摘 要 随着信息技术和网络技术的飞速发展,人类已进入全新信息化时代,传统管理技术已无法高效,便捷地管理信息。为了迎合时代需求,优化管理效率,各种各样的管理系统应运而生,各行各业相继进入信息管理时代&a…

Transformer 中自注意力机制的 一些细节理解

摘自知乎博主https://www.zhihu.com/question/362131975/answer/2182682685?utm_oi78365163782144 作者:月来客栈 链接:https://www.zhihu.com/question/362131975/answer/2182682685 1. 多头注意力机制原理 1.1 动机 首先让我们先一起来看看作者当…

IP SSL证书快速申请教程

在互联网安全领域中,SSL证书是比较普遍的传输数据加密方式之一。SSL证书通过建立加密通道,确保客户端与服务器之间传输的数据不被第三方窃取或篡改。而大多数SSL证书,如单域名SSL证书、多域名SSL证书以及通配符SSL证书,在申请时必…