nominatim部署OSM离线地图

news2024/10/1 22:56:11

第一步:准备一个大内存的服务器,磁盘PG大小根据实际导入的数据确定,全量数据1T,osm.pdf属于压缩文件,如果能下载,但下载很慢,可以尝试用迅雷下载。

osm.pdf下载
osm.pdf另外一个下载路径
全量数据下载
另一个全量数据瞎子啊
增量数据下载

第二步:拉取Docker 镜像(如果拉取失败,可以在另外一个服务器拉取,之后使用docker打包导出tar,之后导入的形式获取对应的docker镜像)

github镜像原码

docker pull mediagis/nominatim:4.4

第三步、启动容器(如果是剥离PG库,需要看第六步)

创建文件夹/data/nominatim/osm,上传osm.pdf文件数据。

cd /
mkdir data
cd data
mkdir nominatim
cd nominatim
mkdir osm
cd osm
sz abruzzo-latest.osm.pbf

docker run -d -e PBF_PATH=/nominatim/data/abruzzo-latest.osm.pbf -p 8081:8080 -p 5433:5432 -v /data/nominatim/osm:/nominatim/data --name nominatim mediagis/nominatim:4.4

容器内启动端口 8080,容器外端口 8081(接口调用端口)
PG库容器内端口5432,容器外使用的也是5433

映射路径 容器外 /data/nominatim/osm,容器内/nominatim/data(需要跟PBF_PATH路径相同),把下载的文件放在容器外路径下。

第四步:记录导入时长,占用空间

文件大小:76M
启动时间:2024-09-24 11:30:00
启动完成时间:2024-09-24 11:42:00
总计耗时:12分钟
PG库用户名密码:nominatim/qaIACxO6wMR3
PG库占用空间大小:SELECT pg_size_pretty(pg_database_size(‘nominatim’));
PG表大小:SELECT pg_size_pretty(pg_total_relation_size(‘table_name’));
PG数据库大小 = 1601M
在这里插入图片描述
在这里插入图片描述

第五步、查看服务是否正常启动,接口是否可以正常访问

在这里插入图片描述

第六步、指定外部PG路径(生产部署,剥离PG库,便于维护)

(一)、创建nominatim角色,必须要创建超级管理员,要有所有操作权限,需要用超级管理员创建,创建完成之后,需要把所有这个库的连接断开,否则启动报错;
(二)、安装PG(如果使用云厂商直接选择PG,版本14,查看是否可以选择PostGIS插件,如果可以就可以跳过安装);
(三)、第一次需要初始化表,需要指定外部的PG连接信息,启动之后,登录docker 容器,修改start.sh文件信息,注释掉跟PG有关的信息,之后docker commit ID mediagis/xxx-nominatim:4.4,之后的启动使用这个镜像,否则每次docker run 都会删除数据库;
在这里插入图片描述
(四)、安装插件PostGIS

登录PG库查询PostGIS插件版本

psql postgres -c "SELECT PostGIS_Version();"

安装PG插件(PostGIS,osm2pgsql)

PostGIS安装需要安装mysql客户端

yum install --nogpgcheck -y postgis2_14 postgis2_14-utils

如果报错没有mysql包,需要导入mysql

sudo yum install -y https://repo.mysql.com/mysql80-community-release-el7-3.noarch.rpm
yum install -y mysql-community-client
#如果存在公钥未导入,需要导入公钥
wget https://repo.mysql.com/RPM-GPG-KEY-mysql -O /etc/pki/rpm-gpg/RPM-GPG-KEY-mysql
rpm --import /etc/pki/rpm-gpg/RPM-GPG-KEY-mysql
rpm -qa gpg-pubkey*

安装mysql客户端之后,重新执行

yum install --nogpgcheck -y postgis2_14 postgis2_14-utils

登录pg数据库,导入 PostGIS 插件

CREATE EXTENSION postgis;

查看是否导入成功,必须要导入成功PostGIS之后才能导入OSM数据

SELECT PostGIS_Version();

在这里插入图片描述

docker ps
docker stop id
docker run -d -e PBF_PATH=/nominatim/data/friuli_venezia_giulia-latest.osm.pbf -e NOMINATIM_TOKENIZER=icu -e NOMINATIM_DATABASE_DSN="pgsql:dbname=nominatim;host=172.26.10.92;port=5432;user=nominatim;password=qaIACxO6wMR3" -e PGHOST=172.26.10.92 -e PGPORT=5432 -e PGDATABASE=nominatim -e PGUSER=nominatim -e PGPASSWORD=qaIACxO6wMR3 -v /data/nominatim/osm:/nominatim/data -p 7070:8080 --name nominatim mediagis/nominatim:4.4

启动失败,可能需要删除前面的容器信息

docker rm xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx

文件大小:76M
导入开始时间:2024-09-26 13:53:00
导入开始时间:2024-09-26 14:11:00
导入耗时:18分钟

备注:

1、这种方式并没有剥离内部的PG库,实际上还是会在容器里面创建一个PG库,只是在执行sql,导入等过程的时候,会使用覆盖的PG参数连接到远端的PG库,容器中的PG库没有数据,所以占用空间会很小;
2、剥离PG之后,比较了外部PG调用和Docker容器中PG调用耗时情况;基本相同

空间大小参照

3、容器重启成功之后,不能直接在外面重启容器,否者会执行删除库语句,除非修改docker容器,可以进入docker容器中,执行startapache.sh多次启动apache服务,但不能执行pg重启服务
sudo -E -u postgres psql postgres -c “DROP DATABASE IF EXISTS
nominatim”

第七步、增量更新(需要能连接上OSM,可以在国外的服务器上下载)

备份数据库
cp -R /path/to/nominatim/data /path/to/nominatim/data_backup

1、docker支持增量更新,如果FREEZE=true(默认false),就会冻结数据库,只能做查询操作,不能修改,所有的增量操作都做不了

远程拉取数据服务器

REPLICATION_URL=https://planet.osm.org/replication/hour

每24小时拉取一次更新数据(单位s)

NOMINATIM_REPLICATION_INTERVAL=86400

每12小时拉取检测一次是否有新的更新数据

NOMINATIM_REPLICATION_RECHECK_INTERVAL=43200

更新方式 smart/force/none 只能模式,根据网络和数据动态更新/强制更新,不管网络和数据情况/不更新

UPDATE_MODE=smart
2、下载增量包,通过osm2pgsql插件导入数据

(一)、安装osm2pgsql插件
sudo yum update
sudo yum install osm2pgsql
osm2pgsql --version

(二)、下载增量osc文件信息

#!/bin/bash

# 设置日期索引范围
START_NUMBER=374
END_NUMBER=400

#
DAY=004

# 目标目录
TARGET_DIR="/tmp/osc/$DAY"

# 创建目标目录
mkdir -p "$TARGET_DIR"

# 下载并解压文件
for NUMBER in $(seq -w $START_NUMBER $END_NUMBER); do
    FILENAME="$NUMBER.osc.gz"
    URL="https://planet.osm.org/replication/day/000/$DAY/$FILENAME"
    wget -P "$TARGET_DIR" "$URL"
    if [ $? -eq 0 ]; then
        gunzip -c "$TARGET_DIR/$FILENAME" > "$TARGET_DIR/${FILENAME%.gz}"
		rm -rf "$TARGET_DIR/$FILENAME"
        echo "Downloaded and extracted: $FILENAME"
    else
        echo "Failed to download: $FILENAME"
    fi
done

echo "download finish."

(三)、执行osc文件合并命令

#!/bin/bash

# 数据库信息
TABASE="nominatim"
HOST="172.26.10.92"
PORT="5433"
USERNAME="nominatim"
PASSWORD="qaIACxO6wMR3"
STYLE="/usr/share/osm2pgsql/default.style"

# OSC 文件列表
OSC_FILES=("changes_2024-09-02_2024-09-05.osc")

# 应用 OSC 文件
for osc_file in "${OSC_FILES[@]}"; do
    # 检查表存在性
    if psql -d "$DATABASE" -U "$USERNAME" -H "$HOST" -p "$PORT" -W "$PASSWORD" -tA -c "SELECT EXISTS(SELECT 1 FROM information_schema.tables WHERE table_name = 'planet_osm_line' AND table_schema = 'public');" | grep -q "t"; then
        # 表存在,继续导入
        osm2pgsql --append --database="$DATABASE" --host="$HOST" --port="$PORT" --username="$USERNAME" --password="$PASSWORD" --style="$STYLE" "/paas/nominatim/$osc_file"
        echo "Applied changes from '$osc_file'"
    else
        # 表不存在,跳过
        echo "Table does not exist, skipping '$osc_file'"
    fi
done

echo "All changes applied successfully."

在这里插入图片描述

3、下载全量包

新建一个数据库,docker启动连接新库,新库导入完成,重启就的docker镜像,数据库指向新库。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2183311.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

学生党有福了!国内最好的4款AI论文润色机构

在当今学术研究和写作领域,AI技术的应用已经变得越来越普遍。AI论文润色工具不仅能够帮助研究人员快速生成论文草稿,还能进行内容优化、查重和排版等操作。这些工具极大地提高了写作效率和质量,尤其对于学生党来说,选择合适的AI论…

基于单片机多功能称重系统设计

** 文章目录 前言概要功能设计设计思路 软件设计效果图 程序文章目录 前言 💗博主介绍:✌全网粉丝10W,CSDN特邀作者、博客专家、CSDN新星计划导师,一名热衷于单片机技术探索与分享的博主、专注于 精通51/STM32/MSP430/AVR等单片机设计 主要对…

2024年3分钟手把手教你激活Guitar Pro 8破解版

Guitar Pro是一款专业的吉他制谱软件,现在已更新至Guitar Pro8,新增了支持添加音频轨道、支持嵌套连音符、直观的效果器视图、让指法一目了然的音阶示意图等实用新功能。下面我们来看Guitar Pro8 Windows如何安装激活。 GuitarPro8安装包和许可证密钥夸克…

Acwing 高斯消元

高斯消元能在 O ( n 3 ) O(n^3) O(n3)的时间复杂度内求解n个方程,n个未知数的多元线性方程组,即 a 11 x 1 a 12 x 2 a 13 x 3 ⋯ a 1 n x n b 1 a 21 x 1 a 22 x 2 a 23 x 3 ⋯ a 2 n x n b 2 … a n 1 x 1 a n 2 x 2 a n 3 x 3 ⋯ a n n…

STM32CubeMX工程printf问题

1、不能打印输出的问题 利用STM32CubeMX创建了一个带FreeRTOS系统的工程,使能多线程保护。 然后在任务函数中调用了printf函数。 可是电脑的串口上没有信息输出,程序进入了硬件错误中断。 原来是因为自动生成的串口初始化函数MX_LPUART1_UART_Init中&a…

话术挂断之后是否处理事件

文章目录 前言联系我们解决方案方案一方案二 前言 流程:自动外呼进入机器人话术。问题:在机器人放音时用户挂断后,话术还会继续匹配流程,如果匹配上的是放音节点,还会进行放音,那么在数据库表conversation…

利用vue-capper封装一个可以函数式调用图片裁剪组件

1. 效果 const cropData await wqCrop({prop:{img,autoCrop: true, // 是否开启截图框maxImgSize: 600,autoCropWidth: 30,canMove: true, // 图片是否可移动canMoveBox: true, // 截图框是否可移动fixedBox: false, // 截图框是否固定}});console.log(cropData);使用wqCrop会…

阿里大模型算法岗面试,上来就手撕代码啊

最近已有不少大厂都在秋招宣讲了,也有一些在 Offer 发放阶段。 节前,我们邀请了一些互联网大厂朋友、今年参加社招和校招面试的同学。 针对新手如何入门算法岗、该如何准备面试攻略、面试常考点、大模型技术趋势、算法项目落地经验分享等热门话题进行了…

Python | Leetcode Python题解之第440题字典序的第K小数字

题目&#xff1a; 题解&#xff1a; class Solution:def getSteps(self, cur: int, n: int) -> int:steps, first, last 0, cur, curwhile first < n:steps min(last, n) - first 1first * 10last last * 10 9return stepsdef findKthNumber(self, n: int, k: int)…

2022年6月 Frontier 获得性能第一的论文翻译

为百万兆级加速架构做高性能 Linpack 优化 摘要 我们详细叙述了在 rocHPL 中做的性能优化&#xff0c;rocHPL 是 AMD 对 HPL 基准的开源实现&#xff0c;主要是针对节点进行优化的架构&#xff0c;是为百万兆级系统而设计的&#xff0c;比如&#xff1a;Frontier suppercomput…

蓝桥杯【物联网】零基础到国奖之路:十六. 扩展模块之矩阵按键

蓝桥杯【物联网】零基础到国奖之路:十六. 扩展模块之矩阵按键 第一节 硬件解读第二节 CubeMX配置第三节 MDK代码 第一节 硬件解读 扩展模块和ADC模块是一摸一样的&#xff0c;插在主板上。 引脚对应关系&#xff1a; PB6-ROW1 PB7-ROW2 PB1-COLUMN1 PB0-COLUMN2 PA8-COLUMN3 …

上位机图像处理和嵌入式模块部署(软硬结合才是嵌入式的精髓)

【 声明&#xff1a;版权所有&#xff0c;欢迎转载&#xff0c;请勿用于商业用途。 联系信箱&#xff1a;feixiaoxing 163.com】 关于嵌入式&#xff0c;有很多的说法。有的认为stm32 mcu那种才是嵌入式&#xff1b;有的认为嵌入式linux也是嵌入式&#xff1b;也有的同学认为&a…

比较10大热门低代码开发平台及其适用性

本文介绍10款主流低代码开发平台&#xff0c;包括ZohoCreator、OutSystems、Mendix等&#xff0c;它们各具特色&#xff0c;如定制能力强、集成方便、全栈开发等&#xff0c;适合不同企业快速构建应用程序&#xff0c;提升开发效率。 一、Zoho Creator Zoho Creator低代码开发…

沂机管理系统存在存储型XSS漏洞

漏洞描述 沂机管理系统存在存储型XSS漏洞&#xff0c;窃取用户Cookie获取用户信息 漏洞复现 body"后台管理系统演示版" POC GET /data/Ajax.aspx?methoduser_save&frandom0.15233733802978144&FCloud_OrgID1&FCloud_UserID167636&FCloud_EmpID1…

2024年10月HarmonyOS应用开发者高级认证全新题库

注意事项&#xff1a;切记在考试之外的设备上打开题库进行搜索&#xff0c;防止切屏三次考试自动结束&#xff0c;题目是乱序&#xff0c;每次考试&#xff0c;选项的顺序都不同 新版题库&#xff1a;单选题40题 多选题20题 注意选项答案顺序不一样&#xff0c;大家记得看选项…

Devicenet从站数据 转profinet IO项目案例

目录 1 案例说明 1 2 VFBOX网关工作原理 1 3 准备工作 2 4 网关用DEVICENET协议采集数据 3 5 用PROFINET IO协议转发数据 4 6 案例总结 7 1 案例说明 设置网关采集Devicenet从站设备数据把采集的数据转成profinet IO协议转发给其他系统。 2 VFBOX网关工作原理 VFBOX网关是协…

HarmonyOS NEXT:实现电影列表功能展示界面

时至今日HarmonyOS NEXT早已发布运行了&#xff0c;等其正式推出并大规模商用后&#xff0c;HarmonyOS的历史使命就完成并将退出历史舞台&#xff0c;为用户提供丰富的应用选择。但是Harmony NEXT是在HarmonyOS基础上剔除安卓&#xff08;AOSP&#xff09;后的产品&#xff0c;…

【2023工业3D异常检测文献】M3DM: 基于混合融合的多模态工业异常检测方法

Multimodal Industrial Anomaly Detection via Hybrid Fusion 1、Background 随着3D传感器的发展&#xff0c;最近发布了具有2D图像和3D点云数据的MVTec-3D AD数据集&#xff0c;促进了多模态工业异常检测的研究。 无监督异常检测的核心思想是找出正常表示与异常之间的差异。…

[云服务器16] 搭建flarum论坛,纯小白向

论&#xff1a; 如何才能正确搭建Flarum论坛&#xff1f; 先看成品&#xff08;当然还没搭好&#xff0c;直达车&#xff09;&#xff1a; 那么&#xff0c;怎么才能部署如此之好の论坛呢&#xff1f; 本期主要讲述正确搭建Flarum的方法&#xff0c;100%成功&#xff0c;即使…

【STM32单片机_(HAL库)】4-3-4【定时器TIM】测量按键按下时间实现3

1.硬件 STM32单片机最小系统按键模块 2.软件 定时器HAL驱动层文件添加ic驱动文件添加GPIO常用函数定时器输入捕获实验配置步骤main.c程序 #include "sys.h" #include "delay.h" #include "led.h" #include "uart1.h" #include &qu…