【libtorch】pytorch源码编译生成c++ 17 libtorch记录

news2024/11/23 19:50:18

文章目录

      • 1. 问题描述
      • 2. 编译安装前准备
      • 3. 编译安装
      • 4. 编译好之后使用

1. 问题描述

ubuntu20.04 ros2 humble使用1.8.0 libtorch出现coredump,提示加载模型失败:

在这里插入图片描述

原因: ros2 humble项目使用c++17编译,c++11的libtorch的库文件版本不配套导致

解决: 使用pytorch源码编译c++17 libtorch使用后解决

2. 编译安装前准备

(1)确认要编译生成的libtorch版本

如 1.12.0 版本

(2)下载pytorch源码

git clone https://github.com/pytorch/pytorch.git

(4)切换到libtorch版本对应tag

cd pytorch
git tag -l *1.12.0*		// git tag查看版本,git tag -l搜索特定版本的tag
git checkout v1.12.0	// 切换到特定tag的代码	

(5)更新所有显示modified的submodule

git submodule sync
git submodule update --init --recursive

在这里插入图片描述

注释:

  1. 最好有VPN,pytorch github官网时好时不好,有梯子更方便;
  2. 下载失败不要紧,反复尝试即可,但总体是比较耗时的;
  3. 有的博客提到,可以将 .gitmodules 文件中github.com替换为github加速插件的地址 github.com.cnpmjs.org,再执行submodule更新命令
  4. submodule完整更新非常关键,否则可能中途编译失败
    在这里插入图片描述

3. 编译安装

(1)编译方式选择

目前看到三种编译安装方式:
python setup.py install
python xxx/build_libtorch.py
cmake完整编译方式

python的编译方式都使用了cmake工具编译项目,还可以设置是否使用ninja,生成库文件后还能将项目打包成python包;

考虑到cmake完整编译方式更为熟悉,方便设置c++17编译选项,以及能够生成直接使用的libtorch工程(bin/lib/include/share)等,采用cmake进行完整编译

(2)编译选项设置

CMAKE_INSTALL_PREFIX:设置安装路径,如/libtorch,/opt/libtorch等
CMAKE_BUILD_TYPE:设置编译类型,debug/release,此处设置为release
CMAKE_CXX_STANDARD:c++标准编译选项
CMAKE_CXX_STANDARD_REQUIRED:设置为ON表示必须对c++标准进行指定
USE_CUDA:是否使用cuda,看模型选择,此处设置为ON
USE_CUDNN:与cuda一致
USE_OPENCV:没有用到opencv,可设置为OFF
…

(3)编译安装

cd pytorch
mkdir build && cd build
cmake -D CMAKE_BUILD_TYPE=RELEASE -D CMAKE_INSTALL_PREFIX=/opt/libtorch -D CMAKE_CXX_STANDARD=17 -D CMAKE_CXX_STANDARD_REQUIRED=ON -D USE_CUDA=ON -D USE_CUDNN=ON -D USE_OPENCV=OFF -D BUILD_CAFFE2_MOBILE=OFF -D BUILD_PYTHON=OFF -D BUILD_CAFFE2_OPS=OFF -D BUILD_TEST=OFF -D USE_TBB=OFF ..
make -j4
make install

注释:

  1. CMAKE_INSTALL_PREFIX就是项目中使用libtorch的目录
  2. make -j4,千万注意不要直接写成make -j,默认使用所有核的话,编译到8x%占用的内存会陡增导致编译卡住甚至死机
  3. make install成功之后
    在这里插入图片描述

4. 编译好之后使用

(1)proto

通过上述方式编译生成的libtorch会默认安装一个protoc,可能和已安装版本不一致;
会导致proto编译生成失败,比如报错
xxx.pb.h: #error this file was generated by an older version of protoc …

在这里插入图片描述

需要删除其中一个版本,删除方式参考文章 
https://blog.csdn.net/baidu_35692628/article/details/121526178

(2)CMakeLists.txt使用

set(CMAKE_PREFIX_PATH /opt/libtorch) 设置libtorch路径
include_directories( 包含libtorch头文件等

 


【参考文章】
libtorch编译c++版本
pytorch c++17重编libtorch
linux下源码编译生成libtorch
python setup.py install方式尝试
设置c++17编译选项

created by shuaixio, 2023.06.01

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/600156.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

基于springboot+Vue的汽车商城销售4s店服务系统

基于Vue构建一个汽车服务商城,邀请各大商家入住平台,主要包括邀请洗车店、邀请汽车配件商店、邀请4s店入住、邀请汽车美容店入住、邀请汽车修理店入住平台等。这个平台为了给商家和用户提供便利,用户可以更方便体验汽车服务,商家可…

SpringBoot源码分析:SpringBoot启动源码(一)

一、概述 SpringBoot启动的源码分为前期初始化,和后期启动两个部分,我们从这两个部分开始介绍。 二、前期初始化 SpringBoot前期初始化主要由下面三行代码组成。 进入SpringApplication.getSpringFactoriesInstances方法 最终进入SpringFactoriesLoade…

自学黑客(网络安全)入门小测试

「作者简介」:CSDN top100、阿里云博客专家、华为云享专家、网络安全领域优质创作者 「推荐专栏」:对网络安全感兴趣的小伙伴可以关注专栏《网络安全入门到精通》 最近突然出现好多自学黑客(网络安全)的文章,粉丝看到后…

chatgpt赋能python:Python关键词统计

Python关键词统计 Python是一种高级编程语言,为开发人员提供了许多功能和库。对于SEO来说,Python具有统计网站上的关键词和分析数据的重要功能。在本文中,我们将探讨Python关键词统计和如何在SEO中使用它。 什么是Python关键词统计 Python…

一图看懂 configparser 模块:配置文件解析器,资料整理+笔记(大全)

本文由 大侠(AhcaoZhu)原创,转载请声明。 链接: https://blog.csdn.net/Ahcao2008 一图看懂 configparser 模块:配置文件解析器,资料整理笔记(大全) 🧊摘要🧊模块图🧊类关系图&#…

vue的虚拟DOM

vue的虚拟DOM 什么是虚拟DOM 虚拟DOM提供了一个与平台无关的抽象层,将应用程序的界面表示抽象为一个虚拟的DOM树。这意味着开发人员可以使用相同的代码和逻辑来描述应用程序的用户界面,而不需要关心具体的平台实现细节。虚拟DOM允许开发人员使用一种统…

HashedWheelTimer详解

1、 前言 你好呀,我是歪歪。 今天我带大家来卷一下时间轮吧,这个玩意其实还是挺实用的。 常见于各种框架之中,偶现于面试环节,理解起来稍微有点难度,但是知道原理之后也就觉得: 大多数人谈到时间轮的时候都…

chatgpt赋能python:Python关键词用法介绍

Python关键词用法介绍 Python是一种高级编程语言,具有简洁易懂、易于学习等特点。作为一位10年的Python工程师,我发现掌握Python的关键词用法对于编程非常重要。因此,本文将重点介绍Python关键词的用法,并为您提供相关的代码示例…

iOS加固保护新思路

之前有写过【如何给iOS APP加固】,但是经过一段时间的思考,我找到了更具有实践性的代码,具体可以看下面。 技术简介 iOS加固保护是基于虚机源码保护技术,针对iOS平台推出的下一代加固产品。可以对iOS APP中的可执行文件进行深度…

小程序 自建本地数据库 本地存储

大家好哇,我是梦辛工作室的灵,在最近的开发过程中又遇到了一些问题,这次是关于本地存储的,在小程序面进行存储一些数据,本来就依靠小程序的本地储存API 就可以实现,但数据量小还好,如果数据量大…

chatgpt赋能python:Python开发:为什么适合SEO

Python开发:为什么适合SEO 在当今互联网上,搜索引擎优化(SEO)尤为重要。因为通过优化您的网站,在搜索引擎上排名更高可以增加您的网站流量和业务转化率。在这篇文章中,我们将探讨为什么Python是一个优秀的…

SpringMVC重点知识

目录 第一章 SpringMVC概念 0.引言 1.MVC 2.SpringMVC 3.SpringMVC的特点 4.JavaSE、JavaEE、javaME的区别 第二章 Spring MVC的使用 1.SpringMVC的配置 2.web.xml配置 3. 创建当前的请求控制器 4. 创建SpringMVC的配置文件 5.实现对首页index.xml的访问 6.Reques…

总结886

学习目标: 月目标:6月(张宇强化10讲,专业课,背诵15篇短文,考研核心词过三遍) 周目标:1800线性代数部分并完成错题记录,英语背3篇文章并回诵,检测&#xff0…

Throwable源码

介绍 Throwable类是Java语言中所有错误(errors)和异常(exceptions)的父类,直接子类为 Error 和 Exception。只有继承于Throwable的类或子类才能被抛出,还有一种是Java中的throw注解类也可以抛出。 public…

Stub实验

需求 将区域12设置为Stub区域,使区域12的路由设备不受外部链路影响(不接收4/5类LSA)降低区域12(末梢区域)设备压力,还能让区域12的PC1与外部PC3通信 配置步骤 1)配置接口信息 - 配置PC的IP地址 - 配置路由…

chatgpt赋能python:Python免费资料全揭秘:入门学习到深入应用

Python免费资料全揭秘:入门学习到深入应用 作为一种最具代表性的动态编程语言,Python在很多领域得到了广泛的应用,因其简单易学、开发效率快等特点而备受开发者的喜爱。如果你刚开始学习Python或是想提高你的Python编程技能,那么…

系统移植-环境搭建

安装系统 在基于ARM处理器的开发板上安装Linux系统 1.移植的目的 不同架构的处理器指令集不兼容,即便是相同的处理器架构,板卡不同驱动代码也不兼容 ; Linux是一个通用的内核并不是为某一个特定的处理器架构或板卡设计的,…

【生物力学】《人体骨肌系统生物力学》- 王成焘老师 - 第3章 - 人体运动测量与仿真分析

第2章回到目录后续暂时用不到 文章目录 3.1 概论1. 基于影像的运动捕捉技术2 . 其他运动捕捉技术 3.2 人体运动测量内容与设备3.2.1 人体运动测量内容1. 时间参数2. 空间参数3. 时空参数 3.2.2 运动捕捉系统的主要类型与工作特性1. 运动捕捉系统组成2. 运动捕捉系统主要类型与工…

chatgpt赋能python:用Python做股票分析

用Python做股票分析 在当今的股市中,数据分析和预测已经变得十分重要。Python作为最流行的编程语言之一,不仅易于学习,还有非常强大的数据处理和分析能力。在本文中,我们将探讨如何用Python进行股票分析。 数据收集 要进行股票…

Java网络开发(Tomcat)——遇到的 bug 汇总(持续更新):bug:

目录 引出:bug::bug::bug:Tomcat开发的bug汇总session不能转换成String类型在servlet的if处理流程中,没有加return后端传给jsp的数据,前端jsp不显示jsp的包没有导,用foreach方法的时候报错jsp的forEach方法报错jsp用foreach的时候&#xff0c…