【AR开发示例】实现AR管线巡检

news2024/11/26 13:38:51

写在前面的话

这是一篇旧文档，代码仓库见 https://gitee.com/tanyunxiu/AR-pipe

本文档是基于超图移动端SDK的AR模块开发的示例，仅供参考，SDK在持续迭代中，相关描述可能有变化。

示例介绍

这是一个使用AR查看墙内管线的基础示例程序。

涉及的关键词：SuperMap iMobile for Android、深度遮挡、ARCore、AREngine

数据准备

数据格式

本示例所使用到的管线模型格式为：gltf2.0 、gltf2.0介绍

示例数据

示例数据位于ar_occlusion\sampledata\PipeData.zip中

数据制作

  1. 使用blender制作模型（或在blender中导入模型）

为了防止在模型批量导出的过程中出现错误，请参考下图的场景集合的层级结构。

由于示例程序中采用OBB有向包围盒（ 它是包含该对象且相对于坐标轴方向任意的最小的长方体 ）的方式用于射线检测。为了在示例程序中能够准确点击模型，请通过将模型拆分成单个实体对象的方式，确保模型的冗余空间尽可能地小。

模型导入

  1. 批量导出模型

在菜单栏->"Scripting"中新建脚本，内容如下：

# exports each selected object into its own file
import bpy
import os

# export to blend file location
basedir = r"E:\3d\top_pipe\\"

if not basedir:
    raise Exception("Blend file is not saved")

view_layer = bpy.context.view_layer

obj_active = view_layer.objects.active
selection = bpy.context.selected_objects

bpy.ops.object.select_all(action='DESELECT')

for obj in selection:

    obj.select_set(True)

    # some exporters only use the active object
    view_layer.objects.active = obj

    name = bpy.path.clean_name(obj.name)
    fn = os.path.join(basedir, name)

    #bpy.ops.export_scene.fbx(filepath=fn + ".fbx", use_selection=True)
    bpy.ops.export_scene.gltf(filepath=fn, export_format="GLB", export_lights=False, use_selection=True)

    obj.select_set(False)

    print("written:", fn)

view_layer.objects.active = obj_active

for obj in selection:
    obj.select_set(True)

print("All save completed!")
  1. 选中场景集合中所有模型，执行脚本，导出模型。

批量导出脚本

  1. 查看模型文件夹。

模型组

  1. 至此，数据准备阶段已完成。

在后续构建的AR场景中，通过点击交互就可以查询出模型的名称。(Mesh2、Mesh3、Line…)。

若是需要通过点击交互，查询模型的其他属性信息（诸如规格、连接类型这些信息）。可通过创建一张属性表，建立模型名称与属性字段的一一对应的关系。通过查询模型名称，进而去查询对应的属性值。

属性查询

运行流程

开发环境

  • IDE：Android Studio 2021
  • Android Gradle Plugin Version：4.1.2
  • Gradle Version：6.5

注意事项:

Gradle 7.0版本后，请参考Android官方对于Gradle版本与Gradle插件的配套关系，把Gradle插件版本也升级到7.0及以上。

iMobile SDK

使用SuperMap移动GIS的iMobile for Android 的SDK 下载链接

示例程序涉及SDK中的以下so 和 jar

  • libimb2d_1100.so
  • com.supermap.data_v1100.jar
  • com.supermap.ar_v1100.jar
  • scenefrom-sm-11.0.1.aar

在工程中导入iMboile的AR模块

产品包

模块的build.gradle配置如下

plugins {
    id 'com.android.application'
}

android {
    compileSdk 28

    defaultConfig {
        applicationId "com.supermap.samplecode.occlusiondemo"
        minSdk 24
        targetSdk 28
        versionCode 1
        versionName "1.0"

        testInstrumentationRunner "androidx.test.runner.AndroidJUnitRunner"

        ndk{
        	//注意使用的产品包是32位还是64位
            abiFilters 'armeabi-v7a'
        }
    }

    buildTypes {
        release {
            minifyEnabled true
            proguardFiles getDefaultProguardFile('proguard-android-optimize.txt'), 'proguard-rules.pro'
        }
    }
    compileOptions {
        sourceCompatibility JavaVersion.VERSION_1_8
        targetCompatibility JavaVersion.VERSION_1_8
    }
    sourceSets {
        main {
            jniLibs.srcDirs = ['libs']
        }
    }
}

dependencies {
    implementation 'androidx.appcompat:appcompat:1.3.0'
    implementation 'com.google.android.material:material:1.4.0'
    implementation 'androidx.constraintlayout:constraintlayout:2.0.4'

    //SuperMap Data模块
    implementation files('libs/com.supermap.data_v1100.jar')
    //SuperMap AR模块
    implementation files('libs/com.supermap.ar_v1100.jar')

    //渲染框架
    implementation files('libs/sceneform-sm-11.0.1.aar')
    //第三方工具类
    implementation files('libs/eqtool-1.3.0.jar')
}

运行示例

  1. 许可设置

    此示例程序使用的是离线使用许可。

    在src/main/assets/目录下，默认存放一个试用许可"SuperMapiMobileTrial.slm"。在程序初次启动时，会拷贝至手机对应文件夹（…/PipeData/license）下。

    若许可过期或不可用，请先申请许可，然后拷贝至手机对应文件夹（…/PipeData/license）下，或在assets目录进行替换。

    注意：

    许可过期或不可用，会出现如下报错信息：

错误信息

若许可可用，仍出现上述异常信息，请从以下方面进行自查。

  • 使用的so与jar不是同一个产品包的产物
  • 申请的许可与对应产品包的版本不一致
  • 手机未开启存储读写权限
  1. 导入工程

方式一
打开工程

导入工程

指定对应文件夹

导入工程

方式二
在现有工程的settings.gradle中添加配置，实现模块导入

include ':ar_occlusion'
project(':ar_occlusion').projectDir=new File('D:\\OcclusionDemo')
  1. 导入模型数据

将模型数据拷贝至手机目录/SuperMap/PipeData。

具体路径配置，参考PathConfig.java

public static final String SD_CARD = android.os.Environment.getExternalStorageDirectory().getAbsolutePath();

/**
* 数据文件夹根路径
* MI 9 Transparent Edition\内部存储设备\SuperMap\PipeData
*/
public static final String PIPE_DATA_PATH = SD_CARD + "/SuperMap/PipeData";

/**
* 屋顶通风管道模型组文件夹路径
*/
public static String TOP_PIPE_DATA = PIPE_DATA_PATH + "/Model/top_pipe";

/**
* 地下管线模型组
*/
public static String UNDERGROUND_PIPE_DATA = PIPE_DATA_PATH + "/Model/underground_pipe";

/**
* 垂直墙面内的管线数据
*/
public static String VERTICAL_PIPE_DATA = PIPE_DATA_PATH + "/Model/pipe_v";
  1. 运行示例

运行示例程序

run

程序运行成功后，会在手机SuperMap/PipeData生成以下内容

  • ImgData
  • license
  • Log
  • app.cfg

run

app.cfg(default.cfg)、ImgData(包含一张名为“mark.png”的图片)可在工程的assets目录下找到

run

  1. 示例程序使用流程

  • 打印“mark.png”，将其布置在场景中

  • 启动程序，进入主界面

使用流程

  • 点击 “定位”，扫描“mark.png”,加载场景

使用流程

  • 点击 “视口模式”，行走浏览

    可通过手势调节开挖参数，具体操作见程序演示

  • 点击"卷帘模式"，行走浏览

    可通过手势调节显示范围，具体操作见程序演示

代码定位

场景加载

实现通过扫码的方式加载场景。

见MarkerConfig，涉及Marker的初始位置、图片资源路径的相关信息。

见ScanLayout，涉及布局设置和图片识别相关的接口（ImageScanner）调用。

/**
* 开启图片扫描功能
* @param arEffectView AR视图
* @param callback 扫描结果回调
*/
public void startImageScan(AREffectView arEffectView,ScanCallback callback){
    //...
}

/**
* 结束图片扫描
* @param arEffectView AR视图
*/
private void stopScan(AREffectView arEffectView) {
        //...
}

见DataManager，涉及数据的加载.

/**
* 添加管线场景
* @param parent 父节点
* @param dataPath 数据路径
* @param enabled 启用点击交互
* @param type 数据类型
*/
public void addPipeScene(AREffectElement parent,String dataPath,boolean enabled,Type type){
	//...
}

/**
* 添加管线场景
* @param parent 父节点
* @param dataPath 数据路径
* @param enabled 启用点击交互
*/
public void addPipeScene(AREffectElement parent,String dataPath,boolean enabled) {
	//...
}

视口模式

实现在视口模式下，对墙内管线模型进行开挖显示。

见ViewportFuncLayout，涉及布局设置。

见ExcavatorManager，涉及开挖参数的计算、坑洞对象渲染和屏幕显示范围构成的点集的更新。

private EffectView.OnUpdateListener onUpdateListener = new OnUpdateListener() {
    @Override
    public void onUpdate() {
        //开挖参数计算->坑洞对象渲染->更新屏幕显示范围构成的点集
    }

卷帘模式

实现类似卷帘的效果。

实现原理上，比视口模式更简单。直接根据分割线计算出屏幕显示范围构成的点集即可。

见RollingFuncLayout，涉及布局设置。

屏幕范围裁剪

见ScreenPointManager，统一管理屏幕显示范围构成的点集，当点集更新时，触发update回调。在回调事件里执行屏幕范围裁剪。

//在PipeActivity中
ScreenPointManager.getInstance().setOnUpdatePointListener(new ScreenPointManager.OnUpdatePointListener() {
    @Override
    public void update(List<ArrayList<int[]>> screenPoint,List<ArrayList<int[]>> bottomScreenPoint) {
    	//...裁剪屏幕显示范围
    }
});

开挖参数调节

在视口模式中，涉及通过手势去修改开挖参数。

在最初的版本中，是通过SeekBar的方式去修改开挖参数。

参数修改

参数修改

当前版本修改为通过手势去修改开挖参数。

参数修改

见CustomGesture，涉及单指、双指手势的定义。
见DigGestureManager，涉及开挖参数修改的手势管理。

见DynamicView，在布局上位于最顶部，用于接收MotionEvent，分发onTouch事件。

@Override
public boolean onTouch(View v, MotionEvent event) {
	//...
}

程序演示

注: 以下内容非最终成果，仅是迭代过程中的录屏。且对应模型数据需要结合对应场景，才可正确地显示。

v1.0

示例程序的录屏

补充说明

实现方式

对每一帧显示的AR内容进行裁剪的方式来实现只显示坑洞范围内的AR内容。

在EffectView#OnUpdateListener的onUpdate事件中，重复执行以下步骤。

  • 构建开挖参数ExcavationParameter
  • Excavator#generateHitPoint 生成碰撞点
  • Excavator#calculate 根据开挖参数进行计算
  • PitObject#updateMesh 更新坑洞对象的网格
  • OcclusionHelper#setUniquePointList 设置屏幕裁剪的范围
  • OcclusionHelper#refresh 刷新

简单示例

//遮挡设置
occlusionHelper = arView.getOcclusionHelper();
occlusionHelper.init(0.36f)
    .setRenderMode(OcclusionHelper.RenderMode.NORMAL);
  
List  roomBounds = Arrays.asList(
    new Point3D(-1, -1, -2),
    new Point3D(-1, 6, -2),
    new Point3D(6, 6, -2),
    new Point3D(6, -1, -2),
    new Point3D(-1, -1, -2)
);

//采用ARGeoPrism，构建“检测墙”
ARGeoPrism geoVerticalRegion = new ARGeoPrism();
geoVerticalRegion.setParentNode(arView);
//仅用作射线检测，渲染状态设置为false
geoVerticalRegion.setRenderable(false);
geoVerticalRegion.addPart(roomBounds,6.0f);

//创建开挖工具,在这之前，需确认AREffectView开启了遮挡设置
//Excavator所有子类使用方法一致
excavatorWall = new WallExcavator(geoVerticalRegion);
//坑洞纹理
Bitmap bitmap=null;
Bitmap bitmap2=null;
try {
    InputStream is = getApplicationContext().getAssets()
        .open("brown_mud_dry2.png");
    bitmap= BitmapFactory.decodeStream(is);
    InputStream is2 = getApplicationContext().getAssets()
        .open("wall_texture.png");
    bitmap2= BitmapFactory.decodeStream(is2);
    is.close();
    is2.close();
} catch (IOException e) {
}

//创建坑洞渲染对象
pitWall = new PitObject(excavatorWall)
    .setTexture(bitmap,bitmap2);
  

//在每一帧刷新时调用（通常使用EffectView.addOnUpdateListener(EffectView.OnUpdateListener)添加帧监听事件）
arView.addOnUpdateListener(()->{
    //开挖计算墙面碰撞点 arView为AREffectView、screenPointX/Y为对应的屏幕坐标
    //以屏幕中心计算碰撞点
    Point3D hitPoint = excavatorWall
                .generateHitPoint(arView, screenPointX, screenPointY);
    if (hitPoint!=null){
        //desc-执行开挖的顶点计算(开挖参数)
        excavatorWall.calculate(ExcavationParameter.builder()
                                .setRadius(radius)
                                .setOffset(offset)
                                .setInnerMargin(0)
                                .setCenterPoint(hitPoint)
                                .build());
    }
    //渲染坑洞结果
    pitWall.updateMesh();
                                  
    if (occlusionHelper.isEnabled()){
        //desc-执行画面裁剪
        ArrayList  screenPoint = null;
        if (excavatorWall !=null){
            //计算屏幕坐标
            screenPoint = excavatorWall.getScreenPoint(null);
            if (screenPoint!=null){
                //根据屏幕坐标刷新裁剪范围
                occlusionHelper.setUniquePointList(screenPoint).refresh();
            }
        }
    }
})

AR开发专栏

原生开发？就用这做AR

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1606865.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

uniapp 如何区分目前运行环境（app、web、mp-weixin）

uniapp 如何区分目前运行环境（app、web、mp-weixin）

platform 区分 iOS、Android uniplatform 区分 app、web、mp-weixin ....
阅读更多...
fatal error LNK1120: xxxx unresolved externals

fatal error LNK1120: xxxx unresolved externals

场景&#xff1a; A项目Library&#xff0c;编译环境VS2008DDKWarizd, 编译平台WIN7XP; B项目驱动, 编译环境VS2008&#xff0c;编译平台Rlease32位&#xff0c;DDK版本相同,都是7.0 在B项目集成A项目的32位LIB库时&#xff0c;出现此错误&#xff0c;看错误很常见的找不到符号…
阅读更多...
Linux【实战】—— LAMP环境搭建 部署网站

Linux【实战】—— LAMP环境搭建 部署网站

目录 一、介绍 1.1什么是LAMP&#xff1f; 1.2LAMP的作用 二、部署静态网站 2.1 虚拟主机&#xff1a;一台服务器上部署多个网站 2.1.1 安装Apache服务 2.1.2 防火墙配置 2.1.3 准备网站目录 2.1.4 创建网站的配置文件 2.1.5 检查配置文件是否正确 2.1.6 Linux客户端…
阅读更多...
润石科技（RUNIC）汽车电子应用方案和物料选型

润石科技（RUNIC）汽车电子应用方案和物料选型

一、润石科技&#xff08;RUNIC&#xff09;简介 江苏润石科技有限公司是一家专注于高性能、高品质模拟/混合信号集成电路研发和销售的高科技半导体设计公司。公司主要产品线分为两类&#xff1a;信号链和电源管理&#xff0c;其中信号链包含运算放大器、比较器、模拟开关、数…
阅读更多...
Mac 部署 GPT-2 预训练模型 gpt2-chinese-cluecorpussmall

Mac 部署 GPT-2 预训练模型 gpt2-chinese-cluecorpussmall

文章目录 下载 GPT-2 模型快速开始 GPT-2 下载 GPT-2 模型 https://huggingface.co/uer/gpt2-chinese-cluecorpussmall git clone https://huggingface.co/uer/gpt2-chinese-cluecorpussmall # 或单独下载 LFS GIT_LFS_SKIP_SMUDGE1 git clone https://huggingface.co/uer/gpt…
阅读更多...
基于Spring Boot+Vue的校园网上店铺，开启便捷购物新模式

基于Spring Boot+Vue的校园网上店铺，开启便捷购物新模式

作者介绍&#xff1a;✌️大厂全栈码农|毕设实战开发&#xff0c;专注于大学生项目实战开发、讲解和毕业答疑辅导。 &#x1f345;获取源码联系方式请查看文末&#x1f345; 推荐订阅精彩专栏 &#x1f447;&#x1f3fb; 避免错过下次更新 Springboot项目精选实战案例 更多项目…
阅读更多...
递归 python

递归 python

↵一、简单理解 解决问题的一种方法&#xff0c;它将问题不断的分成更小的子问题&#xff0c;直到子问题可以用普通的方法解决。通常情况下&#xff0c;递归会使用一个不停调用自己的函数。 【注】&#xff1a;每一次递归调用都是在解决一个更小的问题&#xff0c;如此进行下…
阅读更多...
Leetcode - 128双周赛

Leetcode - 128双周赛

目录 一&#xff0c;3110. 字符串的分数 二&#xff0c;3111. 覆盖所有点的最少矩形数目 三&#xff0c;3112. 访问消失节点的最少时间​编辑 写法一&#xff1a;朴素 Dijkstra&#xff08;适用于稠密图&#xff0c;即边比较多的图&#xff09; 写法二&#xff1a;堆优化 …
阅读更多...
⑤【Shiro】SpringBoot整合Shiro，实现登录认证

⑤【Shiro】SpringBoot整合Shiro，实现登录认证

个人简介&#xff1a;Java领域新星创作者&#xff1b;阿里云技术博主、星级博主、专家博主&#xff1b;正在Java学习的路上摸爬滚打&#xff0c;记录学习的过程~ 个人主页&#xff1a;.29.的博客 学习社区&#xff1a;进去逛一逛~ ⑤【Shiro】SpringBoot整合Shiro&#xff0c;实…
阅读更多...
作为Boss，还在写代码。what？赶紧改掉这个坏毛病

作为Boss，还在写代码。what？赶紧改掉这个坏毛病

有些创业中的老板&#xff0c;经常或者偶尔也要写代码&#xff0c;我听了很震惊呀&#xff0c;这叫创业吗&#xff1f;这不是给员工打工吗&#xff1f;其他重要的事情谁来干&#xff0c;这个毛病一定要改。 一、比起写代码&#xff0c;你还有更重要的事情要做 作为BOSS和创业…
阅读更多...
.NET 爬虫从入门到入狱

.NET 爬虫从入门到入狱

目录 前言 1.&#x1f4a1;使用HttpClient爬取数据 2.&#x1f680;模拟User-Agent 3.&#x1f935;使用HTML解析库 3.&#x1f44c;前端Price显示 4.&#x1f331;运行实例 获取金价Au 5.&#x1f9fe;使用正则表达式解析 6.&#x1f4ab;获取BTC价格 7.✨获取CSDN热点…
阅读更多...
【网站项目】书籍销售系统小程序

【网站项目】书籍销售系统小程序

&#x1f64a;作者简介&#xff1a;拥有多年开发工作经验&#xff0c;分享技术代码帮助学生学习&#xff0c;独立完成自己的项目或者毕业设计。 代码可以私聊博主获取。&#x1f339;赠送计算机毕业设计600个选题excel文件&#xff0c;帮助大学选题。赠送开题报告模板&#xff…
阅读更多...
【云计算】安全组和网络ACL的区别

【云计算】安全组和网络ACL的区别

安全组和网络ACL的区别 ACL&#xff08;Access Control List&#xff09;和 安全组&#xff08;Security Group&#xff09;是两种不同的网络安全控制机制&#xff0c;通常用于管理云计算平台中的网络访问权限。它们在功能和实现上有一些显著的区别&#xff1a; 辨析 范围不同&…
阅读更多...
大数据------额外插件及技术------Git（完整知识点汇总）

大数据------额外插件及技术------Git（完整知识点汇总）

Git 定义 它是分布式版本控制工具&#xff0c;主要用于管理开发过程中的源代码文件&#xff08;如&#xff1a;Java类、xml文件、html页面等&#xff09;&#xff0c;在软件开发过程中被广泛应用 作用 代码回溯&#xff1a;快速回到某一代码历史版本版本切换&#xff1a;同一个…
阅读更多...
【深度学习】Attention、Self-Attention、Multi-Head Attention

【深度学习】Attention、Self-Attention、Multi-Head Attention

一、Attention 在CV领域&#xff0c;注意力机制通常分为通道注意力和空间注意力或者两者结合。 一张图像经backbone得到的特征通常包括多个通道&#xff0c;每个通道是一个像素矩阵&#xff0c;每个通道对任务的贡献不尽相同&#xff0c;单个通道的特征图中每个像素对任务的贡…
阅读更多...
户外旅行摄影手册，旅游摄影完全攻略

户外旅行摄影手册，旅游摄影完全攻略

一、资料前言 本套旅游摄影资料&#xff0c;大小295.47M&#xff0c;共有9个文件。 二、资料目录 《川藏线旅游摄影》杨桦.彩印版.pdf 《户外摄影指南》(Essential.Guide.to.Outdoor.photography.amateur)影印版.pdf 《旅行摄影大师班》(英)科尼什.扫描版.PDF 《旅行摄影…
阅读更多...
Java垃圾回收1

Java垃圾回收1

1.对象什么时候可以被垃圾器回收 1.垃圾回收的概念 为了让程序员更专注于代码的实现&#xff0c;而不用过多的考虑内存释放的问题&#xff0c;所以&#xff0c; 在Java语言中&#xff0c;有了自动的垃圾回收机制&#xff0c;也就是我们熟悉的GC(Garbage Collection)。 有了垃圾…
阅读更多...
网络编程ServerSocketChannel

网络编程ServerSocketChannel

ServerSocketChannel 1 非阻塞 vs 阻塞1.1 阻塞1.2 非阻塞1.3 多路复用 2 Selector2.1 创建2.2 绑定 Channel 事件2.3 监听 Channel 事件2.4 &#x1f4a1; select 何时不阻塞 3 处理 accept 事件&#x1f4a1; 事件发生后能否不处理 4 处理 read 事件4.1 &#x1f4a1; 为何要…
阅读更多...
vscode绿绿主题setting config

vscode绿绿主题setting config

下载插件Green Tree Theme 选greentree ctrl shift p找到setting {"workbench.colorTheme": "Green Tree","editor.fontSize": 16.5, // 字号"workbench.colorCustomizations": {"[Green Tree]": {"activityBarBadge.…
阅读更多...
【Lattice FPGA 开发】Modelsim与Diamond联合仿真

【Lattice FPGA 开发】Modelsim与Diamond联合仿真

本文讲解Modelsim与Diamond进行联合仿真步骤&#xff0c;以及对遇到问题的解决与说明。 文章目录 软件版本0. Diamond设置文件为仿真文件特别注意 1. Diamond设置仿真软件为Modelsim2. Modelsim编译Lattice的库文件2.1 新建文件夹存放库文件2.2 Modelsim中建立新的仿真库2.2.1…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023