CE-Net: Context Encoder Network for 2D MedicalImage Segmentation

news2024/9/20 18:37:16

Title:用于二维医学图像分割的上下文编码器网络

摘要:在医学图像分割领域中,基于UNet已经成为主流的应用框架。但是在UNet结构中连续的池化和跨步卷积操作会导致一些空间信息的丢失。在本文中提出了一个上下文编码器网络(简称为CE-Net)

CE-Net主要包含三个主要部分:特征编码器模块,上下文特征提取模块和特征解码器模块。使用预训练的ResNet块作为固定特征提取器。上下文提取模块由新提出的密集卷积(DAC)块和残差多核池化块(RMP)组成。

Introduction

U-Net及其变体的一个常见限制是,连续的池化操作或卷积跨步降低了特征分辨率,以学习日益抽象的特征表示,直观地说,在中间阶段保持高分辨率的特征图可以提高分割性能。但是,它增加了特征图的大小,对于加速训练和缓解优化的难度来说并不是最优的。

因此,在加速训练和保持高分辨率之间需要权衡。一般来说,U-Net结构可以被认为是编码器-解码器结构。编码器的目标是逐步降低特征图的空间维度,捕获更多的高级语义特征。解码器的目标是恢复物体细节和空间维度。为了提高分割性能,在编码器中捕获更多的高级特征,在解码器中保留更多的空间信息是很自然的。

本文提出了一种新的密集空洞卷积(DAC)模块来应用空洞卷积。原有的UNet架构在编码路径中采用连续的3x3卷积核池化操作,在有限的缩放范围内捕获多尺度特征。本文提出的DAC模块可以通过四个级联分支注入多尺度的空洞卷积来捕获更广泛和更深的语义特征。--DAC捕获更多的高级特征

还提出了一个基于空间金字塔池化的残差多核池化(RMP)。RMP块通过使用各种大小的池化操作进一步编码从DAC模块提取的对象的多尺度上下文特征,并且不需要额外的学习权重--RMP保留更多的空间信息

综上所述,DAC块被提议用多尺度的atrous卷积来提取丰富的特征表示,然后RMP块被提议用多尺度的池化操作来获得进一步的上下文信息。

方法

网络的整体架构如下图所示:

特征编码器模块(加入了残差连接其余相似--略)

上下文提取模块

上下文提取模块由DAC模块和RMP模块组成。这个上下文提取模块提取上下文语义信息,生成更高级的特征映射。

DAC模块:DAC模块的结构如下图所示

在四个级联中均设置了空洞卷积,DAC模块有4个级联分支,并且空洞卷积的数量也逐渐增加。每个分支的感受野是3,7,9,19应用了不同大小的感受野。并且在每个分支中我们应用一个1x1的卷积来校正线性激活。通常情况下,大感受野的卷积可以为大对象的提取生成更抽象的特征。而小感受野的卷积对小对象更好。通过组合不同的空洞率的空洞卷积。DAC块能够提取不同大小对象的特征。

RMP模块

分割中的一个挑战是医学图像中对象的巨大变化。例如,中晚期肿瘤可能比早期肿瘤大得多。在本文中提出了一种残差多核池化来解决这个问题,它主要依赖于多个有效的视野来检测不同大小的对象 。感受野的大小决定了我们可以使用多少多少上下文信息。

如下图所示,本文所提出的RMP编码具有4个不同大小的感受野的全局上下文信息

四级输出包含不同大小的特征图,为了减少计算成本,在每个级别的池化后使用1x1卷积,它将特征图的维数减少到原有维度的1/N,然后通过双线性插值对低维特征图进行上采样,以获得与原始特征图相同的特征大小的特征

特征解码器模块

 上尺度操作通过线性插值增加图像大小,而去卷积(也称为转置卷积)使用卷积操作来放大图像。直观地说,转置卷积可以学习自适应映射以恢复具有更详细信息的特征。因此,我们选择使用转置卷积来恢复解码器中的较高分辨率特征。

损失函数

使用DiceLoss作为这个模型的损失函数

最终总的损失函数是两个损失函数的加权和

其中第二个损失表示避免过度拟合的正则化损失

总结

本文提出的CE-Net。与U-Net相比,所提出的CE Net在特征编码器中采用了预训练的ResNet块。新提出的密集空洞卷积块和残余多核池被集成到ResNet修改的UNet结构中,以捕获更多高级特征并保留更多空间信息。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/13290.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

数据分析师的Windows装机必备软件

文章目录1. Python安装包列表2. Office 3653. Visual Studio Code4. Git5. 向日葵6. 聊天软件7. OneDrive8. iCloud9. 网易邮箱大师10. 搜狗输入法11. 阿里云盘对于数据分析师,装机是再经常不过的一件事情,但是每次装机都要想装什么好,找来找去,故列出来供大家参考. 当然, 系统…

CentOS7自有服务和软件包

文章目录什么是服务管理服务的命令:systemctl列出服务服务启停开机自动启动服务服务状态软件包RPM查询安装了什么软件卸载某个软件安装某个软件查询文件所属的包名查询软件安装后,生成了哪些文件YUM命令epel-release什么是服务 什么是程序(C…

最优化——凸优化概述

引言 这是中科大最优化理论的笔记,中科大凌青老师的凸优化课程,详尽易懂,基础扎实。不论是初学者还是从业多年的人,都值得系统地好好学一遍。 本文主要介绍什么是凸优化,通过几个例子来阐述什么是凸优化问题。让大家…

3年测试经验,面试27k自动化测试岗被diss,想给进阶自动化的人提个醒...

毕业后一直从事功能测试的工作,时间久了就没有一点想法,天天都是点点点,也没有一点提升,看着身边一个个的人都忙得不可开交,打听之后知道他们都是在技术上忙,而不像我,在杂事上忙,特…

vue 使用screenfull 实现全屏展示,全局水印实现, 以及全屏放大后部分组件无法使用,水印无法全屏显示问题的解决

需求:1. web项目中看板页面需要单独全屏显示 2. 项目全局增加水印,水印文字为当前用户登录姓名,登录页不显示水印 出现问题描述 单页面进行全屏显示,下拉,时间选择器,抽屉等组件被 全屏覆盖到下一层&…

MyBatis入门基础

目录 1.什么是MyBatis 2.第一个MyBatis查询 2.1 准备工作 2.2 实际操作 2.2.1 定义接口 2.2.2 创建XML实现上述接口 2.3 单元测试 2.3.1 单元测试的优势 2.3.2 创建并使用单元测试 2.3.3 有关断言 3.增删改的基本操作 3.1 插入操作 特殊的添加:返…

【PyTorch】Torchvision

文章目录三、Torchvision1、Dataset2、DataLoader2.1 test_data2.2 test_loader2.3 drop_last2.4 shuffle三、Torchvision PyTorch官网:https://pytorch.org 1、Dataset 数据集描述:https://www.cs.toronto.edu/~kriz/cifar.html 数据集使用说明&#…

SpringCloud案例day05

SpringCloud Gateway网关 案例1&#xff1a;环境搭建 可以复制 Service-A9001 改成Gateway-C9009 》1&#xff1a;创建工程导入依赖 <dependency><groupId>org.springframework.cloud</groupId><artifactId>spring-cloud-starter-gateway</artif…

汽车全景视频制作让企业营销传播无界长久

全景视频制作 全景VR视频&#xff0c;顾名思义就是能够使我们看到拍摄点周围360景致的视频。传统视频拍摄受限于镜头视角&#xff0c;所以我们只能看到镜头前方180内的景物。而全景VR视频能够看到周围360以及上下180各个角度的一切景物&#xff0c;用户能够更加多方位的观赏视频…

可观测性-Event-指标事件采样策略总结

文章目录前言采样的几种策略简单随机采样周期性完整采样基于条件的采样前言 在默认情况下&#xff0c;系统会采集所有追踪&#xff08;Tracing&#xff09;的数据。但是如果系统比较复杂&#xff0c;采集的端点比较多的时候&#xff0c;对存储压力比较大&#xff0c;这个时候我…

Educational Codeforces Round 135 (Rated for Div. 2)

A:思维 题意&#xff1a;箱子里有N个颜色的球&#xff08;用下标代表不同的颜色&#xff09;&#xff0c;每个颜色的球对应一定的数量&#xff0c;你会进行多次拿球的操作&#xff0c;当箱子里的球颜色一致时&#xff0c;你就不能再拿球了&#xff0c;问最后颜色一致的球是哪个…

免疫抑制作用的转录抑制分子

科研人员发现&#xff1a;社交失败导致了小鼠焦虑行为&#xff0c;进而抑制了化疗药物的治疗过程&#xff0c;加速了肿瘤的发展。在正常小鼠中&#xff0c;人为给予外源性糖皮质激素会使得 Tsc22d3(一个具有很强免疫抑制作用的转录抑制分子)在肿瘤浸润树突细胞(TIDC)的表达上调…

Q3营收同比翻三倍,踩猛“油门”零跑必将领跑?

近日&#xff0c;零跑汽车公布三季度财报。从财报成绩来看&#xff0c;有喜有忧。喜的是销量营收同比环比均出现大幅度增长&#xff0c;忧的是亏损同比扩大86.11%。 营收同比猛增398.5%&#xff0c;销量能否穿越迷雾&#xff1f; 详细来看&#xff0c;三季度零跑汽车销量3.56万…

【附源码】计算机毕业设计JAVA旅行指南网站

项目运行 环境配置&#xff1a; Jdk1.8 Tomcat8.5 Mysql HBuilderX&#xff08;Webstorm也行&#xff09; Eclispe&#xff08;IntelliJ IDEA,Eclispe,MyEclispe,Sts都支持&#xff09;。 项目技术&#xff1a; Springboot mybatis Maven Vue 等等组成&#xff0c;B/…

HOOPS学习笔记

Hoops简介 HOOPS Visualize由一套集成的组件组成&#xff0c;可快速开发高性能设计、可视化和工程应用程序。HOOPS 3DF在每个组件中保持平台独立性&#xff0c;在Windows、Linux和Mac OS X上提供跨平台解决方案。 HOOPS Visualize包含如下组件&#xff1a; 1.HOOPS/3dGS - HO…

vue+express+mysql+elementUI实现前后端交互增删改查

简介&#xff1a;使用 Vue koa koa2-router mySql elementUI实现前后端交互 页面整体效果图&#xff1a; 编辑页面&#xff1a; 添加页面&#xff1a; 删除操作&#xff1a; 数据库客户端使用Navicat for mysql 当然你需要下载安装 在数据库新建 stuInfo 表和表结构 st…

Github点赞接近 100k 的Spring Boot学习教程+实战项目推荐

很明显的一个现象&#xff0c;除了一些老项目&#xff0c;现在 Java 后端项目基本都是基于 Spring Boot 进行开发&#xff0c;毕竟它这么好用以及天然微服务友好。不夸张的说&#xff0c;Spring Boot 是 Java 后端领域最最最重要的技术之一&#xff0c;熟练掌握它对于 Java 程序…

SpringBoot-快速入门

目录 SpringBoot 概念 Spring缺点 SpringBoot 功能 快速入门案例&#xff1a;需求 案例&#xff1a;实现步骤 示例 小结 快速构建SpringBoot工程 SpringBoot 概念 SpringBoot提供了一种快速使用Spring的方式基于约定优于配置的思想&#xff0c;可以让开发人员不必在配置…

QML地图Map中使用QPainterPath,并显示任意点经纬度位置

QML地图Map中提供了供绘制图形的组件&#xff0c;例如MapPolyline&#xff0c;MapCircle等&#xff0c;但是这些组件在绘制复杂轨迹时就显得功能不够全面&#xff0c;因此我将QPainterPath在Map中进行使用并进行绘制&#xff0c;并使用C和Qml中的函数进行相互调用计算获取点屏幕…

macOS 的「预览」有几种用法

如果要评选 macOS 最低调的 App &#xff0c;「预览」可能就会位列其中之一。「预览」和 macOS 结合异常紧密&#xff0c;甚至让人都会遗忘它还是个 App。毕竟大多数的时候&#xff0c;提到「预览」就会想到操作系统的一部分。而实际上&#xff0c;「预览」那「瘦小」的身躯之内…