底层硬件创新夯实算力、应用创新贴近业务:英特尔至强助力下的VR医疗培训系统

news2024/11/22 19:09:31

早在1935年,科幻小说家斯坦利·温鲍姆的小说《皮格马利翁的眼镜》中,就构想了一款实现虚拟现实(VR)的眼镜。近年来,除游戏、娱乐等大众熟知的应用场景外,VR逐渐涉足医疗、教育、生产制造等各种领域。

以医疗为例,VR可能帮助减轻医疗资源有限且分布不均、诊断方式单一等问题,实现远程诊疗、远程医疗教学等一系列新的业态,从而进一步成为传统医学手段的有效补充。

2016年,一名八十多岁的右半结肠癌患者成功接受了肿瘤切除手术,并首次通过VR对手术全程进行了直播,这也是国内较早用虚拟现实身临其境般“围观”的手术。

尽管在此之后,不少医院都开展了VR方面的研究。但在2016年之后经历了起起伏伏,甚至受到了诸多质疑后,VR的风头远不及同时期的人工智能创业。

一位业内专家表示,“我们不得不承认,VR技术还并没有到实质生产的真正成熟期,尤其对于医疗这样特殊的行业,真正走向高可用阶段,还有很长一段路要走,也要经历不断的试错和验证。”

不过,外界对VR在医疗行业的期待,也正在慢慢走向现实。根据Perkins Coie的一份数据,2021年VR/AR在医疗健康领域的应用渗透率最高,超过35%,颇有一种“虽迟但到”的感觉。引入VR系统之后,一些走在前列、勇于尝试的医院体验到了技术带来的真实便利,为自身以及行业的智慧医疗之路开了一个好头。


01 VR与医疗的结合,是不是镜中之花?

自“Virtual Reality”概念被提出以来,各行业陆续开展了丰富的有关VR设备的研究,而VR在医疗领域的应用可以追溯到上世纪80年代。

1985年,美国国立医学图书馆就开始人体解剖图像数字化研究,并利用虚拟人体开展虚拟解剖学、虚拟放射学及虚拟内窥镜学等学科的计算机辅助教学。1994年英国曼斯特皇家医院成立了欧洲第一个虚拟现实开发中心,用于最小刺入疗法。

2003年初,我国第一军医大学宣布完成了国内首例女虚拟人的数据采集。

而在此后的多年里,VR技术的发展经历了一段蛰伏期,在医疗领域似乎也未掀起太多水花。难道VR与医疗的结合终究只是“镜中之花”?

火山引擎的一位相关专家向雷峰网表示,“任何新技术的发展都会经历5个阶段,科技诞生的促动期,过高期望的峰值期,泡沫化的低谷期,稳步爬升的光明期和实质生产的高峰期,这也就是为什么大家感知到了VR概念和技术从热潮到了低谷。而如今,VR重新走进大家的视线,受到各行各业的重视。从发展史来看,VR已经进入了稳定爬升的光明期。”

从行业数据也可以看到,融合VR技术的各类前沿应用在医疗领域正在发挥越来越重要的作用。

国际数据公司(IDC)的数据显示,全球AR/VR支出的五年复合年增长率为78.3%。预计到2023年,全球AR/VR支出将达到1600亿美元,远高于2019年预测的168亿美元。而在医疗领域,AR/VR医疗正在经历大幅度的提升,其预期复合年增长率为33.36%,市场价值预计将从2018年的6.217亿美元增至2024年的34.97亿美元。

行业巨头也正在进一步布局VR及其在医疗领域的产品和解决方案。2020年2月,强生发布了与OSSOVR合作开发的VR头盔,专门用于培训外科手术医生;今年5月,西门子医疗开始提供沉浸式虚拟现实(VR)培训服务,帮助外科医生和技术人员进行术中质量控制和手术工作流程指导。

02 医院能从VR应用中得到什么?

除了医疗巨头的积极布局,VR技术也慢慢进入实际使用方,即医院管理者的视野中。

近年来,一系列行业政策的发布对医院的收支平衡能力、生存能力都提出了巨大挑战。医院需要主动求变,将目光投向医院的智慧化升级,提高医院的服务能力和生存竞争能力。对于更高级别的医院来说,除了日常的诊断工作,他们还承担了重要的医学教学和基层帮扶任务。

北京某三甲医院院长表示,“VR技术在医疗体系是十分重要的,尤其是医学教育。而医学教育既面向医务工作者,也承担面向老百姓的科普教育。通过VR技术,让他们身临其境地感受医疗知识,是一个非常好的途径。”

他认为,医疗与各行各业一样,实现数字化转型和智能化发展,是推动公立医院高质量发展的核心内涵。

2021年,英特尔携手火山引擎,帮助北京某三甲医院基于全新的VR医疗培训应用,打造集人工智能、全息/VR和物联网等技术为一体的医学应急教育培训中心,并有效提升了医院在医疗培训领域的工作效能。

火山引擎总裁谭待透露,合作有两个部分:一个是VR远程巡诊,通过技术来解决时间和空间对专家资源的限制;另一个是VR急诊培训,通过仿真、沉浸式的VR场景,为急诊人员进行辅导和培训。

从系统部署的具体实施路径来看,北京某三甲医院VR医疗培训方案的整体架构,由部署在第一现场 (病房)、边缘云和第二现场的不同处理设备和显示终端 (VR 眼镜)组成。

其中,第一现场部署有音视频采集设备 (如全景高清摄像头),这些数据将经由5G网络被高速同步到部署在医疗培训中心附近的边缘云中进行音视频渲染和数据计算处理。

经渲染后的VR视频流,将在编码压缩后通过高速5G网络推送到第二现场的VR眼镜中,方便使用者 (教学中的医生、医学生以及志愿者等) 进行VR远程查房、VR远程指导、AED (自动体外除颤器) VR无线急救等行为。

合作过程中,VR培训系统面临着一些通用性的行业挑战:

首先,远程实时查房等VR应用带来海量的数据采集、处理和传输需求,如全部工作负载均通过远端数据中心/云服务完成,势必带来巨大网络压力。而VR应用中的沉浸式、交互式体验,也需要方案能有效缩短系统的端到端整体时延;

其次,医疗场景的特殊性需要VR应用能在现有网络带宽下,提供更高分辨率的视频格式 (例如8K) 来展现各类细节,这对视频编解码过程的优化能力提出了巨大挑战。

面对两大挑战,方案的核心关键词就是两点:更快、更真。谭待表示,“快和真在很多时候是矛盾的,破解这个矛盾就需要有更好的算法,更强的工程能力和更好的基础设施来支持。”

火山引擎与英特尔一起,通过引入英特尔® 高级矢量扩展512 (英特尔® AVX-512),优化BVC编解码器,为边缘云数据中心的渲染计算处理提供强劲支撑,来使VR应用加速增效,实现超清、高质视频的实时快速解码。

BVC编解码器是火山引擎多媒体实验室自研产品,在VR医疗培训应用方案中,用以提高VR医疗培训应用使用时的沉浸感和交互感,以及支持8K视频分辨率带来的编码与传输压力。

英特尔® AVX-512是由英特尔提供的单指令多数据 (Single Instruction Multiple Data,SIMD) 指令集。得益于其在寄存器位宽等方面的优势,内置英特尔® AVX-512 指令集的英特尔® 至强® 可扩展处理器,在音视频处理、数据加密压缩以及深度学习等高密度计算处理场景中有着出色的性能表现。

而最新一代的第四代英特尔® 至强® 可扩展处理器更内置一系列加速器,包括全新的AI加速器——英特尔® 高级矩阵扩展(英特尔® AMX),覆盖包括训练和微调在内的更多深度学习使用场景,可以为不断变化且要求日益增高的应用提供更为可观的计算性能。

围绕着医院部署VR的需求,英特尔与火山引擎一起,分别针对BVC编解码器中处理器资源占用比较高的插值模块和一些基础计算模块,通过英特尔® AVX-512 指令集进行优化,以提高视频编解码和压缩的能力,从而满足医院VR医疗培训应用影像压缩率高、编码速度快、占用带宽低等的复杂需求。

英特尔云及行业解决方案集团首席技术官吴闻新表示,“总体来看,从视频的采集、渲染到推送,我们最终达到了医院的要求,延迟在20毫秒以内,也能在15M的低带宽下,实现8K的效果,有效解决医生教学间的画面精细度问题,为带教和问诊提供了更加科学的现场参考环境。”

目前,在三方合力之下,该北京三甲医院医学应急教育培训中心已经获得成功部署,并开展了大量的医疗培训实践,并且将培训内容VR化重复使用,达到了一次投入、永久使用的效果。每次使用的边际成本几乎仅有5G流量费,有效帮助压降培训成本,提升经济效益。

除了大幅提升培训效能外,这套VR应用解决方案还能为医生们提供更为科学、真实的现场带教环境,更能为边远、基层地区的受训医生提升业务水平提供前所未有的途径。更重要的一点是,有别于传统远程会诊,借助VR医疗培训应用,可以让专家通对一线医生进行远程指导,并能和病人实时交流,为远程智慧医疗带来了更多可能。VR技术在医疗健康领域的成功实现,对于国家一直倡导的区域医联体建设、强化基层诊疗能力,都将产生深远的影响。

03 云边协同,医疗VR如何普惠“健康中国”?

依托VR医疗培训方案的成功落地和有效支持,医学应急教育培训中心实现了培训模式创新,这也是近年来诸多医疗政策引导与医院智能化转型的真实写照。

2021年11月3日,国家卫生健康委印发《“千县工程”县医院综合能力提升工作方案(2021-2025年)(以下简称《工作方案》)。

《工作方案》明确,推动省市优质医疗资源向县域下沉,结合县医院提标扩能工程,补齐县医院医疗服务和管理能力短板,逐步实现县域内医疗资源整合共享,到2025年,全国至少1000家县医院达到三级医院医疗服务能力水平,发挥县域医疗中心作用,为实现一般病在市县解决打下坚实基础。

而从另一方面看,以“东数西算”全面启动、年中3000亿新基建补充投资以及5G规模化应用加快等为标志,2022年的中国在重大算力与数字基础设施建设工程上迈出了新步伐,进一步助推着企业的数智化转型。

英特尔与火山引擎的合作,为这两个宏观建设目标踏出了先行的一步,在一定程度上验证了VR在医疗健康领域的发展潜力。

火山引擎相关专家认为,如今VR在医疗行业的创新应用和实验,尤其是医疗培训、辅助诊疗和临床辅助中,正逐步显现出其不可替代的优势和价值。

“我们不得不承认VR技术还并没有到实质生产的真正成熟期,尤其对于医疗这样特殊的行业,真正走向高可用阶段,还有很长一段路要走,也要经历不断的试错和验证。因此,更需要从现在开始探索和共创,在技术本身高速发展的同时,尽早寻找到VR和医疗结合的最佳实践,推动VR医疗的发展,辅助整体数字化医疗发展。”

而从“技术与医疗结合的实践”角度而言,吴闻新表示,将VR视为一个重要的用户入口,也是英特尔云边协同解决方案中的重要一环,推动医疗行业加速数字化变革。英特尔的云边协同架构将在至少三个方面给医疗机构带来价值。

“第一,让数据处理更快速的同时,兼顾数据安全;第二,让医疗应用更加智能,例如利用AI技术辅助基层医生的诊断和治疗;第三,让医疗服务更加普惠,通过VR的沉浸式交互模式,让边远地区、社区诊所学到三甲医院的诊疗经验,也可以让患者得到大医院的医生诊治,推动智慧医疗在中国的推广普及。”

2021年12月28日,工信部等十部门联合发布《“十四五”医疗装备产业发展规划》,其中,提出要推进“5G+”医疗健康新模式发展:

推动智慧医疗健康装备和应用创新,支持远程问诊、远程会诊等加快发展,为构建有序有效的分级诊疗格局、促进优质医疗资源下沉服务基层打好基础、做好支撑;加强临床应用创新研究。支持医疗机构、科研机构、生产企业等深度合作,对标国际先进水平,强化医工协同发展,开展医疗装备临床应用创新研究。

“支持医疗机构、科研机构、生产企业等深度合作”,这样的产学研组合对于智能时代的行业转型需求,都尤为重要。

近年来,英特尔和多方合作伙伴一起,持续探索医疗健康领域的技术创新应用。例如,中国移动5G远程医疗,基于英特尔® 至强® 可扩展处理器和GPU,推出5G云网融合的整体解决方案设计,打造多网融合、原生安全、云网协同以及广域互联的一张网,帮助医院实现远程超声、远程会诊、5G应急救援等,并通过远程操作微型机器人进行远程手术,助力医疗扶贫。

英特尔也一直活跃在“AI for Science”前沿,以内置AI加速技术的至强® 可扩展处理器,以及容量数倍于传统内存的傲腾™持久内存的组合,在CPU平台上对AlphaFold2实施了端到端的高通量优化,助力以晶泰科技为代表的AI制药公司,突破新药研发的算力瓶颈,广泛赋能更加数字化的、智能化的药物研发效率升级。

这种技术与行业的完美契合,对于国家的“健康中国”战略而言,将有着重要的推动作用。

(来源:雷峰网)

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/115891.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

LeetCode-1759-统计同构子字符串的数目

1、数学 我们可以使用数学进行分析:每当出现连续的nnn个字符时,我们最终将其合在一起进行计算个数。显然我们可以获得的同构子字符串的个数应为n(n1)2\frac{n \times (n1)}{2}2n(n1)​。因此我们只需要遍历整个字符串,分别统计连续出现的字符…

57岛屿数量-61全排列 最长递增路径

57岛屿数量 矩阵中多处聚集着1,要想统计1聚集的堆数而不重复统计,那我们可以考虑每次找到一堆相邻的1,就将其全部改成0,而将所有相邻的1改成0的步骤又可以使用深度优先搜索(dfs):当我们遇到矩阵…

AtCoder Beginner Contest 283 (A~F)

比赛名称&#xff1a;UNIQUE VISION Programming Contest 2022 Winter(AtCoder Beginner Contest 283) 比赛链接&#xff1a;AtCoder Beginner Contest 283 A - Power 题意&#xff1a; 求A^B(1<A,B<9) 要注意这个int强制转换&#xff0c;不然9^9输出结果时387420489&…

python根据json数据画疫情分布地图

目录 一.基础地图使用 1.掌握使用pyecharts构建基础的全国地图可视化图表 二.疫情地图——国内疫情地图 1.案例效果 代码 三.疫情地图——省级疫情地图 四.数据集 注&#xff1a;数据集在文章最后 一.基础地图使用 1.掌握使用pyecharts构建基础的全国地图可视化图表 演…

Learning to Segment Every Thing

摘要 现有的目标实例分割方法要求所有训练样本都具有分割mask标注。然而&#xff0c;标注新的类别是非常费劲的&#xff0c;因此这将实例分割模型的应用范围限制在100个左右的有标注的类。本文的目的是提出一种新的部分监督的训练模型&#xff0c;以及一种新的权重传递函数&am…

洛谷【算法1-7】搜索刷题——优化、错题

文章目录[USACO1.5]八皇后 Checker Challenge题目描述输入格式输出格式样例 #1样例输入 #1样例输出 #1提示思路搜索框架代码位运算优化lowbit运算思路kkksc03考前临时抱佛脚题目背景题目描述输入格式输出格式样例 #1样例输入 #1样例输出 #1提示思路代码吃奶酪题目描述输入格式输…

C++ STL 之可变长数组 Vector 详解

文章目录Part.I AttentionChap.I 注意事项Chap.II 操作技巧Part.II FunctionChap.I 构造函数Chap.II 增加函数Chap.III 删除函数Chap.IV 遍历函数Chap.V 判断/大小/其他函数Part.III CodePart.I Attention Chap.I 注意事项 使用vector需要注意的地方&#xff1a; 加引用#inc…

分布式与微服务系列 - SpringBoot + Zookeeper集群 + Dubbo分布式托管(提供者、消费者)+ Nginx反向代理

一、前言 本内容仅用于个人学习笔记&#xff0c;如有侵扰&#xff0c;联系删除 再搭建集群项目前&#xff0c;请先学习相关技术的知识&#xff1a; 分布式与微服务系列 - Dubbo分布式与微服务系列 - Zookeeper上篇&#xff1a;入门到精通参考文档&#xff1a;分布式与微服务…

状态机——奇葩的状态表示

状态机——奇葩的状态表示 简述 在动态规划中&#xff0c;遇到有一个点有多个状态&#xff0c;混在一起无法表示&#xff0c;那么就可以把状态分开&#xff0c;并且构造出不同状态之间的转移关系&#xff0c;然后再求出状态转移方程&#xff0c;之后就OK了。 题目 1049. 大…

GNN algorithms(3): Tri-party Deep Network Representation

目录 Tri-party Deep Network Representation Essence Thinking Abstract Introduction Problem Definition Tri-DNR pipelines Model Architecture Tri-party Deep Network Representation Essence 1) Deepwalk提取graph structure信息&#xff0c;即structural nod…

MyBatis 一文基础总结

MyBatis 一文基础总结老师的随堂上课笔记&#xff0c; 供参考~1.框架概述1.1 软件开发常用结构1.1.1三层架构三层的处理请求的交互&#xff1a;用户---> 界面层--->业务逻辑层--->数据访问层--->DB 数据库1.1.2 常用框架常见的 J2EE 中开发框架&#xff1a;MyBatis…

adworld-web-inget-20221226

inget 题目来源: 宜兴网信办 题目描述: 无 题目场景: http://61.147.171.105:51222 http://61.147.171.105:51222/?id1%27%20%20or%2011%20– Please enter ID,and Try to bypass nice : congratulations Flag Is : cyberpeace{3df1eecfb5f794d6a94eba429f7e2846} ┌…

【NI Multisim 14.0编辑环境——菜单栏】

目录 序言 一、菜单栏 &#x1f349;1.文件 &#x1f349;2.编辑 &#x1f349;3.视图 &#x1f349; 4.绘制 &#x1f349;5.MCU&#xff08;微控制器&#xff09;菜单 &#x1f349; 6.仿真 &#x1f349; 7.转移 &#x1f349; 8.工具 &#x1f349; 9.报告 &…

录屏有声音吗?电脑如何录屏有声音?图文教程来了!

无论是学习、办公还是娱乐&#xff0c;都需要屏幕录制。许多人在录制视频后发现视频没有发出声音。录屏有声音吗&#xff1f;电脑如何录屏有声音&#xff1f;一个相对简单的方法是在使用电脑的屏幕录制功能时检查是否打开录制屏幕的声音。此外&#xff0c;如果您担心每次都需要…

这应该是全网最全的MySQL数据库的常用命令了吧

目录 前言 数据库的创建 数据表的操作 表数据的增删查改 分组与函数查询 分组与函数查询 运算符&#xff1a;数学运算符 连接查询 前言 今天给大家点来MySQL数据库的常用命令总结&#xff0c;这应该是全网最详细&#xff0c;最实用的数据库命令总结了&#xff0c;因为命…

addr2line

1、符号表 1.1什么是符号表 符号表是内存地址与函数名、文件名、行号的映射表。符号表元素如下所示&#xff1a; <起始地址> <结束地址> <函数> [<文件名:行号>] 1.2为什么要配置符号表 为了能快速并准确地定位引擎发生Crash的代码位置 举个例子…

【UE4 第一人称射击游戏】16-重新装弹

上一篇&#xff1a; 【UE4 第一人称射击游戏】15-修复蹲伏和冲刺同时执行的bug 本章效果&#xff1a; 步骤&#xff1a; 1.打开“Weapon_Base”&#xff0c;添加两个整数类型变量&#xff0c;分别命名为“MaxAmmo”和“ClipSize”&#xff0c;表示最大载弹量和每次重新装弹的…

MATLAB多项式符号运算

符号计算是指在运算时&#xff0c;无须事先对变量进行赋值&#xff0c;而是将所有得到的结果以标准的符 号形式表示出来。符号计算是以符号对象和符号表达式作为运算对象的表达形式&#xff0c;最终给出 的是解析解;在运算过程中不会受到计算误差累积问题的影响&#xff0c;其计…

信息安全编码标准:使用SAST实施安全编码实践

信息安全编码标准:使用SAST实施安全编码实践 当开发团队使用信息安全编码标准来开发软件时&#xff0c;通常希望更少的安全Bug和更好的代码质量&#xff0c;从而给用户带来健壮性更好的产品。在本篇文章中&#xff0c;我们将介绍信息安全编码标准的基础知识、最佳实践、如何以…

【swaggo】swaggo使用详解

一、swagger简介 swagger是一套基于OpenAPI规范构建的开源工具&#xff0c;使用RestApi。swagger-ui 呈现出来的是一份可交互式的API文档&#xff0c;可以直接在文档页面尝试API的调用。     gin-swagger 是基于注释生成 API 文档&#xff0c;项目地址:https://github.com/…