腾讯医疗大模型,不止大模型

news2024/11/28 4:37:51

图片

“千呼万唤始出来,腾讯健康终于祭出医疗大模型。但或许这只是新故事的开始。下一步通过应用场景的打磨,全面嵌入生态合作伙伴,才能让医疗行业加速全面拥抱「数智化」工具。

在今年几乎所有企业都卷入AI大模型这场豪赌时,腾讯健康在做什么?

在西南边陲的贵州黔南州,与IT伙伴深耕远程医疗,打通五级行政区划的分级诊疗机制;在医药医械流通环节追求降本增效和透明规范的现况下,与物联网伙伴建立数字链路;在国产传统医疗器械巨头转型路上,将AI技术与大数据优势与体外诊断融合创新,让智慧大脑进入临床。

一些声音认为,腾讯健康的故事没有新意。当大家都在玩AI大模型时,它还拉着合作伙伴推敲医疗行业的“郁结”。

腾讯健康没有压力吗?

腾讯健康总裁吴文达在和雷峰网聊起时明确表示,他也在使用AI大模型这种新技术,并对其感到兴奋。

但同时,他也想说明,腾讯整体都对大模型相对克制。“我们更关注如何在真实世界的医疗场景,用起大模型,用好大模型。”

拿医院来说,院方更在乎数据隐私,腾讯健康完全可以将千亿级参数的医疗大模型封装起来,从而实现医院本地部署,但会耗费大量的资金和人力资源,因此许多医院可能无法承担这些成本。即使能够承担,也存在其他现实的限制,例如难以招聘和保留高素质的数据科学员工、承担后续的维护费用等。

腾讯健康选择的是另一条路:将大模型这种生产工具封装在不同的业务和产品中,再输送给ISV(独立软件开发商)这类合作伙伴。

正如去年腾讯从集团层面明确从“集成商”到“被集成者”的战略转变:由合作伙伴担任直接服务客户的界面,腾讯的自研产品能力作为其中一环嵌入整体解决方案之中。经过一年的实践,腾讯依然是让伙伴“唱主角”,相对应的是,自己在交互体验和场景挖掘方面有近乎极致的追求。

“这个场景非大模型不可?老年患者该怎么用大模型?大模型的延迟响应控制在多大尺度?具体到某一区域里的医疗机构能否支持接入…”

腾讯在医疗领域的野心,是愿意花费精力、下大注的。

01

千呼万唤始出来,腾讯医疗大模型就位

从过去以深度学习为代表的人工智能,到医疗大模型为代表的人工智能,如何为生命健康服务,一直是最性感的课题。

不久前雷峰网对话北京一所三甲医院院长时,对方谈到,目前医疗大模型的应用面临着两个根本限制:人类对医疗大模型秉持着比人类更严格的错误容忍度、人类无法对医疗大模型追责。

这要求企业在打造基础大模型及行业大模型时,必须做好万分准备,以“技术底座”、“增程器”、“革自己的命”的标准要求自己。

9月8日,腾讯健康正式公布,基于腾讯自研的混元通用大模型,打造了面向医疗行业的专属大模型,并对腾讯健康中的智能问答、家庭医生助手、数智医疗影像平台、药物发现平台等多个AI产品做出了新一轮升级。

腾讯杰出科学家、腾讯天衍实验室主任郑冶枫介绍,团队在打造医疗大模型中分为四步。

图片

腾讯杰出科学家、腾讯天衍实验室主任郑冶枫

首先,以自研“混元大模型”为基座模型,目前这一通用大模型达到超千亿参数规模和超2万亿tokens预训练语料,并加入大量医学专业数据,比如中英文的医学文献、百科全书、药品说明书,以及腾讯医典上的医学专家撰写且多轮校对过的文章等。

第二步,在基座模型基础上,持续加入天衍实验室过去这些年来积累的知识图谱,其中涵盖285万医学实体、1250万医学关系等结构化数据。

通俗点说,每个实体代表一个概念,如一种药或一个疾病;每条关系代表一个知识点,如某种药能治某种疾病。因此该知识图谱的覆盖率和准确率均非常好,基本覆盖98%的医学知识,使大模型进一步掌握专业的医学知识。

图片

腾讯医疗大模型预训练阶段的数据来源

郑冶枫表示,“以上两步中提到的无结构和结构化数据,保证了混元大模型也能进行基础的医学逻辑推理,但到这只是完成了一半,最终模型是在对话中输出能力,所以后续着重用了‘问答对’的形式做训练。

据悉,问答对这一类型的数据,有三路来源:

一是患者场景,包括线上问诊、医学问答、导诊、预问诊;二是医生场景,包括医学考题、病历生成、出院小结、检查建议、诊断数据和用药建议;三是与药企合作建设的药品知识库等,总计约3000万个问答对。

这是什么概念?

打个比方,关于ChatGPT使用了多少对话数据,没有官方答案,据网传消息,2020年发表在ACL会议上的一篇论文中,研究者使用了650万条英文对话数据和300万条中文对话数据,相比之下腾讯的医疗大模型是其3倍多。这也从侧面体现出腾讯健康多年来建设医疗生态的价值。

最后一步,则是引入人类专家完成强化学习训练。

为了增加答案的多样性,团队在设计之初规定,大模型可以输出5种不同的答案,并请专家对这些答案进行准确度、患者关怀等打分(0-9分),最终使用了这些专家打分的数据来训练一个奖励模型,并将强化学习机制融入到大模型中。

据悉,腾讯健康所使用的由专家医生的标注数据达到36万组,保证了腾讯的医疗大模型在处理医疗需求时更专业、精准,同时也兼顾了患者关怀,更接近人类医生。

郑冶枫举了几个例子,尝试说明对比通用大模型,腾讯医疗大模型更懂“医”:

对“小孩细菌性感染肺炎”的患者主诉,通用大模型会建议到“儿科”或“呼吸科”就诊,但是腾讯医疗大模型会更细致地给出“小儿呼吸内科”的推荐。

另一个更直观的例子是,模拟人类医生问诊。

如ChatGTP等通用大模型只会按照患者提问给出对应的回答,并不会主动提出问题,在处理如“打完新冠疫苗第一针第二天得了急性咽喉炎怎么办?”这种问题时,往往只会一本正经地分析病情,然后建议尽快就医。

但其实,人类医生处理类似问题时并不会直接给出答案,而是追问症状,进一步排除可能性较低的疾病。腾讯医疗大模型就很好地实现了这一点,通过多轮提问推导出患者的症结所在。

正如今年世界人工智能大会上,不少人在谈及大语言模型时提到,医疗是一个极为严肃的领域,需要精准的判断并给出支撑判断的证据,不能像通用语言模型那样给出一个模棱两可的答案,或者堆砌答案。

反而是,这需要医疗大模型在结论精度上进行提升,给出精准的决策及建议。

02

大模型能让医疗走得更远、更快吗?

这半年多以来,随着大厂博弈、中小企业的入局、以及投资和科研界的落地探讨,都一致认为:卷大模型没有意义,卷应用机会更大。

据不完全统计,目前在医疗领域,从医学科研、药物研发、智慧诊疗、医疗设备运维、医院管理等,国产大模型产品数量不少于40个。如今,腾讯的医疗大模型也已就位,几乎可以肯定,医疗诊疗、健康管理的能力边界将进一步扩大。

腾讯杰出科学家、腾讯天衍实验室主任郑冶枫介绍,腾讯医疗大模型的能力包括,文案生成、智能问答、病历结构化和检索、影像报告、辅助诊断等,可嵌入医疗环节全流程。

放在医疗场景里看,则是就诊前的智能院务客服、科室导诊、医生推荐、预问诊;

就诊过程中的医患对话、病历自动生成;

就诊完成后的随访管理、患者档案流转到体检机构等服务。

图片

腾讯医疗大模型的应用场景

这符合腾讯健康总裁吴文达对大模型的观点,即“用起来”才能体现医疗大模型的价值。

想象一下,日接诊量超5万人次的医院,当医生忙碌或者休息时间,一个“AI护士”就能7x24小时答疑解惑,引导患者正确就医;基于大模型的能力,辅诊产品学习百万级医患对话及3000多疾病推演解析,实时给出有执行依据的辅助诊疗,自动生成更符合书写规范的病历等等。

这是一个双赢的局面:大模型最直观的帮助是缓和医生文书管理的压力。医护人员可得以将更多时间用于关爱患者,还能在亲自从事护理时获得更高的成就感。

而对于不太适应数字化操作的用户,一个实例,上海仁济医院已经率先运用腾讯医疗大模型,推出“适老化服务”,打造高度拟人化的虚拟数字形象“小威护士”。

再比如,对于医疗资源不够充足,全科诊疗能力受限的基层乡村医生,腾讯与中迈医疗从2015年开始,一起将贵州黔南州龙里县作为试点区域。最近,基于大模型的腾讯导辅诊AI,已经成为龙里县50多家村卫生室、近200位村医的日常工具,并且被纳入贵州省黔南州远程协作的标准作业规范。

借着微信的连接能力,医疗大模型还会进一步深入基层。

在这次峰会上,腾讯健康披露了全新的产品“家庭医生助手”,医疗大模型不光可以辅助家庭医生与居民展开对话,还可以变成医生随访的智能工具,生成不同的分类标签,帮助家庭医生分类管理患者。此外还可以将患者档案进一步扩展到综合医院体检和体检后的场景中。

不难发现,对于医疗行业而言最大的感受是,如今的医疗大模型技术代表了一种技术的相变:以前,医疗服务被冻结在单个医疗体系里,而现在它已经融化成水,可以流向任何地方。

吴文达指出,医疗健康的数智化升级已从“先行先试”,转变为“全面拥抱”,人工智能及各类数智化工具的应用将加速普及。

他指出,当前最应该关注的是能带来医疗行业质变的技术突破,比如X光的发明催生了医学影像行业、抗生素的发明促进了外科手术普及、人类基因组计划开启了基因编辑技术等,“如今大模型技所具有的生成能力,很大程度上将是医疗行业变迁的前兆。”

图片

腾讯健康总裁吴文达

在初见医疗大模型的红利上,智慧化技术+细分场景服务的组合,带来的是短时间极强的认知占据,随之而来是长期对生态发展的奠定。因此,对于做医疗服务的企业而言,大模型是一个极好的复盘机会。

从去年通过多维度调整,腾讯曾明确CSIG(云与智慧产业事业群)搭建的数字化平台,不会做定制部分,而是提供灵活的平台能力与标准件,让交付团队与客户内部研发团队去使用平台。透过今年生态大会,我们能明显看到腾讯健康这一板块的覆盖面越来越广,场景越来越深,能力越来越强,很大程度上将成为医疗行业伙伴破局的“尖刀”。

03

云、数、智三位一体,辐射合作伙伴

腾讯集团高级执行副总裁、云与智慧产业事业群CEO汤道生认为,企服赛道周期比消费互联网赛道周期长很多,可以坚持十年二十年,但这个领域内的企业客户是一个一个赢回来的。腾讯定位为平台软件厂商,选择的路径就是打造具备技术含量的产品,以产品为载体,凝练行业信任。

站在合作伙伴的视角上,为什么愿意和腾讯健康走在一起?

在此次腾讯全球数字生态大会举办之前,雷峰网走访了一家与腾讯同行八年,只做一件事的合作伙伴:中迈医疗。

腾讯和中迈的合作要追溯于2015年。

这一年,两家公司选择在贵州黔南州的龙里县试点,试试能不能把这个大山里的医疗信息化拉通。

中迈主要负责提供系统建设,包括全场景专科协作、远程诊疗、智能导诊、云HIS系统、电子病历等医疗IT系统,以及医疗设备连接集成等。同时,中迈还深度参与了龙里县的数字化分级诊疗机制的规划方,联合腾讯健康在龙里县打造“互联网+医疗健康”的智慧医疗生态。

腾讯则提供医疗AI软件产品、以及微信公众号、小程序,会议、直播、文档、云技术等非医疗业务。因此,腾讯可以把技术产品通过公有云或私有化部署以提供多样化服务,也可以让中迈将数据放到云端存储,并承担IT基础运维保障。

中迈在早期尝试引入美国HIE标准,最终失败告终。实际上,到目前为止,达到HIS七级(最高级别)的全国只有14家医院,而达到中国互联互通五级测评的也只有30家医院,证明这条路径在中国难以复制。

而后,在与腾讯的合作中,两家公司另寻了“区块链+专用医疗终端”的方式,将医疗数据的互联互通成本降低到10万以内,使得政策的制定和实施变得更加容易。

在沟通中,中迈创始人林子牛多次强调这一点,“技术模式要可行,成本要能够让各方接受,最后才能解决商业模式的问题,更多医院愿意来买单。”

从2015年以来,从头建成大范围的数据互联互通,两家企业用了四年,再到建立每级医疗机构执行的常态化的合作机制,又用了三年。直到今年5月,“龙里经验”升级为“黔南模式”,将进一步在黔南州、贵阳市、毕节市三地推广数字化分级诊疗。

最新的进展是,基于大模型的腾讯导辅诊AI,已经被纳入贵州省黔南州远程协作的标准作业规范,融入当地多年打造的数字化分级诊疗体系,嵌入基层医生诊疗系统,同时结合专家远程指导,让基层医生“能看病、敢看病”。

图片

中国最基层,村医带AI问诊、导辅诊工具上门看病

从非医疗产品的支持,到如今医疗大模型的嵌入,腾讯健康用八年证明,医疗行业存在一系列重要的基建工作、伦理工作、以及该如何权衡企业利益与社会利益的关系。

回想2018年的生态大会,腾讯曾启动第三轮组织架构调整,成立云与智慧产业事业群(CSIG),意味着腾讯以此为起点,将自身云计算、大数据、人工智能等技术优势赋能智慧医疗。

这被视为腾讯健康的一次重要转身。如今五年过去,腾讯健康业务作为其中重要一环,深度参与了更多企业的数字化转型中:

爱创科技的溯源技术保障药械流通安全,并拓展增值服务空间;迈瑞等医疗器械龙头的转型,打通软硬件一体化运营;丁香园对医患群体的服务和连接能力,将为“治病为中心”转向“以健康为中心”的医健转型提供落地场景;神舟医疗与腾讯为基层医院提供数字诊疗联合方案,促进医疗资源下沉,减少区域间不均衡。

如何学习AI大模型?

作为一名热心肠的互联网老兵,我决定把宝贵的AI知识分享给大家。 至于能学习到多少就看你的学习毅力和能力了 。我已将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

一、全套AGI大模型学习路线

AI大模型时代的学习之旅:从基础到前沿,掌握人工智能的核心技能!

img

二、640套AI大模型报告合集

这套包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示。

img

三、AI大模型经典PDF籍

随着人工智能技术的飞速发展,AI大模型已经成为了当今科技领域的一大热点。这些大型预训练模型,如GPT-3、BERT、XLNet等,以其强大的语言理解和生成能力,正在改变我们对人工智能的认识。 那以下这些PDF籍就是非常不错的学习资源。

img

四、AI大模型商业化落地方案

img

作为普通人,入局大模型时代需要持续学习和实践,不断提高自己的技能和认知水平,同时也需要有责任感和伦理意识,为人工智能的健康发展贡献力量。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1804936.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

刘强东的拼搏哲学与产品创新的启示

在当今这个快速变化的时代,成功不再是偶然,而是需要一种敢于挑战、敢于拼搏的精神。正如京东创始人刘强东所说:“实现梦想,记住这句话就够了。敢于挑战,敢于拼搏的人不一定能成功,但成功的人一定是敢于挑战…

04 uboot 编译与调试

新手不需要详细掌握 uboot,只需要知道它是一个什么东西即可,工作中也只是改一些参数而已。 1、uboot 是什么 Linux 系统要启动就必须需要一个 bootloader 程序,也就说芯片上电以后先运行一段 bootloader 程序。这段 bootloader 程序会先初始化 DDR 等外设,然后将 Linux 内…

超详解——python数字和运算——小白篇

目录 1.位运算 2. 常用内置函数/模块 math模块: random模块: decimal模块: 3.内置函数: 总结: 1.位运算 位运算是对整数在内存中的二进制表示进行操作。Python支持以下常见的位运算符: 按位与&…

【最新鸿蒙应用开发】——ArkUI两种开发范式

在进行鸿蒙应用开发,openHarmony提供了一种页面开发框架叫做ArkUI方舟框架来进行页面布局的开发。 ArkUI方舟UI框架 针对不同的应用场景及技术背景,方舟UI框架提供了两种开发范式,分别是基于ArkTS的声明式开发范式(简称“声明式…

为什么会有虚像

本来我就打算写虚像相关的内容,实际上我看不懂光学的内容,我只是发觉书上没有使用变分法来做,而只是解析几何的变换,这个做法完全脱离实际,物理书为什么会这样写不知道原因,但是很明显这样的内容也非常的复…

基于可解释性深度学习的马铃薯叶病害检测

数据集来自kaggle文章,代码较为简单。 import numpy as np # linear algebra import pandas as pd # data processing, CSV file I/O (e.g. pd.read_csv)# Input data files are available in the read-only "../input/" directory # For example, runni…

Modbus TCP转CanOpen网关携手FANUC机器人助力新能源汽车

Modbus TCP转CanOpen网关与FANUC机器手臂的现场应用可以实现FANUC机器手臂与其他设备之间的数据交换和通信。CANopen是一种常见的网络协议,用于处理机器和设备之间的通信,并广泛应用于自动化领域。而Modbus TCP是一种基于TCP/IP协议的通信协议&#xff0…

【C++关键字】auto的使用(C++11)

auto的使用(C11) auto关键字auto的使用细则auto使用场景 随着程序的复杂化,程序中用到的类型也越来越复杂化,经常体现在: 1.类型难以拼写 2.含义不明确导致容易出错 在C语言阶段处理这类问题的方法,可以使…

GDPU Java 天码行空15 数据库编程

一、实验目的 1、 了解数据库的基础知识。 2、 掌握MySQL的下载、安装与配置。 3、 掌握MySQL可视化工具的使用。 4、 了解SQL语言。 5、 掌握JDBC中的API,并能进行简单的数据库操作。 二、实验内容 1、 安装MySQL 👨‍🏫 视频教程 2、建…

计算机组成刷题一轮(包过版)

搭配食用 计算机组成原理一轮-CSDN博客 目录 一、计算机系统概述 选择 计算机系统组成 冯诺依曼机 软件和硬件的功能 CPU等概念 计算机系统的工作原理 机器字长 运行速度 求MIPS 编译程序 机器语言程序 平均CPI和CPU执行时间 综合应用 存储程序原理 二…

线性预测器的等价性

摘要 尽管线性模型很简单,但它在时间序列预测中表现良好,即使是在与更深入、更昂贵的模型竞争时也是如此。已经提出了许多线性模型的变体,通常包括某种形式的特征归一化,以提高模型的泛化。本文分析了用这些线性模型体系结构可表…

学生宿舍人走断电系统的开发

学生宿舍人走断电管理系统是一款智能化的电力管理设备,旨在解决学生宿舍用电问题。以下是一些该系统的功能特点: 1.智能控制:系统能够自动识别宿舍内是否有人,当无人时自动断电,避免能源浪费和事故的发生。 2.:系统具有过载保护、短路保护、过…

基于51单片机的串口乒乓球小游戏

基于51单片机的乒乓球小游戏 (仿真+程序) 功能介绍 具体功能: 1.用两块单片机串口进行通信; 2.一排LED模拟乒乓球运动(哪里亮表示运动到哪); 3.当最左边LED亮,表示球…

C 语言实现Linux终端显示IP二维码

调试信息:开发者可以在终端生成二维码,包含调试信息或日志数据,便于移动设备扫描和查看。设备配置:物联网设备配置时,通过终端生成配置二维码,扫描后进行设备配置。 Ubuntu/Debian 环境安装二维码库 sudo a…

以无厚,入有间,做一件事为什么靠努力不行,不能长期维持

庖丁解牛,并不是在说人和技巧,而是在说解牛不在于刀的锋利,而是怎样才能做到让刀不产生损耗,就是熟悉牛肉纹路,按照纹路和肉骨间隙进行操刀。这就是尊重自然规律,对于人也是一样的,如果所有事情…

C# .NET 异步实现方式

一、异步编程模式 .NET 提供了执行异步操作的三种模式: 基于任务的异步模式 (TAP) ,该模式使用单一方法表示异步操作的开始和完成。 TAP 是在 .NET Framework 4 中引入的。 这是在 .NET 中进行异步编程的推荐方法。 C# 中的 async 和 await 关键词以及 …

Day47 代码随想录打卡|二叉树篇---最大二叉树

题目(leecode T654): 给定一个不重复的整数数组 nums 。 最大二叉树 可以用下面的算法从 nums 递归地构建: 创建一个根节点,其值为 nums 中的最大值。递归地在最大值 左边 的 子数组前缀上 构建左子树。递归地在最大值 右边 的 …

linux常用命令及其选项

1、常用命令 1.1、ls 选项说明-a显示所有文件及目录 (包括隐藏文件)-i显示inode-A同 -a选项 ,但不列出 "." (目前目录) 及 ".." (父目录)-l列出信息详细(如文件型态、权限、拥有者、文件大小等)-R递归显示(若目录下有文件,则以下之…

盘点 2024 Google I/O 中的 Android 方向关键更新

这里写自定义目录标题 前言1. AI 编程助手2. 生成式AI 应用3. 不同屏幕尺寸适配4. 桌面小部件(Widget)5. 跨设备类型开发6. WearOS & 可穿戴7. Android for Car8. Android TV9. Google Home API10. Kotlin Multiplatform11. Jetpack Compose12. Andr…

C# Excel操作类EPPlus

摘要 EPPlus 是一个流行的用于操作 Excel 文件的开源库,适用于 C# 和 .NET 环境。它提供了丰富的功能,能够轻松地读取、写入和格式化 Excel 文件,使得在 C# 中进行 Excel 文件处理变得更加简单和高效。EPPlus 不需要安装 Microsoft Office 或…