下一代 AI 医疗:知识图谱RAG + 多智能体,听医生的话没前途,让医生听你的话才是正道!

news2024/9/21 19:39:23

下一代 AI 医疗:知识图谱RAG + 多智能体,听医生的话没前途,让医生听你的话才是正道!

    • 医疗算法趋势
    • 现代 AI 医疗算法问题
      • 医学影像算法的局限
      • 医疗知识图谱的问题
      • 基于最本质循证医学
      • 实现人类级因果推理
      • 摆脱LLM概率性输出
    • 嘘,别人我不告诉 TA !!!

 


医疗算法趋势

①大模型 + 知识图谱(图数据重构、多跳推理,子图思维推理)

② 大模型 + 知识图谱 + RAG(引用更多、更新数据)

③ 大模型 + 知识图谱 + RAG + 多智能体(超长期、超个性化、超复杂任务)

3 者区别:

  • 如果您的应用主要关注特定领域的深度知识(常规诊断),方案 ①。
  • 如果您需要结合广泛的知识源并保持知识的时效性(医学知识不断更新),方案 ②。
  • 如果您需要多角度分析、复杂决策的场景(长期超个性化、疑难杂症诊断中心、三级图补充因果关系+生理机制解释),方案 ③ 可能更适合。

现代 AI 医疗算法问题

  • AI 在特定条件下自动推荐治疗方案,关键决策依然需要医生确认
  • AI 健康顾问和 AI 医生助理的形态落地健康咨询、辅助诊疗等医疗场景
  • 探寻基因蛋白质本质,不断发现新疗法
  • 覆盖院内院外、线上线下全流程的全病程管理,再通过居家数字生物标志物监测的持续居家监测

越往后面,越需要对人体、疾病、生病的因果分析、生理机制解释。

趋势就是从个别公司使用 AI,到系统性使用 AI,到整个社会围绕 AI 展开。

医学影像算法的局限

目前医疗AI的形式以临床影像学AI为主。

影像学AI固然减轻了影像科医生的工作强度、提高了效率。

但是,影像学的检查结果属于辅助地位,不能单凭影像学结果就做出正确的诊断,需要医生综合解读各方面的病情信息是才能做出正确的判断。

所以,目前影像类AI 没有触及医疗的核心。

医疗人工智能创业公司目前没有很好地商业化,其中一个原因是这些公司的技术和产品在【医生的临床思维】上有欠缺,就是距离真正的看病有很长的距离。

医疗知识图谱的问题

医学判断是基于证据的询证过程,推理的每一步都需要证据、知识和因果逻辑的支持。

但大模型,ta 是黑盒,基于概率性输出,微调出的医学大模型,也会有幻觉、概率性输出的问题。

没有医生真正的临床思维,不是基于证据的因果推理。

基于最本质循证医学

实现医生的临床思维:

  • 知识图谱,补上因果关系、生理性的机制解释、患者背景
  • 大模型,实现人类级因果推理能力,基于循证给出结论
  • 大模型,摆脱概率性输出,实现人的系统2(深思熟虑)

 

知识图谱 RAG 解决第一个问题,形成一个层级图。

  • 用户个人历史,是第一层
  • 知识图谱、最新研究,是第二层
  • 诊断逻辑、因果和机制解释的基础医学知识支持,是第三层

其具体落实的表现形式是,临床专科疾病的知识图谱,如心血管病知识图谱、肺病知识图谱、危重症知识图谱等等。

实现人类级因果推理

虽然层级图,使得知识图谱有了循证基础,但LLM还有问题,没有人类的因果推理能力,就做不到临床思维。

LLM 可以谈论因果关系,但实际上只是根据训练数据中的相关性进行模式识别,而不是理解和推断真正的因果关系。

  • 多阶段信息转化法:将非结构化文本逐步转化为,可计算的因果结构
  • 概率图因果推理法:构建和优化因果关系的图形表示,实现复杂推理

真实世界里任何事情都是错综复杂的,你根本就无法列举影响一个结果的所有可能缘故。

也就是说,你画不出因果关系的。

你必须做出各种取舍,你只能把你认为最重要的缘故画在图上。

图画完了,你并没有科学地、彻底地、逻辑完备地回答“为什么”,你只是说,根据你的猜测,应该是因为这几个缘故。

而事实上也不需要回答“为什么”。

我们在生活中的实际应用,对改变世界真正有用的,其实就是回答“观察、干预、想象”这三种问题!

因果分析的最终目的不是查明因果关系,而是回答三种有用的问题:

  1. 观察:这事发生了,那事是否也会发生?(症状-疾病、并发病、风险因素)

  2. 干预:我采取这个行动,会有什么后果?(治疗评估、预防有效性)

  3. 想象:如果当初我没有这么做,会是怎样?(个性化治疗、疾病预后)

因果分析的最终目的不是查明因果关系,而是回答三种问题。

把因果分析算法化,让大模型去回答这 3 种问题。

人的见识是有限的,因果图分析适合大模型,因为他有智能、有世界模型。

摆脱LLM概率性输出

早期动物 只有 系统1( 5 个 F,概括一生 ):

  1. 如果入侵者是同类,同性,且并不比自己更强壮,那么,Fight!
  2. 如果入侵者是同类,同性,且比自己更强壮,那么,Flee(快跑)!
  3. 如果入侵者是同类,异性,那么,Fuck!
  4. 如果入侵者不是同类,管它是同性还是异性,只要不比自己更强壮,那么,Feed(吃掉)!
  5. 如果以上皆不是,那么,Freeze(睡觉)……

人类实现系统2【深思熟虑】思考的方式是,通过新皮层来调控和协调复杂的理性分析、逻辑推理和深度决策过程,以解决复杂问题或进行详尽思考。


新皮层分为:

  • 前额叶:负责规划宏观路线和复杂的决策评估过程,涉及到抽象思维、意志行为控制以及问题解决等高级认知功能。

  • 前运动:负责规划和协调。尤其是在复杂或需要协调的运动中,如使用什么工具、怎么组合应用。

  • 运动:具体抓手、特定的动作。

  • 基底神经节:前额叶、前运动、运动都和基底神经节相连,每个动作实施全是基底神经节,不经过基底神经节的都是头脑模拟

人做事情的过程:

  • 项目层,定义问题与愿望(完全不可操作)
  • 任务层,设定具体目标与方向(不可操作)
  • 事件层,详细描述任务的时空、交互与情景(部分可操作)
  • 操作层,制定实际操作步骤与流程(完全可操作)

系统2,我们可以使用一个多智能体系统,来复现新皮层的完整活动,实现深思熟虑。

  • 能赋予大模型循证医学和临床思维、多角度分析、复杂决策的场景,实现医院的疑难杂症诊断中心
  • 能引用最新医学知识、适合超个性化、超长期、超复杂任务
  • 能添加反馈机制,不断提升诊断水平、考虑更多个体差异,不会死板的诊断。

嘘,别人我不告诉 TA !!!

被绿的时候我忍气吞声!!!

被甩的时候我一言不发!!!

被渣的时候我不为所动!!!

但看见关注我泪如泉涌!!!

请添加图片描述

知道文字看累了,看美女放松一下,顺便点个关注!!!

因为这里是连续剧,后面还有更多美女和干货!!!

我要让高难度知识落地!!!

我要让高精尖科学流传!!!

我要在高逼格的干货上!!!

我要给出最有用的心得!!!

和全球顶级科学家同步!!!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2135131.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

用python操作Excel表格(自动化办公)!

文章开始前打个小广告——分享一份Python学习大礼包(激活码安装包、Python web开发,Python爬虫,Python数据分析,人工智能、自动化办公等学习教程)点击领取,100%免费! 一、openpyxl介绍安装 1.…

影刀RPA:考勤自动打卡小程序

上班族,最惊心动魄的一件事,是什么,当然是:打卡 即使你在智能手机上设置提醒,比如闹钟或者日历事件,提醒自己按时打卡,但依然会忘记 即使公司很开明,使用的考勤系统支持可以设置自…

五大注入攻击网络安全类型介绍

1. SQL注入(SQL Injection) SQL注入流程 1.1. 概述 SQL注入是最常见的注入攻击类型之一,攻击者通过在输入字段中插入恶意的SQL代码来改变原本的SQL逻辑或执行额外的SQL语句,来操控数据库执行未授权的操作(如拖库、获取…

不可思议!这7个反共识设计原则,正悄然改变AI应用的未来格局!

引言 在AI技术日益成熟的今天,如何设计出既符合用户需求又具备高度智能化的原生应用,成为摆在开发者面前的重要课题。然而,传统的应用设计思维往往限制了AI潜力的充分发挥。本文提出的七个反共识观点,旨在挑战传统观念&#xff0…

如何优雅的使用 Nacos

简介 问题描述:Nacos 在某一版本后,Spring 官方不再对 Nacos 作版本适配,导致在使用配置中心时,无法导入配置 如何解决:使用 https://start.aliyun.com/ 问题复现 如何解决 新建模块时将服务器 URL 修改为 https://…

UE4_后期处理六—复古电视效果

效果图: 步骤: 1、让场景颜色与复古色相混合,采用强光混合模式,蓝图连接如下图: 效果图如下: 2、把上一章的扫描线效果拿过来,看看扫描线的蓝图节点: 效果图如下: 此效果…

数据为翼,智控未来:EasyCVR视频监控汇聚平台助力城市精准管理

在数字化浪潮席卷全球的今天,智慧城市的概念已不再遥不可及,而是逐步成为现代城市发展的核心驱动力。作为智慧城市的重要组成部分,视频监控系统正以前所未有的速度和规模覆盖城市的每一个角落,成为城市管理者手中的“千里眼”和“…

SOLIDWORKS链阵列功能详解—快速设计链条

在工业产品的设计中,链传动是一种广泛应用的技术,无论是在传送带还是自行车上都能见到它的身影。作为工程师,在进行SOLIDWORKS设计时需要关注产品的整体结构,检查机构运动的合理性,考虑生产成本。 那么如何实现链条的…

学习使用LangGraph x GPT-Researcher构建一个多智能体架构的AI自主研究助理

原文:学习使用LangGraph x GPT-Researcher构建一个多智能体架构的AI自主研究助理 - 百度智能云千帆社区 本文为大家剖析一个通过多智能体协作来完成的AI研究助理,可以用来帮助进行各种综合的在线研究任务并输出报告。该应用基于LangGraph以及开源的GPT-…

【吊打面试官系列-Redis面试题】如果有大量的 key 需要设置同一时间过期,一般需要注意什么?

大家好,我是锋哥。今天分享关于【如果有大量的 key 需要设置同一时间过期,一般需要注意什么?】面试题,希望对大家有帮助; 如果有大量的 key 需要设置同一时间过期,一般需要注意什么? 如果大量的…

19. 删除链表的倒数第 N 个结点【 力扣(LeetCode) 】

零、LeetCode 原题 19. 删除链表的倒数第 N 个结点 一、题目描述 给你一个链表,删除链表的倒数第 n 个结点,并且返回链表的头结点。 进阶:你能尝试使用一趟扫描实现吗? 二、测试用例 示例 1: 输入:hea…

【数据结构与算法 | 灵神题单 | 分治(链表)篇】力扣148

1. 力扣148:排序链表 1.1 题目: 给你链表的头结点 head ,请将其按 升序 排列并返回 排序后的链表 。 示例 1: 输入:head [4,2,1,3] 输出:[1,2,3,4]示例 2: 输入:head [-1,5,3,4…

【C++算法】二分查找

二分查找 题目链接 二分查找https://leetcode.cn/problems/binary-search/ 算法原理 代码步骤 代码展示 class Solution { public:int search(vector<int>& nums, int target) {int left 0, right nums.size() - 1;while(left < right){// 防止溢出int mid …

AI周报(9.8-9.14)

AI应用-NEKO Health用AI颠覆体检 Neko Health 由 Spotify 创始人丹尼尔埃克和哈亚尔马尔尼尔森共同创立&#xff0c;致力于通过每年的全身扫描和由 AI 驱动的洞察力来改善预防性医疗保健&#xff0c;能够检测诸如心脏病和皮肤癌等疾病。 该公司通过使用人工智能软件支持的全身…

Docker:对已有的容器,对当前容器映射的端口实时 (增删改查)

首先我的docker已经起了一个容器&#xff0c;我突然想把他的80->80映射的端口改成80->8080 但是我不想去新启动容器&#xff0c;想在现有容器基础上去修改&#xff0c;或者我想删除某个端口映射&#xff08;只是大概思路&#xff09; 如何寻找容器配置文件位置 首先我这…

【运维平台】WGCLOUD是如何判定主机下线的

只要被控主机的agent超过5分钟没有上报监测数据&#xff0c;系统就会判定该主机下线 这里的5分钟是默认的判定时间&#xff0c;如果agent上报时间是1分钟&#xff0c;那么agent超过1分钟没有上报数据&#xff0c;就会判定下线

优化IDEA卡顿,提示慢的问题,亲测有效!

1、优化JVM的参数 以下文件在idea安装目录的idea64.exe.vmoptions文件中。 一般来说我们只需要调整-Xms、-Xmx、-XX:ReservedCodeCacheSize三个即可&#xff0c;根据电脑的实际内存去调&#xff0c;我的电脑是48G内存&#xff0c;调到了 -Xms4096m (堆初始内存大小) -Xmx8192m…

多线程学习篇二:Thread常见方法

1. 常见方法 方法名 static 功能说明 注意点 start() 启动一个新线程&#xff0c;在新线程里面运行run方法 start 方法只是让线程进入就绪&#xff0c;里面代码不一定立刻运行(CPU 的时间片还没分给它)。每个线程对象的 start 方法只能调用一次&#xff0c;如果调用了多…

man命令详解

一、man命令简介&#xff1a; man是manual的缩写。操作手册之意。 本地的帮助文档称为man pages&#xff0c;这些操作手册随着软件安装而安装到本地&#xff0c;可以使用man命令进行查询。 随着软件包的安装有些操作手册会以文档的方式放在/usr/share/doc目录当中。…

初识HTTP

1、请求头中存储的是该请求的一些主要说明 accept:浏览器通过这个头告诉服务器&#xff0c;它所支持的数据类型 Accept-Charset:浏览器通过这个头告诉服务器&#xff0c;它支持哪种字符集 Accept-Encoding:浏览器通过这个头告诉服务器&#xff0c;支持的压缩格式 Accept-Lan…