重磅!GPT-4又进化了!画图、插件、代码等能力被整合,超级智能体来了

news2024/11/19 15:26:08

图片

 夕小瑶科技说 原创
 作者 | 小戏、ZenMoore

就在今天!OpenAI 闷声放了一个大招!

图片

还没有官宣,还没有发布会,也没有大肆报道与关注。OpenAI 这次仅仅以灰度测试的方式,给部分用户发布了一个可以说“整合了几乎所有可用工具”的完全版 GPT-4 智能体版本

再具体一点,这次更新,将之前版本相互独立各自分离的 Agent 功能统一了起来。之前 GPT-4 的工作模式是四个独立的功能(一个对话窗口内只能使用其中一个特性):

  • 图像上传 + GPT-4

  • 插件 + GPT-4

  • 代码运行器 + 文件上传 + GPT-4

  • 图像生成 + GPT-4

这次更新使其变成了:

  • GPT-4 + 图像上传 + 插件 + 代码运行器 + 文件上传 + 图像生成

All In One!

例如,我想实现扔给 GPT-4 一张图,让 GPT-4 完成图像理解再根据我的 Prompt 要求完成新图像的生成,之前的 GPT-4 是无法做到这个事情的,因此当你使用图像生成功能的时候就无法上传图片。而更新完成之后,现在可以做到自动图像编辑啦! 如下图所示:

图片

这看似是一个小小的更新,但实际上是通过把之前分开的各种 Agent Feature 整合在一起从而将 GPT-4 真正进化为了一个“理解一切,处理一切,生成一切”的超级统一智能体

回顾 OpenAI 的官方说明,可能其中最为关键的词句就是其中的“automatic”一词

图片

什么是“automatic”,那就是针对用户输入的任意一个任务,现在的 GPT-4 可以自动的选择并组合使用各种它可以使用的工具,以完成用户的特定的任务目标。换言之,之前通过用户人为切换插件完成的任务,更新后的 GPT-4 (All Tools) 类似 AutoGPT,可以一体化的完成如意图识别,任务分配,工具调用等诸多任务,GPT-4 也由此完成了单一的大模型到智能体的进化。

图片

举个网友的例子,如果我希望让 GPT-4 生成一个当前时间丹佛的天气图,拆解这个任务,GPT-4 需要做的不仅仅是使用 DALLE 3 生成一张图片,而是还需要查询当前时刻丹佛的天气,这需要调用另一个 API,而如下图所示,GPT-4(All Tools)现在可以自动的完成这一套任务。

图片

再来一个更复杂的任务,如果要求 GPT-4 依次反复使用它所能使用的所有工具来生成一张炫酷有趣的创意图片,GPT-4 会怎么样呢?

图片

如上图所示,GPT-4 完美的理解了任务的要求,首先使用了 DALLE 创建初始图像,并以“抽象”,“怀旧”,“希望”等为主题设计了输入 DALLE 的 Prompt,生成了初始的图像

图片

接着通过调用 Python,分析生成图像中的颜色,确定主导色调,最终经过一系列 GPT-4 的神操作,GPT-4 交出了这样一个答卷,先不论其中艺术性如何,但可以看出 GPT-4 已经可以熟练的玩转各种工具

图片

再来一个例子,对于一个 PDF 信息提取的任务,之前的版本可能还需要额外使用 Advanced Data Analysis 功能上传附近才可以办到,而新版本的 GPT-4 则将多类型文件完全统一,直接上传 PDF 便可以和 GPT-4 畅快 Chat。

图片

当然,目前的目前,GPT-4 的这次升级还没有正式发布,只是以灰度测试的形式“走漏了一点风声”,不过哪怕仅仅看到这些蛛丝马迹,但也足够让人期待完全版 GPT-4 会为我们带来什么样的想象空间

图片

查看日程表九月份 OpenAI 宣布在 11 月 6 号举报首届开发者大会,在这次大会之上 OpenAI 将会爆出什么更大的料呢?让我们一起期待!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1149964.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

CentOS 安装 Hadoop Local (Standalone) Mode 单机模式

CentOS 安装 Hadoop Local (Standalone) Mode 单机模式 Hadoop Local (Standalone) Mode 单机模式 1. 修改yum源 并升级内核和软件 curl -o /etc/yum.repos.d/CentOS-Base.repo https://mirrors.aliyun.com/repo/Centos-7.repoyum clean allyum makecacheyum -y update2. 安…

极智嘉(Geek+)携数款创新方案亮相CeMAT展会,再度展现硬核实力

近日,CeMAT ASIA 2023盛大召开,全球仓储机器人引领者极智嘉(Geek)携旗下数款创新方案亮相,再次向各界展示了其在前沿科技、产品打磨上的硬实力。 首先是货架到人PopPick方案搭配VSW自动播种墙 在传统货到人拣选作业中,拣选员约有…

converted from warning

converted from warning 关注微信:生信小博士 本地或者其它服务器跑同样的代码是正常的,只是有警告,但是在西柚云服务器上面运行会报错? 这是由于您两个环境使用的包版本不一样导致的,有如下解决方法 或者之前只是告警…

【23真题】知识点覆盖全!有罕见判断题!

今天分享的是23年烟台大学833的信号与系统试题及解析。 本套试卷难度分析:本套试题内容难度中等偏下,题目难度不大,但是题量较多,考察的知识点全面,比较多的考察了对信号波形以及频谱图的画法,值得注意的是…

路由vue-router

文章目录 一、前端路由的概念与原理1、 什么是路由2、SPA 与前端路由3、什么是前端路由4、前端路由的工作方式5、实现简易的前端路由 二、vue-router 的基本用法1、 什么是 vue-router2、 vue-router 安装和配置的步骤(1)在项目中安装 vue-router&#x…

Ceph入门到精通-恢复BlueStore中对象数据

1.基本原理介绍 1.1 ceph中的对象(object) 在Ceph存储中,一切数据最终都会以对象(Object)的形式存储在硬盘(OSD)上,每个的Object默认大小为4M。 通过rados命令,可以查看一个存储池中的所有object信息,例如…

SPI、IIC信号隔离

除了时钟信号SCK不用接上拉,其他信号都需要接10K上拉电阻到3.3V电源。 一、SPI信号隔离: 二、 IIC信号隔离

用例设计需遵循哪些规范标准?

不同的人因经验、方法、技巧不同,同样的用例编写质量差异大。 大家平时编写用例都有遵循哪些规范标准呢? 虽然是一名开发,但是我们做需求时也需要和测试一起进行用例评审,总结一下我们公司在进行用例设计时的标准。 我们公司要求用…

运大模型风起云涌,图解AI如何赋能产业升级?

导读 随着AI技术加速迭代,国内虚拟人市场规模呈现强势增长态势。据艾集咨询数居显示,2022年中国虚以人带动产业市场规模和核心市场规模预测值分别为1866,1亿元和120.8亿元呈现强劲的增长态势。随着数字化娱乐场景需求的增加,AI等技术不断送…

使用Swift模拟用户登录当网获取数据并保存到MySQL中

前言 当当网作为中国最大的综合性网上商城之一,通过爬取当当网数据,我们可以获取商品信息、用户评价、销售数据等宝贵的信息资源。这些数据可以帮助企业了解市场趋势、分析竞争对手、优化产品定价等,从而做出更明智的决策。 为什么使用Swif…

quartus+modesim仿真验证基本流程(使用自带仿真波形编辑器)

文章目录 环境搭建一、quartus设置二、quartus中新建工程三、仿真结果本文演示如何在quartus中启用modelsim进行功能仿真,同时重要一点是利用quartus中自带的仿真波形编辑工具,给输入信号通过图形界面生成想要的波形,之后调用modelsim进行仿真,将仿真结果直接显示在仿真波形…

synchronized总结:怎么保证可见性、有序性、原子性?

synchronized的原子性 synchronized 底层实际上通过JVM来实现的,同一时间只能有一个线程去执行synchronized 中的代码块。 原子性:既然同一时间只有一个线程去运行里面的代码,那么这个操作就是不能被其它线程打断的,所以这里天然…

语音芯片怎么录音 以及如何选择合适的录音芯片

一、语音芯片如何录音 语音芯片怎么录音 以及如何选择合适的录音芯片 语音芯片,其中就有一个品类,称之为录音芯片 其实他们是合并在一个芯片里面的,也就是说,录音芯片肯定是又可以录又可以播 但是能播放的语音芯片&#xff0c…

OA——菜单里无法找到流程监控

在门户引擎里面做查看菜单的权限设置 编辑里面的可查看权限管理 把权限给到对应的人员或者部门就可以

恒驰服务 | 华为云数据使能专家服务offering之数仓建设

恒驰大数据服务主要针对客户在进行智能数据迁移的过程中,存在业务停机、数据丢失、迁移周期紧张、运维成本高等问题,通过为客户提供迁移调研、方案设计、迁移实施、迁移验收等服务内容,支撑客户实现快速稳定上云,有效降低时间成本…

python的pytorch和torchvision利用wheel文件安装

python的pytorch和torchvision利用wheel文件安装 在做人工智能的时候,我们需要下载pytorch和torchvision,那么如何下载呢。利用wheel文件pip安装 下载 首先要看你的python版本,打开命令行,输入: python -V就可以看…

ip划分与私公网ip、ip的传递

报文问路:1、不知道跳转默认路由器,2、知道路径,向对应路径发出报文,3、路口路由器,下一步就是目标主机在哪。 想要通信必须同在一个局域网,其实将公网就可以看作一个大型的局域网。 在同一个局域网内发送…

制药、饮料等流程制造业主数据如何管?

业务背景——制造行业的数据转型过程中,主数据管理是成功的必要条件 MASTER DATA MANAGEMENT 流程制造是指被加工对像不间断地通过生产设备,通过一系列的加工装置使原材料进行化学或物理变化,最终得到产品。 由于流程制造中物料的变动性强&a…

C++ 写一个Data类的注意问题

Data类 声明和定义分离的一些问题 声明里面我们不带缺省参数&#xff0c;定义我们给缺省参数&#xff0c;如下面两段代码&#xff1a; Data.h#pragma once #include<iostream> using namespace std; class Data { public:Data(int year,int month,int day);private:in…

Python基础入门例程21-NP21 增加派对名单(二)(列表)

本专栏&#xff1a; Python365基础入门例程 作者&#xff1a;heda3 最近的博文&#xff1a; 1、Python基础入门例程19-NP19 列表的长度&#xff08;列表&#xff09;-CSDN博客 2、Python基础入门例程18-NP18 生成数字列表&#xff08;列表&#xff09;-CSDN博客 3、Pyth…