可能是史上最强大AI Agent!OpenAI重磅更新:整合了多模态、外部访问、数据分析后的GPT-4更像是AI Agent了!

目前最强的大语言模型必然是OpenAI的GPT-4模型,此前OpenAI的ChatGPT Plus版本为GPT-4模型提供了多个强大的插件供大家使用,包括基于Bing的带网络浏览的Browse、文本生成图片的DALL·E3、高级数据分析功能等。就在几个小时前,OpenAI的部分用户收到了官方的一个非常重磅的更新,即上传任意文档的分析以及整合了所有工具后的GPT-4!这个功能被称为GPT-4(All Tools)!这个工具可以在一次对话中自主选择调用多个不同工具完成用户的输入指令,非常接近AI Agent形态!

图片
  • ChatGPT新功能一:上传任意文档分析
  • ChatGPT新功能二:整合所有工具,不再需要手动切换
  • 为什么整合后的GPT-4像AI Agent?实例证明
  • 查询天气并归类,然后生成图片
  • 为什么是GPT-4推出这样的整合了各种工具的AI Agent模式

ChatGPT新功能一:上传任意文档分析

此前,OpenAI的ChatGPT Plus用户如果像分析PDF之类的文档,需要单独选择Advanced Data Analysis功能,然后点击上传附件才能分析。如下图所示:

图片

而这个功能说实话并不是很好,尤其是PDF文档的分析,与Anthropic的Claude2相比那真的是有点逊色。不过,官方将这个功能放到Advanced Data Analysis中可能本来就是定位做数据分析而非文档理解的。

此次更新后的第一个功能就是你可以上传任意文档,包括PDFs、数据文件等做分析。按照官方的功能提示,这个应该是比之前支持更多的文档类型。

ChatGPT新功能二:整合所有工具,不再需要手动切换

ChatGPT Plus用户是可以通过GPT-4完成很多任务的,此前都是插件的形式进行切换,如下图所示:

图片

而此次更新的第二个功能是整合工具后的GPT-4不再需要切换即可使用所有的功能。也就是说,GPT-4将根据你给的指令理解你的意图,自动使用不同的工具完成任务

这个功能意味着GPT-4将比此前更加智能,而且非常像此前大家说的AI Agent的能力。

为什么整合后的GPT-4像AI Agent?实例证明

新的GPT-4将直接根据你的输入自动选择工具完成你的任务,那么这里就涉及了意图理解、任务规划、工具使用等。基本上就类似当前的AI Agent的工作原理,包括此前的AutoGPT、MetaGPT等都是类似的思路。

以网友的实测为例,在新的GPT-4模式下,你可以直接输入如下类似如下内容:让GPT-4查询2023年某个地方的天气,并展示总结这些天气结果,并生成未来类似的天气。

当前已经有网友测试了很多例子。我们这里展示一个最震撼的案例:

查询天气并归类,然后生成图片

该用户跟GPT-4说,让它找一下Altantic的2023飓风季节的数据,然后用信息图展示飓风的级别和大小。再根据所在地生成最像的一个飓风图像。

图片

可以看到,GPT-4准确理解了用户的意图,首先浏览网页查询天气,并做了2次的图片生成工作,第一次是总结天气类型,第二次是生成未来的天气图!

尽管这里是用户提供了一些具体的步骤,但是GPT-4的生成结果是连续调用了多个工具没有中断。想象一下,如果给出一个目标任务,让GPT-4自己根据任务的复杂的规划步骤,并考虑每个步骤使用什么样的工具,那么这就是一个AI Agent形态了!这真的是一个巨大的功能!

为什么是GPT-4推出这样的整合了各种工具的AI Agent模式

除去开源项目,当前主流的大模型供应商其实都没有这样一个整合了多个工具的单模型入口。即输入一个指令,然后模型根据需要自己调用多个工具解决问题。原因主要在于AI Agent需要一个非常强大的大语言模型作为控制器才能运转得好。而这样的大语言模型需要具备如下几个能力:

强大的理解能力:这是基本的能力,尽管很多模型的意图理解都还可以,但是涉及到复杂的意图,那么GPT-4目前是最强大的。
强大的任务规划与分解能力:对于AI Agent来说,理解了意图之后要完成意图需要分解目标,规划任务并能找到合适的路径完成才是最重要的。

尽管说上面两个能力看似很多模型都有,但是实际上只有GPT-4才有一定的商用水平。在一开始GPT-4推出的时候,OpenAI就说过,GPT-4最大的不同是对于复杂任务的理解和解决能力,比GPT-3.5要明显地高。而这也是GPT-4可以推出这样整合模型的一个重要保障!

不过目前DataLearnerAI的工作人员还没有收到该更新,想必又是1-2周的等待了!

内容链接:https://www.hpaper.cn/13179.html

(0)
上一篇 2023-10-30 上午10:02
下一篇 2023-10-30 上午10:04

相关推荐

  • 时隔近两年,贝索斯的蓝色起源商业航天项目重启,将六名游客送入太空

    因发动机故障停飞近两年后,亚马逊创始人、亿万富翁贝索斯旗下蓝色起源公司重启载人太空旅行服务。当地时间周日,蓝色起源用火箭把6名乘客送上了100km的高空,短暂停留后返回地面。 发射曾被推迟一小时,最终于当地时间周日上午9:35分左右在蓝色起源的西德克萨斯州发射场升空。发射后,航天器超越了国际公认的太空高度(100km)。随后,火箭和舱室相继返回地球。其中舱室…

    18小时前
    739
  • “索罗斯战友”到底猛砍了多少英伟达?答案来了:至少70%!

    前索罗斯副手、亿万富翁Stanley Druckenmiller上周表示,人工智能热潮可能被过度炒作了,他削减了许多英伟达持仓,不过减持规模并没有透露。最新的13F文件给出了相关重要线索。 本周公布的13F文件显示,Druckenmiller的家族办公室在今年第一季度出售了超过44.1万股的英伟达股票,将其英伟达持仓减少至仅17.6万股,这意味着仅截至一季度…

    3天前
    789
  • 大摩看好AI服务器成吸金利器!戴尔大涨11%

    人工智能(AI)概念股又飚了,被投资者看好AI服务器强劲需求打动的戴尔就是其中佼佼者。 美东时间5月15日周三,戴尔(DELL)午盘涨至150.28美元,日内涨约12%,收涨11.2%,创盘中和收盘历史新高,今年内累计涨近95%。 虽然戴尔自身周三并未发布任何利好消息,但摩根士丹利的分析师Erik Woodring当天发布了看涨戴尔的报告,预计市场对AI服务…

    4天前
    422
  • 价格战开卷!字节发布豆包大模型,比行业便宜99.3%

    5月15日,在2024春季火山引擎Force原动力大会上,字节跳动正式发布豆包大模型。 据火山引擎总裁谭待介绍,目前,豆包日均处理1200亿Tokens文本,生成3000万张图片。经过一年时间的迭代和市场验证,豆包大模型正成为国内使用量最大、应用场景最丰富的大模型之一。 “大的使用量,才能打磨出好模型,也能大幅降低模型推理的单位成本。豆包主力模型在企业市场的…

    5天前
    382
  • GPT 4o意味着什么?OpenAI加苹果,AI手机势不可挡!

    ChatGPT带飞Siri? 当地时间5月13日上午10点,OpenAI在春季发布会上发布了GPT-4的迭代版本——GPT-4o。据悉,GPT-4o的速度是上一代的两倍,并且对用户更友好:语音唤起、实时对话、无需注册、免费使用。 OpenAI表示,GPT-4o及其文本和图像能力即日起将开始向API和用户推出,语音和视频能力即将推出。 从定位来看,全新的旗舰版…

    6天前
    462
  • “微软-OpenAI”模式!中国“AI独角兽”投了个遍,阿里是中国AI最大金主

    “微软-OpenAI”模式作为AI行业最成功投资案例,近些年成为众多公司争相学习的模板。如今阿里便走在相似的道路上,通过云计算入股人工智能,成为了中国AI领域的投资翘楚,有望在全球AI发展浪潮中占据一席之地。 不同于传统的现金投资方式,阿里提供云计算额度,让这些初创企业能够使用训练AI模型所需的宝贵网络资源。 目前阿里已投资多家国内AI初创公司,包括月之暗面…

    2024-05-13
    210
  • 更专注AI和半导体,甚至有意PK英伟达!软银出售部分“愿景基金”资产

    孙正义投资重心转为半导体和人工智能行业了? 5月10日,据媒体报道,软银集团旗下有一个叫做“愿景基金”的旗舰投资基金,它是全球最大的风险投资基金之一,这个基金曾经很喜欢投资初创公司,特别是那些有潜力的科技公司。此前,软银的创始人孙正义对风险投资交易情有独钟,但最近,孙正义改变了策略,他开始减少传统的风险投资,并转向对高科技行业如半导体和人工智能的战略性投资。…

    2024-05-11
    191
  • 报道:OpenAI计划下周一宣布人工智能搜索引擎

    周四,据报道,OpenAI计划于下周一5月13日宣布其基于AI的搜索产品,以期与谷歌搜索竞争。 上周就有多方位消息证实,OpenAI将发布备受瞩目的ChatGPT搜索引擎产品。OpenAI将会在当地时间5月9日上午10点公布该消息,大约是北京时间周五的凌晨2点。据悉,OpenAI将推出搜索网页,search.chatgpt.com域名和相关的SSL证书已经被…

    2024-05-10
    192
  • 谷歌AI药物研发模型AlphaFold重磅升级:预测所有生命分子的结构和相互作用

    谷歌在生物医学领域的人工智能(AI)模型重磅升级,将为加快药物研发做出更大贡献。 美东时间5月8日周三,谷歌宣布,旗下AI研究实验室谷歌DeepMind以及致力于以AI方式提升药物发现的谷歌姊妹公司Isomorphic Labs联合开发了新的AI模型——AlphaFold 3,称是一种“革命性的模型”,它可以预测蛋白质、DNA、RNA等生物分子的结构以及它们…

    2024-05-09
    1.5K
  • 抢跑苹果甩平价AI手机王炸!谷歌开卖499美元Pixel 8a,AI功能加持不加价

    苹果的人工智能(AI)手机功能还“犹抱琵琶半遮面”,谷歌就已经抢在苹果前面甩出了自己的平价AI手机王炸。 美东时间5月7日周二,谷歌发布新一代平价智能手机Pixel 8a,并当天开始接受预订。虽然它配置了最先进的谷歌处理器,拥有了一批新的AI功能,但并未上调价格,起售价和前代一样仍为499美元。同时,谷歌还发布了新版平板电脑Pxel,不配支架的平板售价399…

    2024-05-08
    1.4K
  • 微软准备推出新款自研AI模型 硬刚谷歌、Anthropic以及OpenAI

    媒体报道,微软公司目前正在开发自家的人工智能模型,与谷歌、Anthropic以及OpenAI竞争。 据了解,这是自从微软向OpenAI投资超过100亿美元以重新获得后者人工智能模型的使用权以来,微软首次开始训练一个规模足够大的内部AI模型。这个新模型在内部被称为MAI-1,由Mustafa Suleyman负责,他曾是谷歌AI的负责人,此前也担任AI初创公司…

    2024-05-07
    1.5K
  • 高盛:上周对冲基金科技股买入力度为一年多以来最大

    高盛的大宗经纪业务数据显示,从上周情况来看,被认为是“聪明钱”的对冲基金对科技股的风险偏好并没有丧失,这一群体以一年多以来最快的速度抢购科技股,对科技股的净买入创下2022年12月以来最大,主要是由于多头仓位增加和空头回补推动。这也是对冲基金连续第四周净买入科技股。 事实上,标普500信息科技指数在上周之前的时间里表现疲软,4月的大部分时间都在下跌,主要是由…

    2024-04-30
    1
  • 禾赛发起一场“科技平权”

    作者 | 郑巧 编辑 | 周智宇 北京国际汽车展览会上,比亚迪董事长王传福来到了小米汽车展台,小米董事长雷军指着自家SU7问王传福,“您没看过这么好看的激光雷达吧?”引得现场一片哄笑。 随后雷军解释,这是禾赛科技为小米SU7定做的激光雷达。在北京车展上,从百万级的路特斯EMEYA,到25-45万的理想L系列,在智驾上都离不开禾赛科技的激光雷达。甚至16万出头…

    2024-04-29
    3
  • 深蓝要和华为联手挑战特斯拉

    华为造车军团正以势不可挡之势,极速扩张。 4月25日,深蓝汽车在北京车展上宣布,将携手华为打造比特斯拉更好的智能电动汽车。这一宣言预示着深蓝汽车在智能电动出行领域的雄心壮志。此前一天,深蓝汽车 CEO 邓承浩还现身华为发布会。这意味着在阿维塔之外,长安汽车和华为的合作正更加深入。 邓承浩自信地表示,深蓝+华为,一定能超越特斯拉。 华尔街见闻了解到,双方的合作…

    2024-04-28
    1
  • “每季度100亿美元”成为AI大战入场券!三巨头电话会总结:“撒钱”极为坚决!

    世界上排名靠前的几个科技公司已斥资数十亿美金投入AI革命。现在,他们计划再投入数百亿资金。 在本周的季度财报电话会上,Meta、谷歌和微软都强调了他们对AI的投资规模。周三,Meta将其今年的资本支出预测上调了100亿美金,全年上升至350亿到400亿美金。周四,谷歌首席财务官Ruth Porat表示,该公司今年每个季度将在资本支出上花费约120亿美金或更多…

    2024-04-26
    7
  • OpenAI“尝鲜”:收到英伟达全球首部DGX H200 AI超算

    英伟达号称开创先河的人工智能(AI)超级计算机DGX H200正式交付,OpenAI喝到了“头啖汤”。 美东时间4月24日周三,OpenAI总裁兼联合创始人Greg Brockman在社交媒体X透露,英伟达向OpenAI移交全球第一部DGX H200,并附上在交付现场他和OpenAI CEO 奥特曼以及英伟达CEO黄仁勋的合照。Brockman称,这部黄仁勋…

    2024-04-25
    4
  • “最懂苹果分析师”:苹果下调2024和2025年Vision Pro发货量

    天风国际证券分析师郭明錤称,由于需求降幅“严重超出预期”,苹果已经削减了Vision Pro头显的发货量。 4月24日,郭明錤发文表示,苹果已下修2024年Vision Pro发货量至40至45万台,原本预期为70至80万台。 郭明錤认为,苹果在美国之外的市场推出Vision Pro之前就削减了订单,这表明美国的需求大幅下降。因此,预计当Vision Pro…

    2024-04-24
    1
  • 英伟达Jim Fan反击扎克伯格AI“寒冬”论:AI领域还有巨大潜力

    小扎前两天接受采访时,认为AGI短时间不会实现,接下来可能出现又一轮的AI寒冬,对此英伟达人工智能总监Jim Fan不同意。 Jim Fan的观点概括来说如下: 他不认为当前会出现”人工智能(AI)冬天”的现象,即AI发展遇到停滞。即便GPT-5等大型语言模型的发展可能会放缓,但AI的其他领域如机器人技术仍有巨大的发展空间; 他强调了…

    2024-04-23
    6
  • 第一批投大模型的VC,开始卖老股了?

    关于该不该投大模型,依然还在争论,该不该退却早早提上了VC的日程。 最近一位投资人透露,某个头部大模型公司的资方,已经决定在这一轮估值起来后,卖掉老股。听闻此言,我的第一个疑问是,融资进度按下加速键的大模型,这么快已经进入退出期了吗? 不过跟数位大模型投资人交流后我发现,“大模型卖老股退出”作为现象是存在的,但的确还远远称不上“现象级”,并不具备普遍性。 大…

    2024-04-22
    1
  • AI热潮熄火!“一年十倍股”超微暴跌20%,英伟达重挫10%,ARM也崩了

    4月19日周五,“一年十倍股”超微电脑(SMCI)暴跌超20%,股价收跌23%,创两个多月新低。 超微电脑在周五的一份简短新闻稿中表示,将于4月30日公布第三财季业绩。然而,该公司打破了此前提供初步业绩的惯例,这引发投资者担心,疯狂减持该股。 回顾今年1月份,超微电脑在宣布第二季度财报的11天前,上调了销售和盈利指引。亮眼的业绩预告令超微股价暴力拉升,也推动…

    2024-04-20
    1