Agent:OpenAI的下一步,亚马逊云科技站在第5层

2023-08-02 19:48:39 来源: 富途牛牛

大模型下半场拉开序幕。

Agent成为最受重视的方向。

OpenAI创始成员Andrej Karpathy就在黑客马拉松演讲中表示,相比大模型训练,OpenAI内部目前更关注Agent领域。


(资料图片)

每当有新的Agent论文出来的时候,团队都会很兴奋并且认真地讨论。

你们(开发者们)都正站在Agent开发的最前沿,这个领域OpenAI也没什么积累。

什么是Agent?

在大模型语境下,可以理解成能自主理解、规划、执行复杂任务的系统。

以AutoGPT和BabyAGI为代表的技术演示型项目,今年4月短暂的火了一阵,但离真正应用到业务中还有一段距离。

现在,Agent第二轮爆发正在酝酿中,标志就是新一轮应用与场景结合更紧密了。

不出意外,先行动起来的又是编程开发行业。

最近的热门开源项目Sweep,直接与GitHub的Issue和Pull Request场景整合,自动“清扫”bug报告和功能请求,直接完成对应代码。

创业公司中,也有OpenAI支持的Cursor代码编辑器,把生成代码抬到了一句话生成整个项目框架的高度。

接下来,Agent也将成为新的起点,成为各行各业构建新一代AI应用必不可少的组成部分。

对此,初创公司Seednapse AI创始人提出构建AI应用的五层基石理论,受到业界关注。

Models,也就是我们熟悉的调用大模型API。

Prompt Templates,在提示词中引入变量以适应用户输入的提示模版。

Chains,对模型的链式调用,以上一个输出为下一个输入的一部分。

Agent,能自主执行链式调用,以及访问外部工具。

Multi-Agent,多个Agent共享一部分记忆,自主分工相互协作。

创业先锋之外,连AI基础设施的巨头也已经开始在Agent上发力。

比如亚马逊云科技纽约峰会上宣布的Amazon Bedrock Agents新功能,便是这种趋势最有代表性的体现。

Amazon Bedrock Agents在全托管基础模型服务的基础上,又把开发、部署和管理多个Agent的能力打包集成在一起。

如果按照前面的五层基石理论,这类服务相当于直接从第五层开始,大大降低开发门槛。

正如亚马逊云科技在发布会上所形容:

只用几次点击,搞定能执行任务的生成式AI应用。

可以预见的是,降低了门槛的Agent应用也将在各行各业全面爆发。

Agent,AI应用新时代的起点

怎样才算一个Agent应用?OpenAI华人科学家翁丽莲给出直观的“配方”:

Agent = 大模型+记忆+主动规划+工具使用

以亚马逊云科技平台为例,开发Agent应用首先要根据具体任务场景给Agent选择合适的基础模型。

Amazon Bedrock上除了自家的Amazon Titan大模型,还集结了擅长安全可控的Anthropic、擅长检索汇总信息的Cohere、以及专攻文生图的stability.ai等各家模型。

选好后,把要执行的任务指令直接用文字描述出来,让Agent明白要扮演的角色和要完成的目标。

指令可以是包括一系列“问题-思考步骤-行动步骤-示例”的结构化提示词,在ReAct(协同推理和行动)技术支持下,基础模型可以通过推理和决策找出相应的解决方案。

接下来的重头戏便是Add Action Group(添加动作组)。

Agent要完成的具体任务,以及能使用的工具如企业系统API、Lambda函数等都是在这里设置。

官方演示中是一个保险索赔管理场景,Agent通过提取未结索赔的列表、确定每个索赔的未完成文书工作并向保单持有人发送提醒来管理保险索赔。

所有动作组设置好后,创建Agent和部署都是几次点击就能完成。

部署完成后,在测试中就可以看到Agent理解用户请求、将任务分解为多个步骤(收集未结保险索赔、查找索赔ID、发送提醒)并执行相应的操作。

Amazon Bedrock通过向导式交互界面,减少了配置基础模型所需的编码工作量。

动作组提供调用API实现特定功能,以及使用自己的数据构建差异化应用程序,又让基础模型能够完成更复杂的实际业务任务。

在整个流程中,还可以配合亚马逊云科技平台上的各种安全服务。比如使用PrivateLin建立基础模型和本地网络之间的私有连接,所有流量都不会暴露给互联网。

又通过提供完全托管的服务,让开发者不需要管理底层系统就能发挥基础模型的能力。

最终缩短从基础模型到实际应用的周期,加速基础模型为业务创造的价值。

加速大模型应用,还应关注什么

有了Amazon Bedrock的Agent能力,我们得以快速将大模型投入实际业务,为企业实现降本增效或创新。

但要真正利用生成式AI的全部价值、发挥全部潜力,并与其他竞争对手拉开潜力,私有数据才是其中根本。

换言之,大模型应用落地的关键,是企业自己宝贵的行业数据。

如何集成这些丰富的资源到我们的Agent之中,保证我们的大模型应用在执行任务时能够高效访问到正确的信息——是当下每一个企业都要面对的问题。

当然,这一切都必须以保证隐私为前提。

除了私有数据的集成和调用,在大模型应用落地的路上,最为底层的支撑,算力,也始终是一个百说不厌的话题。

众所周知,当下的显卡资源异常稀缺,且价格不菲。

譬如有调查就发现,像英伟达的H100,今年4月中旬在海外电商平台就已炒到超4万美元,甚至标价6.5万美元的也不算罕见。

无论是购买还是租用,这都成了全球各企业在探索生成式AI应用上的一大笔支出。

如何让这一笔花销更为经济实惠?这也是每个企业的思虑所在。

值得关注的是,以马逊云科技为代表的领先供应商,正在针对生成式AI落地过程中的这些挑战和痛点提供系统性的解决方案,对上述问题一一破解。

针对个性化数据问题,亚马逊云科技宣布为三款数据服务提供向量引擎,用来助力生成式AI应用与业务整合。

我们知道,在生成式AI爆发之后,向量数据库也实在火爆不已。因为相比传统的关系数据库,它能给予与模型上下文更相关的响应(如下图所示)。

亚马逊云科技这一最新服务,就是将我们的私有数据存储到具有向量引擎的数据库中,在进行生成式AI应用时,通过简单的API调用就能方便地查询企业内部的数据。

而根据当前数据存储位置、对数据库技术的熟悉程度、向量维度的扩展、Embeddings的数量和性能需求等不同需求,亚马逊云科技提供了3个选项来满足:

-Amazon Aurora PostgreSQL兼容版关系型数据库,支持pgvector开源向量相似性搜索插件;-分布式搜索和分析服务 Amazon OpenSearch,带有k-NN(k最近邻)插件和适用于Amazon OpenSearch Serverless的向量引擎;-兼容 PostgreSQL的Amazon RDS(Amazon Relational Database Service)关系型数据库,支持pgvector插件。

当然,最值得说道的是这次最新推出的Amazon OpenSearch Serverless服务,它最大的优点就是让企业只关心向量数据的存储和检索,而不用背上任何底层运维的负担。

解决完数据集成问题,在底层支撑上,亚马逊云科技这次也直接推出H100支持的全新Amazon EC2 P5实例,这一曾经对于大多数企业都相当难得的算力资源,现在也变得“唾手可得”了。

据了解,该实例包含8个英伟达H100 Tensor Core GPU,640GB高带宽GPU内存,同时提供第三代AMD EPYC处理器、2TB 系统内存和30TB本地NVMe存储,以及3200Gbps的聚合网络带宽和GPUDirect RDMA支持,可实现更低延迟和高效的横向扩展性能。

相比上一代基于GPU的实例,Amazon EC2 P5可以让训练时间最多可缩短6倍(从几天缩短到几小时),降低高达40%的训练成本。

再加上亚马逊云科技之前基于自研芯片发布的Amazon EC2 Inf2和Amazon EC2 Trn1n等性能也表现不错的实例,我们在算力需求这一问题上,可以说是有了非常多的按需选择空间。

除了以上这些基础支持,各种开箱即用的AI服务也不“缺席”:

如针对开发环节的AI编程助手Amazon CodeWhisperer,现在它与Amazon Glue实现集成,将AI代码生成的场景又扩展到一个新人群:数据工程师,只需自然语言(比如“利用json文件中的内容创建一个Spark DataFrame”),这些开发人员即可搞定各种任务;

再如针对商业智能(BI)的Amazon QuickSight,也能够让业务分析师们使用自然语言执行日常任务,在几秒钟内创建各种数据可视化图表;

还有Amazon HealthScribe,可以用于医疗行业生成临床文档,节省医生时间。

这些工具都是主打让企业专注于核心业务,提高生产效率。

最后,简单总结,我们能够发现:

从今年4月起,亚马逊云科技就结合自身定位并基于真实用户需求出发,正式宣布进军生成式AI市场,为一切想要利用生成式AI技术加速或创新业务的企业提供服务。

在短短的4个月期间,亚马逊云科技已推出了各类底座资源,从基础模型到算力支撑,从私人数据存储到高效开发工具,应用尽有。

而这次在纽约峰会释出的最新动向,则是继续加码生成式AI应用开发所需的一切。

从Amazon EC2 P5实例代表的算力层、到Amazon OpenSearch Serverless向量引擎、Amazon Bedrock Agents代表的工具层、再到Amazon QuickSight等代表的应用层,一项端到端的解决方案已然形成。

在这之中,亚马逊云科技不断降低生成式AI的门槛,无论是初创企业还是传统行业,无论是处于生成式AI进程的哪一层,都能在这里找到合适的工具,无需耗费太多精力在底层逻辑之上,便可快速投入实际业务。

如亚马逊云科技数据库、数据分析和机器学习全球副总裁Swami Sivasubramanian所说:

我相信生成式AI将改变每一个应用程序、行业和企业。

在各行各业都全力奔赴的这场全新技术变革之下,亚马逊云科技的这一系列服务,无疑为普通玩家赢得了宝贵的时间和机会。

我们可以期待:越来越多的生成式AI应用将被开发出来,生成式AI的创造力也得以渗透到各个领域,去改变、去颠覆每一个行业。

编辑/lambor

标签:

Agent:OpenAI的下一步,亚马逊云科技站在第5层

大模型下半场拉开序幕。Agent成为最受重视的方向。OpenAI创始成员Andre

08-02 19:48:39

“非遗”进大运村啦!运动员们现场体验了哪些技艺?来看→

位于成都大运村的互动体验中心无疑是“村”里人气最旺的地方。比赛和训

08-02 18:52:51

驰援!近百支民间救援力量已抵达保定涿州等地

中新网石家庄8月2日电(赵丹媚高红超)据河北省应急管理厅2日消息,保定

08-02 17:53:58

田亮14岁女儿身高快170cm,T恤配短裤显好身材,成为老爸翻版

拥有一副高挑修长的好身材,是很多人都梦寐以求的愿望,因为只有身材足

08-02 17:55:19

【凯麒-哈娜-同人】穿越成霍格沃兹巫师的我才不会不想离开 第二章 主角不都要出事吗

“嗯,教授。”凯麒发现教授可以听清中文。之后,他没有认真听那老人的

08-02 17:03:55

2023年全球及中国可拆卸式风力发电箱式变电站行业头部企业市场占有率及排名调研报告

2023年全球及中国可拆卸式风力发电箱式变电站行业头部企业市场占有率及

08-02 16:23:48

两部门:延续执行创业投资企业和天使投资个人投资初创科技型企业有关政策条件

据财政部,为进一步支持创业创新,现就创业投资企业和天使投资个人投资

08-02 16:07:15

红狮鱼怎么养

1、喂食:饲喂的都是富有营养的动物性饲料和白芝麻等。动物性饲料如水

08-02 15:19:40

超强台风“卡努”致日本冲绳1人死亡 超21万住户停电

中新社东京8月2日电据日本广播协会电视台报道,截至当地时间8月2日9时

08-02 14:54:50

增援潭柘寺,再探潭墅苑!朝阳消防门头沟救助受困居民

北京日报客户端|记者张宇实习生邓菲8月1日上午10时50分,接市消防救援

08-02 14:12:15

诺唯赞生物荣获CFS第十二届财经峰会“2023杰出品牌形象奖”

7月26日,凭借一流的产品品质和品牌影响力,生物科技公司诺唯赞荣获CFS

08-02 13:48:31

领失业金对以后退休金有什么影响吗?看看注意事项

失业金是失业人员满足一定条件后,可领取的失业期间的一种补偿金,用于

08-02 12:58:57

龙芯新款CPU流片成功,真能达到英特尔3年前水平?

【文 观察者网吕栋编辑 张广凯】8月1日,国产CPU厂商龙芯中科在官方微

08-02 12:23:10

多国人士称赞中国国际赛事组织能力

7月28日,第31届世界大学生夏季运动会在成都开幕。多国人士表示,本届

08-02 11:47:53

嘉兴查处针对国企负责人诬告陷害案,一举报人涉罪被追究刑责

据浙江省纪委省监委官方微信公众号“清廉浙江”近日消息,日前嘉兴市纪

08-02 11:15:07

地铁喝“水”被开“罚单”?回应来了……广东怎么规定?

近日,江苏南京一女子在地铁车厢喝饮料被开告知单告知单第七条显示在列

08-02 10:48:24

安徽实施大学生村医提升计划

本报合肥8月1日电(记者李俊杰)近日,安徽省卫健委等多部门联合印发《

08-02 10:33:14

1比6,女足出局了……

北京时间8月1日19点整,2023女足世界杯小组赛D组末轮,中国女足对阵英

08-02 10:09:52

慈星股份8月2日快速上涨

以下是慈星股份在北京时间8月2日09:55分盘口异动快照:8月2日,慈星股

08-02 09:41:39

三年期定期存款利率 定期存款利率计算器

1、是算第二年本金里,那样就是复利,本利成本金接着生利!但是你存一

08-02 09:09:18

安徽省多举措提升长江流域生态环境

  如今,长江流域安徽段生态越来越好,环境越来越优。记者近日从省发

08-02 08:44:02

盘前必读丨央行提出调整存量个人住房贷款利率;多家新能源汽车发布7月销量

机构指出,进入8月,进一步深度挖掘低位顺周期品种,适当关注利空冲击

08-02 08:10:54

中国人民银行、国家外汇管理局2023年下半年工作会议提出 综合运用多种货币政策工具 保持流动性合理充裕

继续深化利率市场化改革,促进企业综合融资成本和居民信贷利率稳中有降

08-02 06:58:27

8月1日基金净值:银华汇利灵活配置混合A最新净值1.697,涨0.06%

8月1日,银华汇利灵活配置混合A最新单位净值为1 697元,累计净值为1 69

08-02 05:56:17

学校教育的重要性作文素材 学校教育的重要性

0471房产来为大家解答以上的问题。学校教育的重要性作文素材,学校教育

08-02 03:08:04

“济港通”平台获评山东省数字政府“十佳应用”

7月25日上午,以“共享数字强省共享智慧山东”为主题的“2023山东数字

08-02 00:32:08

英山红色讲解员赴红安“取经”

英山红色讲解员赴红安“取经”---7月27日,英山县组织首届红色讲解员大

08-01 23:00:12

被拒绝!保时捷被曝曾与中国车企寻求合作

近日,有汽车分析师@Jas0nYu爆料称,大众汽车旗下保时捷品牌曾向比亚迪

08-01 21:44:43

楚雄州禄丰市:校车安全整治出“十招”

近年来,楚雄州禄丰市委、市政府把校车安全整治纳入平安法治建设“阳光

08-01 21:15:14

无缘出线?海地女足对阵丹麦女足战况:上半场结束,海地女足0比1丹麦女足

8月1日,据咪咕足球:上半场结束,海地女足禁区内手球送点,佩妮莱·哈

08-01 20:21:59

国瑞健康产业陕西附属公司15亿元贷款展期一年

根据展期协议,将此前签订的借款合同项下金额合计为人民币15亿元的贷款

08-01 19:52:02

一瓶水传递爱 申城50个爱心接力站为户外职工免费供水

今天,“一瓶水传递爱”的公益活动正式启动。

08-01 18:57:52

2023年的立秋在哪一天 2023年8月8日

立秋中虽然有个秋字,但却一点都没有秋天的凉爽,这时候的天气仍旧还是

08-01 18:24:22

孩之宝想重新上架《变形金刚》游戏 动视弄丢了

玩具生产商孩之宝(Hasbro)近日希望游戏公司动视暴雪重新开始销售《变

08-01 18:06:25

海思科:富马酸卢帕他定片通过仿制药一致性评价

海思科公告,公司于近日收到国家药品监督管理局下发的《药品补充申请批

08-01 17:11:26

秦港股份预计2023年上半年归母净利同比增加26%到31%

2023年8月1日,秦港股份(601326 SH)发布2023年半年度业绩预增公告。经

08-01 16:44:19

宁波方正股东户数连续3期下降 累计降幅4.85%

证券时报网讯,宁波方正8月1日在交易所互动平台中披露,截至7月31日公

08-01 16:10:13

闰土股份股东户数下降1.12%,户均持股18.15万元

闰土股份2023年8月1日在深交所互动易中披露,截至2023年7月31日公司股

08-01 16:00:10

山东 | 8月1日上午 无缆机器人将在水下展开一场精彩角逐

由中国海洋发展基金会、中国海洋发展研究会、中国海油海洋环境与生态保

08-01 15:10:45

假面骑士Gotchard的武士滑板形态形象公开,怎么看着有点像Revi

最近网上也是公开了最新的关于假面骑士Gotchard的武士滑板形态的形象,

08-01 14:52:22

194家企业入选!湖北省智能制造试点示范企业名单来了

【来源:湖北省经济和信息化厅】2023年7月31日,湖北省经济和信息化厅

08-01 14:15:04

中国外运港股跌超11%,澄清无意推进任何资本交易

8月1日上午,截至发稿,中国外运跌超11%。该公司在盘中一度上涨超24%。

08-01 13:59:02

痛心!北京此轮强降雨已致11人遇难27人失联

记者从北京市防汛抗旱指挥部获悉:受台风杜苏芮影响,北京自7月29日开

08-01 12:50:54

苏州阳澄湖吃大闸蟹哪里比较好?本地人推荐的阳澄湖老字号蟹庄

苏州阳澄湖吃大闸蟹哪里比较好?本地人推荐的阳澄湖老字号蟹庄大家都知

08-01 12:15:13

午间公告:温氏股份已耗资6.38亿元回购0.51%股份

【午间公告:温氏股份已耗资6 38亿元回购0 51%股份】①温氏股份:截至7

08-01 11:42:22

群晖 NAS DS224+ 今日开卖:四核赛扬、双盘位,2799 元

IT之家8月1日消息,群晖日前发布的DiskStation224+NAS今日开卖,首发售

08-01 11:11:37

亚马逊将向公共IPv4组织收费:每月账单大幅增加

据了解,从2024年2月1日起,亚马逊旗下云服务AWS将开始向使用公共IPv4

08-01 11:07:40

假面骑士gotchard传说副骑卡绘公布,颜值是真的帅,凯撒身边还有手机人,期待满满

《假面骑士gotchard》还有一个月左右就要播出了,这部作品可以说受到了

08-01 10:29:45

“房东”变“股东”,南海里水发力“股权财政”

一边是土地财政因房地产市场萎缩出现缺口,一边是国有资本经营状况随着

08-01 10:01:29

“稳增长”政策提振市场信心 7月制造业PMI延续反弹势头

图片来源:国家统计局网站  中国网财经8月1日讯(记者李春晖)一系列“

08-01 09:51:51

“非遗”进大运村啦!运动员们现场体验了哪些技艺?来看→
驰援!近百支民间救援力量已抵达保定涿州等地
田亮14岁女儿身高快170cm,T恤配短裤显好身材,成为老爸翻版
【凯麒-哈娜-同人】穿越成霍格沃兹巫师的我才不会不想离开 第二章 主角不都要出事吗
2023年全球及中国可拆卸式风力发电箱式变电站行业头部企业市场占有率及排名调研报告
两部门:延续执行创业投资企业和天使投资个人投资初创科技型企业有关政策条件
红狮鱼怎么养
超强台风“卡努”致日本冲绳1人死亡 超21万住户停电
增援潭柘寺,再探潭墅苑!朝阳消防门头沟救助受困居民
诺唯赞生物荣获CFS第十二届财经峰会“2023杰出品牌形象奖”
领失业金对以后退休金有什么影响吗?看看注意事项
龙芯新款CPU流片成功,真能达到英特尔3年前水平?
多国人士称赞中国国际赛事组织能力
嘉兴查处针对国企负责人诬告陷害案,一举报人涉罪被追究刑责
地铁喝“水”被开“罚单”?回应来了……广东怎么规定?
安徽实施大学生村医提升计划
1比6,女足出局了……
慈星股份8月2日快速上涨
三年期定期存款利率 定期存款利率计算器
安徽省多举措提升长江流域生态环境
盘前必读丨央行提出调整存量个人住房贷款利率;多家新能源汽车发布7月销量
中国人民银行、国家外汇管理局2023年下半年工作会议提出 综合运用多种货币政策工具 保持流动性合理充裕
8月1日基金净值:银华汇利灵活配置混合A最新净值1.697,涨0.06%
学校教育的重要性作文素材 学校教育的重要性
“济港通”平台获评山东省数字政府“十佳应用”
英山红色讲解员赴红安“取经”
被拒绝!保时捷被曝曾与中国车企寻求合作
楚雄州禄丰市:校车安全整治出“十招”
无缘出线?海地女足对阵丹麦女足战况:上半场结束,海地女足0比1丹麦女足
国瑞健康产业陕西附属公司15亿元贷款展期一年
一瓶水传递爱 申城50个爱心接力站为户外职工免费供水
2023年的立秋在哪一天 2023年8月8日
孩之宝想重新上架《变形金刚》游戏 动视弄丢了
海思科:富马酸卢帕他定片通过仿制药一致性评价
秦港股份预计2023年上半年归母净利同比增加26%到31%
宁波方正股东户数连续3期下降 累计降幅4.85%
闰土股份股东户数下降1.12%,户均持股18.15万元
山东 | 8月1日上午 无缆机器人将在水下展开一场精彩角逐
假面骑士Gotchard的武士滑板形态形象公开,怎么看着有点像Revi
194家企业入选!湖北省智能制造试点示范企业名单来了
中国外运港股跌超11%,澄清无意推进任何资本交易
痛心!北京此轮强降雨已致11人遇难27人失联
苏州阳澄湖吃大闸蟹哪里比较好?本地人推荐的阳澄湖老字号蟹庄
午间公告:温氏股份已耗资6.38亿元回购0.51%股份
群晖 NAS DS224+ 今日开卖:四核赛扬、双盘位,2799 元
亚马逊将向公共IPv4组织收费:每月账单大幅增加
假面骑士gotchard传说副骑卡绘公布,颜值是真的帅,凯撒身边还有手机人,期待满满
“房东”变“股东”,南海里水发力“股权财政”
“稳增长”政策提振市场信心 7月制造业PMI延续反弹势头
等差数列公式全部 等差数列公式和等差数列前N项和公式
X 广告
资讯
X 广告

Copyright ©  2015-2022 起点畜牧网版权所有  备案号:皖ICP备2022009963号-12   联系邮箱: 39 60 29 14 2@qq.com