OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

真如 Sam Altman 此前所言,OpenAI 首届开发者大会为人们带来了一些非常棒的新东西。继今年春天公布 GPT-4 之后,OpenAI 又创造了一个不眠夜。过去一年,ChatGPT 绝对是整个科技领域最热的词汇。OpenAI 也依靠 ChatGPT 取得了惊人的成绩:总结来说,OpenAI 证实 ChatGPT 目前每周有超过 1 亿活跃用户,超过 200 万开者使用 API 等进行开发,与超过 92% 的财富 500 强公司合作。作为备受期待的首届开发者大会,Sam Altman 在昨晚带来了一系列全新

真如 Sam Altman 此前所言,OpenAI 首届开发者大会为人们带来了一些非常棒的新东西。

继今年春天公布 GPT-4 之后,OpenAI 又创造了一个不眠夜。

过去一年,ChatGPT 绝对是整个科技领域最热的词汇。OpenAI 也依靠 ChatGPT 取得了惊人的成绩:总结来说,OpenAI 证实 ChatGPT 目前每周有超过 1 亿活跃用户,超过 200 万开者使用 API 等进行开发,与超过 92% 的财富 500 强公司合作。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

作为备受期待的首届开发者大会,Sam Altman 在昨晚带来了一系列全新的 AI 模型和工具,包括如下:

全新的 GPT-4 Turbo 模型

更可控的输出:函数挪用增强、JSON 模式

开放新的 API:DALLE-3、GPT-4 Turbo with vision、TTS 和 Whisper V3

GPT-4 微调、自定义模型

GPTs:创建自定义版本的 ChatGPT

GPT Store 即将上线

Assistants API:更接近 AI 智能体的体验

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

从这些更新的展示中可以明显感觉到,OpenAI 正在努力把 ChatGPT 建立成一个自动化程度更高的 AI 智能体,这个智能体不再是「纸上谈兵」,而是越来越多地通过操纵现有应用对物理世界产生影响。比如,在活动现场,一位 OpenAI 的工作人员通过语音与 ChatGPT 对话,给在场的每一位观众发放了 500 美元 OpenAI 代金券。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

GPT-4 Turbo:128k 上下文、价格更便宜

会上首先亮相的是 GPT-4 的全新版本 GPT-4 Turbo。我们知道,OpenAI 在今年 3 月公布了 GPT-4 初始版本,并在 7 月广泛供给给了所有开发者。Sam Altman 在现场一一解析了 GPT-4 Turbo 的几大亮点。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

首先,GPT-4 Turbo 比 GPT-4 更强大,支持 128k 上下文窗口,可以在单个 prompt 中处理超过 300 页的文本。更长的上下文意味着模型输出结果更加准确。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

其次,GPT-4 Turbo 能够了解更近、更丰富的世界知识,外部文档和数据库的截止日期更新到了 2023 年 4 月。与之相比,GPT-4 的知识库截止日期为 2021 年 9 月。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

接下来是函数挪用更新。函数挪用允许将应用程序函数或外部 API 描绘给模型,并让模型智能选择「包含挪用这些函数的参数」的 JSON 对象。

今天,GPT-4 Turbo 在这方面做了几项改进,比如在一条消息中能够挪用多个函数。用户可以在发送一条消息时请求多个操作,如「打开车窗并关闭空调」。此外函数挪用的准确性也得到提升,GPT-4 Turbo 更有可能返回正确的函数参数。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

与此同时,指令遵循性能得到提升并支持了 JSON 模式。其中在须要严格指令遵循的任务上,GPT-4 Turbo 的表现比以往的模型更好,比如生成特定格式(始终以 XML 来响应)。

GPT-4 Turbo 支持了新的 JSON 模式,确保模型使用有效的 JSON 进行响应。新的 API 参数 response_format 限制模型输出以生成语法正确的 JSON 对象。该模式对开发者在聊天完成(Chat Completions)API 中生成 JSON 非常有用。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

多模态能力也是大会的重点内容,为此 OpenAI 开放了全新的 API。

GPT-4 Turbo 集成了 DALL·E 3,能够接受并处理图象输入(即 GPT-4 Turbo with vision),生成标题、分析现实世界的图象、阅读带图表的文档等。

对于 GPT-4 Turbo with vision,开发者可以通过 API 中的 gpt-4-vision-preview 来访问。OpenAI 计划为主要的 GPT-4 Turbo 模型供给视觉支持,价格取决于输入图象的大小,例如像素 1080×1080 的图象须要的成本为 0.00765 美元。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

                                已经有开发者上手试用,效果不错。图源:https://x.com/_nateraw/status/1721661738956058925?s=20

同样地,开发者可以通过图象 API 将 DALL・E 3 直接集成到他们的应用程序和产品中。与之前版本的 DALL・E 类似,该 API 内置审核功能,可以帮助开发者保护自己的应用程序免遭滥用。OpenAI 供给了不同的格式和质量选项,生成一张图象的起价为 0.04 美元。

在文本转换语音领域,开发者现在可通过文本到语音(text-to-speech)API,将文本转化为人类质量的语音。全新 TTS 模型供给了 6 种预设声音和两种模型变体即 tts-1 和 tts-1-hd,其中 tts 针对实时用例进行优化,tts-1-hd 针对质量进行优化。每输入 1000 字符的起价为 0.015 美元。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

有了新版本 GPT-4 Turbo,OpenAI 也没有「忘了」GPT-4。

现在,GPT-4 微调正在实验访问阶段。OpenAI 正在创建一个用于 GPT-4 微调的实验性访问程序。不过与 GPT-3.5 微调获得的实质收益相比,GPT-4 微调须要更多工作才能对基础模型实现有意义的改进。

未来,随着 GPT-4 微调在质量和安全性方面得到提升,GPT-3.5 微调的活跃使用者可以选择在他们的微调控制中心应用 GPT-4 程序。OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

在微调之外,对于那些须要更多定制化功能的组织机构,OpenAI 启动了自定义模型(Custom Models)计划,允许组织机构与 OpenAI 研究人员一起针对特定领域来训练定制化 GPT-4。这包括修改模型训练过程的每一步,从额外的领域特定预训练到运行针对特定领域的定制化 RL 训练后(post-training)过程。

组织机构对其定制化模型拥有独家访问权。OpenAI 不会供给给其他客户或与其他客户共享,也不会用于训练其他模型。此外供给给 OpenAI 以训练定制化模型的专有数据不会在其他上下文中重复使用。不过,OpenAI 表示,目前自定义模型的功能有限且成本高昂。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

最后是价格。如你我所见,GPT-4 Turbo 性能更强了,但价格却被打下来了。对比 GPT-4,GPT-4 Turbo 的输入 token 价格是其 1/3,为 0.01 美元 / 1000token;输出 token 价格是其 1/2,为 0.03 美元 / 1000token。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

同样地,GPT-3.5 Turbo 16K 以及 GPT-3.5 Turbo 4K、16K 微调的价格也都有一定程度的下降,具体参见下图。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

目前如何使用 GPT-4 Turbo 呢?

所有付费开发者都可以通过 API 中的 gpt-4-1106-preview 来试用 GPT-4 Turbo。未来几周,OpenAI 将公布稳定的生产就绪(production-ready)模型。

GPTs 与 GPT 商店

新模型的公布令人激动。但接下来这一公布,可能会令你联想到十几年前苹果的公布会,这也是众多网友认为的最大亮点。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

Sam Atlman 公布了 GPTs,让用户们无需代码,结合自己的指令、外部知识和能力创建自定义版本的 ChatGPT。

自从推出 ChatGPT 以来,用户们一直期待能够定制 ChatGPT。OpenAI 在 7 月推出了自定义指令,可让用户设置一些首选项,但这无法完全满足用户。许多高级用户会维护一份提示和指令集列表,并将它们手动复制到 ChatGPT 中。GPTs 的公布能够自动帮用户们完成这项工作了。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

从现场展示来看,为了创建一个 GPT,OpenAI 允许用户使用一个名为 GPT Builder 的对话式 AI 模型,让用户使用自然语言就能建立自定义的 GPT。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

Sam Altman 现场展示如何通过自然语言建立自定义 GPT。在这个例子中,Altman 要求 ChatGPT 创建一个可以给创业者供给建议的 GPT。在接收到指令后,ChatGPT 不仅建立了这个 GPT,还供给了头像、命名建议。

除了使用内置功能之外,用户还可以通过向 GPT 供给一个或多个 API 来定义定制化 action。与插件一样,定制 action 允许 GPTs 集成外部数据或与现实世界交互。

此举目的非常简单,OpenAI 要充分挖掘社区开发者的力量,「我们相信最惊人的 GPT 产品将来自社区。无论您是教育家、教练,还是只是喜欢建立有用工具的人,您都不须要了解编码来制作工具并分享您的专业知识。」

同时,OpenAI 也会在本月底上线 GPT Store,让开发者们分享、公布自己创建的 GPTs。这是继这家公司宣布打造 ChatGPT 插件生态系统之后的又一次尝试。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

没错,你是不是想到了苹果商店?OpenAI 明确表示 GPT Store 上会有 GPT 的排行榜。活动上,Altman 表示 OpenAI 将向最常用、最有用的 GPT 支付收入的一部分,但是否会向公布 GPT 的创建者们收费还未知。

目前,GPTs 可供 ChatGPT Plus 和企业用户试用。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

OpenAI 工作人员现场演示 GPTs。她建立了一个能与个人行程表联通的 GPT,然后以对话的形式命令 GPT 给 Altman 发信息,结果 Altman 真的收到了。

Altman表示:「最终,你只需向计算机询问你须要什么,它就会为你完成所有这些任务。」

Assistants API

在 keynote 环节,Sam Altman 还公布了「Assistants API」,这是他们帮助开发人员在自己的应用中建立类似「AI 智能体(agent)」体验的第一步。

通俗点来说,「assistant」可以理解为一种为某个专门用途建立的 AI,它有特定的指令,利用额外的知识,并能挪用模型和工具来执行任务。新的 Assistants API 供给了代码解释器(Code Interpreter)、检索(Retrieval)以及函数挪用(function calling)等新功能,可以处理大量以前你须要自己完成的繁重工作,使你能够建立高质量的 AI 应用。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

这个 API 设计灵活,用例包括基于自然语言的数据分析应用、编码助手、AI 驱动的度假计划器、声控 DJ、智能可视画布等等。Assistants API 基于支持新 GPTs 产品的相同功能而建立:自定义指令和工具,如代码解释器、检索和函数挪用。

这个 API 引入的一个关键变化是持久和无限长的线程,它允许开发人员将线程状态管理移交给 OpenAI,并绕过上下文窗口限制。使用 Assistants API,你只需将每条新消息添加到现有线程中即可。

Assistants 还可根据须要挪用新工具,包括

代码解释器(Code Interpreter):在沙盒执行环境中编写和运行 Python 代码,并生成图形和图表,处理包含各种数据和格式的文件。它允许你的 assistants 反复运行代码,以解决具有挑战性的代码和数学问题等。

检索(Retrieval):利用模型之外的知识(如专有领域数据、产品信息或用户供给的文档)增强 assistants。这意味着,你不须要计算和存储文档的嵌入,也不须要实现分块和搜索算法。Assistants API 会根据 OpenAI 在 ChatGPT 中建立知识检索的经验,优化要使用的检索技术。

函数挪用(Function calling):使助理能够挪用你定义的函数,并将函数响应纳入其信息中。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

        OpenAI 的工作人员现场演示 Assistants API 的用法:它不仅能列出巴黎旅游建议,还能在地图上将计划中提到的地点按类别标记出来。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

                               Assistants API 自动阅读文档、挪用代码解释器来计算旅行开销。

OpenAI 表示,与平台的其他部分一样,传给 OpenAI API 的数据和文件绝不会用于训练他们的模型,开发人员可以在他们认为合适的时候删除数据。

开发者可以前往 Assistants playground 试用 Assistants API 测试版,无需编写任何代码:https://platform.openai.com/playground?mode=assistant

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

从今天起,所有开发者都可以使用 Assistants API 测试版。定价参见:https://openai.com/pricing

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

以上就是这场 AI 盛会的重点内容了,大家怎么看?

据我们所知,有人在现场看,比如微软 CEO 纳德拉:

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

虽然只是短暂地露面,但纳德拉也认真地谈到了两家公司的持续合作关系。

此外,也有人选择不看:

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

博客链接:https://openai.com/blog/new-models-and-developer-products-announced-at-devday

给TA打赏
共{{data.count}}人
人已打赏
应用

中国信通院华东分院征集2023长三角制造业数字化转型试点树模

2023-11-7 14:04:00

应用

联发科翻身,同蓝厂联合研发「全大核」体系,vivo X100稳了

2023-11-7 15:23:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
有新私信 私信列表
搜索