OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

AI行业动态4个月前发布 ainavi
4,120 0
真如 Sam Altman 此前所言,OpenAI 首届开发者大会为人们带来了一些非常棒的新东西。
继今年春天发布 GPT-4 之后,OpenAI 又创造了一个不眠夜。
过去一年,ChatGPT 绝对是整个科技领域最热的词汇。OpenAI 也依靠 ChatGPT 取得了惊人的成绩:总结来说,OpenAI 证实 ChatGPT 目前每周有超过 1 亿活跃用户,超过 200 万开者使用 API 等进行开发,与超过 92% 的财富 500 强公司合作。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
作为备受期待的首届开发者大会,Sam Altman 在昨晚带来了一系列全新的 AI 模型和工具,包括如下:
  • 全新的 GPT-4 Turbo 模型
  • 更可控的输出:函数调用增强、JSON 模式
  • 开放新的 API:DALLE-3、GPT-4 Turbo with vision、TTS 和 Whisper V3
  • GPT-4 微调、自定义模型
  • GPTs:创建自定义版本的 ChatGPT
  • GPT Store 即将上线
  • Assistants API:更接近 AI 智能体的体验
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
从这些更新的展示中可以明显感觉到,OpenAI 正在努力把 ChatGPT 构建成一个自动化程度更高的 AI 智能体,这个智能体不再是「纸上谈兵」,而是越来越多地通过操纵现有应用对物理世界产生影响。比如,在活动现场,一位 OpenAI 的工作人员通过语音与 ChatGPT 对话,给在场的每一位观众发放了 500 美元 OpenAI 代金券。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
GPT-4 Turbo:128k 上下文、价格更便宜
会上首先亮相的是 GPT-4 的全新版本 GPT-4 Turbo。我们知道,OpenAI 在今年 3 月发布了 GPT-4 初始版本,并在 7 月广泛提供给了所有开发者。Sam Altman 在现场一一解析了 GPT-4 Turbo 的几大亮点。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
首先,GPT-4 Turbo 比 GPT-4 更强大,支持 128k 上下文窗口,可以在单个 prompt 中处理超过 300 页的文本。更长的上下文意味着模型输出结果更加准确。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
其次,GPT-4 Turbo 能够了解更近、更丰富的世界知识,外部文档和数据库的截止日期更新到了 2023 年 4 月。与之相比,GPT-4 的知识库截止日期为 2021 年 9 月。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
接下来是函数调用更新。函数调用允许将应用程序函数或外部 API 描绘给模型,并让模型智能选择「包含调用这些函数的参数」的 JSON 对象。
今天,GPT-4 Turbo 在这方面做了几项改进,比如在一条消息中能够调用多个函数。用户可以在发送一条消息时请求多个操作,如「打开车窗并关闭空调」。此外函数调用的准确性也得到提升,GPT-4 Turbo 更有可能返回正确的函数参数
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
与此同时,指令遵循性能得到提升并支持了 JSON 模式。其中在需要严格指令遵循的任务上,GPT-4 Turbo 的表现比以往的模型更好,比如生成特定格式(始终以 XML 来响应)。
GPT-4 Turbo 支持了新的 JSON 模式,确保模型使用有效的 JSON 进行响应。新的 API 参数 response_format 限制模型输出以生成语法正确的 JSON 对象。该模式对开发者在聊天完成(Chat Completions)API 中生成 JSON 非常有用。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
多模态能力也是大会的重点内容,为此 OpenAI 开放了全新的 API。
GPT-4 Turbo 集成了 DALL·E 3,能够接受并处理图像输入(即 GPT-4 Turbo with vision),生成标题、分析现实世界的图像、阅读带图表的文档等。
对于 GPT-4 Turbo with vision,开发者可以通过 API 中的 gpt-4-vision-preview 来访问。OpenAI 计划为主要的 GPT-4 Turbo 模型提供视觉支持,价格取决于输入图像的大小,例如像素 1080×1080 的图像需要的成本为 0.00765 美元。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
                                已经有开发者上手试用,效果不错。图源:https://x.com/_nateraw/status/1721661738956058925?s=20
同样地,开发者可以通过图像 API 将 DALL・E 3 直接集成到他们的应用程序和产品中。与之前版本的 DALL・E 类似,该 API 内置审核功能,可以帮助开发者保护自己的应用程序免遭滥用。OpenAI 提供了不同的格式和质量选项,生成一张图像的起价为 0.04 美元。
在文本转换语音领域,开发者现在可通过文本到语音(text-to-speech)API,将文本转化为人类质量的语音。全新 TTS 模型提供了 6 种预设声音和两种模型变体即 tts-1 和 tts-1-hd,其中 tts 针对实时用例进行优化,tts-1-hd 针对质量进行优化。每输入 1000 字符的起价为 0.015 美元。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
有了新版本 GPT-4 Turbo,OpenAI 也没有「忘了」GPT-4。
现在,GPT-4 微调正在实验访问阶段。OpenAI 正在创建一个用于 GPT-4 微调的实验性访问程序。不过与 GPT-3.5 微调获得的实质收益相比,GPT-4 微调需要更多工作才能对基础模型实现有意义的改进。
未来,随着 GPT-4 微调在质量和安全性方面得到提升,GPT-3.5 微调的活跃使用者可以选择在他们的微调控制中心应用 GPT-4 程序。OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
在微调之外,对于那些需要更多定制化功能的组织机构,OpenAI 启动了自定义模型(Custom Models)计划,允许组织机构与 OpenAI 研究人员一起针对特定领域来训练定制化 GPT-4。这包括修改模型训练过程的每一步,从额外的领域特定预训练到运行针对特定领域的定制化 RL 训练后(post-training)过程。
组织机构对其定制化模型拥有独家访问权。OpenAI 不会提供给其他客户或与其他客户共享,也不会用于训练其他模型。此外提供给 OpenAI 以训练定制化模型的专有数据不会在其他上下文中重复使用。不过,OpenAI 表示,目前自定义模型的功能有限且成本高昂。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
最后是价格。如你我所见,GPT-4 Turbo 性能更强了,但价格却被打下来了。对比 GPT-4,GPT-4 Turbo 的输入 token 价格是其 1/3,为 0.01 美元 / 1000token;输出 token 价格是其 1/2,为 0.03 美元 / 1000token。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
同样地,GPT-3.5 Turbo 16K 以及 GPT-3.5 Turbo 4K、16K 微调的价格也都有一定程度的下降,具体参见下图。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
目前如何使用 GPT-4 Turbo 呢?
所有付费开发者都可以通过 API 中的 gpt-4-1106-preview 来试用 GPT-4 Turbo。未来几周,OpenAI 将发布稳定的生产就绪(production-ready)模型。
GPTs 与 GPT 商店
新模型的发布令人激动。但接下来这一发布,可能会令你联想到十几年前苹果的发布会,这也是众多网友认为的最大亮点。

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

Sam Atlman 发布了 GPTs,让用户们无需代码,结合自己的指令、外部知识和能力创建自定义版本的 ChatGPT。
自从推出 ChatGPT 以来,用户们一直期待能够定制 ChatGPT。OpenAI 在 7 月推出了自定义指令,可让用户设置一些首选项,但这无法完全满足用户。许多高级用户会维护一份提示和指令集列表,并将它们手动复制到 ChatGPT 中。GPTs 的发布能够自动帮用户们完成这项工作了。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
从现场展示来看,为了创建一个 GPT,OpenAI 允许用户使用一个名为 GPT Builder 的对话式 AI 模型,让用户使用自然语言就能构建自定义的 GPT。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
Sam Altman 现场展示如何通过自然语言构建自定义 GPT。在这个例子中,Altman 要求 ChatGPT 创建一个可以给创业者提供建议的 GPT。在接收到指令后,ChatGPT 不仅构建了这个 GPT,还提供了头像、命名建议。
除了使用内置功能之外,用户还可以通过向 GPT 提供一个或多个 API 来定义定制化 action。与插件一样,定制 action 允许 GPTs 集成外部数据或与现实世界交互。
此举目的非常简单,OpenAI 要充分挖掘社区开发者的力量,「我们相信最惊人的 GPT 产品将来自社区。无论您是教育家、教练,还是只是喜欢构建有用工具的人,您都不需要了解编码来制作工具并分享您的专业知识。」
同时,OpenAI 也会在本月底上线 GPT Store,让开发者们分享、发布自己创建的 GPTs。这是继这家公司宣布打造 ChatGPT 插件生态系统之后的又一次尝试。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
没错,你是不是想到了苹果商店?OpenAI 明确表示 GPT Store 上会有 GPT 的排行榜。活动上,Altman 表示 OpenAI 将向最常用、最有用的 GPT 支付收入的一部分,但是否会向发布 GPT 的创建者们收费还未知。
目前,GPTs 可供 ChatGPT Plus 和企业用户试用。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
OpenAI 工作人员现场演示 GPTs。她构建了一个能与个人行程表联通的 GPT,然后以对话的形式命令 GPT 给 Altman 发信息,结果 Altman 真的收到了。

Altman表示:「最终,你只需向计算机询问你需要什么,它就会为你完成所有这些任务。」

Assistants API
在 keynote 环节,Sam Altman 还发布了「Assistants API」,这是他们帮助开发人员在自己的应用中构建类似「AI 智能体(agent)」体验的第一步。
通俗点来说,「assistant」可以理解为一种为某个专门用途构建的 AI,它有特定的指令,利用额外的知识,并能调用模型和工具来执行任务。新的 Assistants API 提供了代码解释器(Code Interpreter)、检索(Retrieval)以及函数调用(function calling)等新功能,可以处理大量以前你需要自己完成的繁重工作,使你能够构建高质量的 AI 应用。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
这个 API 设计灵活,用例包括基于自然语言的数据分析应用、编码助手、AI 驱动的度假计划器、声控 DJ、智能可视画布等等。Assistants API 基于支持新 GPTs 产品的相同功能而构建:自定义指令和工具,如代码解释器、检索和函数调用。
这个 API 引入的一个关键变化是持久和无限长的线程,它允许开发人员将线程状态管理移交给 OpenAI,并绕过上下文窗口限制。使用 Assistants API,你只需将每条新消息添加到现有线程中即可。
Assistants 还可根据需要调用新工具,包括
  • 代码解释器(Code Interpreter):在沙盒执行环境中编写和运行 Python 代码,并生成图形和图表,处理包含各种数据和格式的文件。它允许你的 assistants 反复运行代码,以解决具有挑战性的代码和数学问题等。
  • 检索(Retrieval):利用模型之外的知识(如专有领域数据、产品信息或用户提供的文档)增强 assistants。这意味着,你不需要计算和存储文档的嵌入,也不需要实现分块和搜索算法。Assistants API 会根据 OpenAI 在 ChatGPT 中构建知识检索的经验,优化要使用的检索技术。
  • 函数调用(Function calling):使助理能够调用你定义的函数,并将函数响应纳入其信息中。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
        OpenAI 的工作人员现场演示 Assistants API 的用法:它不仅能列出巴黎旅游建议,还能在地图上将计划中提到的地点按类别标记出来。
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
                               Assistants API 自动阅读文档、调用代码解释器来计算旅行开销。
OpenAI 表示,与平台的其他部分一样,传给 OpenAI API 的数据和文件绝不会用于训练他们的模型,开发人员可以在他们认为合适的时候删除数据。
开发者可以前往 Assistants playground 试用 Assistants API 测试版,无需编写任何代码:https://platform.openai.com/playground?mode=assistant
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了
从今天起,所有开发者都可以使用 Assistants API 测试版。定价参见:https://openai.com/pricing
OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

以上就是这场 AI 盛会的重点内容了,大家怎么看?

据我们所知,有人在现场看,比如微软 CEO 纳德拉:

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

虽然只是短暂地露面,但纳德拉也认真地谈到了两家公司的持续合作关系。

此外,也有人选择不看:

OpenAI首个开发者日:自定义GPT、GPT商店太炸,还有模型更强更便宜了

博客链接:https://openai.com/blog/new-models-and-developer-products-announced-at-devday
© 版权声明

关注公众号,免费获取chatgpt账号
免费获取chatgpt

相关文章

暂无评论

暂无评论...