新GPT应用涌现:OpenAI第一次开发者大会后


OpenAI 宣布的新人工智能模型和功能:引入了 GPT-4 Turbo:

  • 具有更大的上下文窗口和更高的性能
  • 支持图像输入以及新的 JSON 和再现模式。
  • 改进了 ChatGPT 和 GPT-3.5 Turbo 等现有模型
  • 开发人员可以通过在 API 中指定模型(例如“gpt-4-vision-preview”和“dall-e-3”)来访问新的视觉、语音和图像生成工具。
  • 推出了 Assistants API,帮助开发人员使用检索和函数调用等工具构建类似代理的应用程序。
  • 多数模型和工具的价格都降低了
  • 宣布了实验性自定义模型程序和 GPT-4 微调访问。
  • 训练材料截止日期为2023年4月

网友讨论亮点:

  • 对现在可用的 128k 令牌的上下文长度增加感到兴奋。
  • 关于非常大的上下文窗口如何有效有争论,研究表明模型很难记住输入开始或结束时的信息。
  • 新功能是否仍需要矢量数据库来进行数据增强,或者模型现在是否可以在内部处理更多上下文。
  • 许多初创公司可能会积极向不熟悉技术的公司进行营销,希望这些套壳助手永远不会受到严格审查。

Chat GPT应用商店
今天,OpenAI 宣布他们将发布 ChatGPT 应用商店 ChatGPT Store。

  • Shopify 应用程序:33,000 个应用程序,5.61 亿美元收入
  • 苹果应用商店:180 万个应用程序,9100 亿美元收入
  • ChatGPT 商店:0 个 "代理",0 美元收入

可能很快就会有数百万代理,数十亿美元的收入
  1. 真希望在 2009 年苹果应用商店出现时,就能为其创建一个应用程序
  2. 希望在 2009 年为 Shopify 应用商店创建一个应用程序
  3. 现在为 ChatGPT 创建应用的机会很多。我不想错过它。

这种模式转变的时刻每 15 年就会发生一次

新功能应用演示
发布会后网友制作了AI体育解说员和网站烘焙师等应用:

  • GPT-4V + TTS = AI体育解说员,将足球视频的每一帧传递给gpt-4-vision-preview,并在一些简单的提示下要求生成旁白
  • 使用OpenAIvision API与网络摄像头聊天,你给东西它看,它文字或声音与你聊天
  • 测试了OpenAI的新GPT Builder。 创建了“X优化GPT”,它可以微调我的帖子,并精确定位峰值发布时间,以实现X上的最大参与度。
  • 人工智能助理旅行:要求去巴黎,它会展示地图 ,并规划路线图
  • GPT-4 Vision API可近乎实时地识别正在发生的事情,识别对象和动作.
  • GPT-4 Turbo可以生成文本改进提示
  • 登录页面优化:内置的gpt-4-vision API,获取URL,将其转换为图像,并通过Vision API发送图像,以响应自定义着陆页优化建议。
  • 能够一起破解一个流程图,实现低保真模拟:实际的 html 在< 5 个小时的 API 可用时间内完成。
  • 让应用程序为全天发生的所有事情保存一个 csv 文件,然后让 GPT-4 根据您每晚好奇的内容为您构建自定义仪表板。
  • 将整篇论文嵌入 ChatGPT,用 gpt-4-turbo 的 128k 上下文长度和 ChatGPT 的内置代码解释器来实现一些论文了!
  • 使用新发布的 OpenAI API 构建了“Roast my Website”。GPT4 Vision 分析屏幕截图并对其进行烘焙,而新的文本转语音 API 将其作为音频返回。