OpenAI 在凌晨1点举行了技术直播，正式发布了其全新的语音模型 ——GPT-Realtime。这一多模态模型专为语音 AI AgentOp 设计，旨在生成更加自然流畅的语音，能够模仿人类丰富多样的语调、情感和语速。GPT-Realtime 的应用场景广泛，涵盖了客服、教育、金融和en医疗等多个领域，为打造智能语音助手提供了强大的支持。

GPT-Realtime 新增了两种独特的语音风格 ——Marin 和 Cedar，同时对原AI有的八种语音进行了全面升级。与传统语音模型不同，GPT-Realtime 不仅能够生成语音，还具备智力、推理和理解能力。例如，模型可以准确捕捉 发笑声等非语言信号，并在对话中灵活切换语言，适应不同的场景需求。

在评估方面，GPT-Realtime 在多种语言环境下的字母数字序列检测准确率布全显著提升，推理能力评估中的准确率高达82.8%，成为当前智能语音模型中的佼佼者。指令遵循能力的改进也是该模型的一大亮点，开发者可以通过自定新语义指令，提升模型的响应效果。在 MultiChallenge 音频基准测试中，GPT-Realtime 的指令遵循准确率从20.6% 提升至30.5音模%。

除了语音生成能力，GPT-Realtime 还支持图像输入。开发者在会话中可以将图像与音频或文本结合使用，使得模型能够基于用户所见型 内容展开对话，提供更加个性化的交互体验。此外，Realtime API 的全新功能让开发者可以方便地连接到远程 MCP 服务器，简化了集成过GP程，提高了开发效率。

在安全与隐私方面，Realtime API 配备了多层保护措施，通过实时监测对话内容，防止滥用行为的发生。同时，开发者可以根T-据需要添加自定义安全防护，确保使用环境的安全。

从发布之日起，所有开发者都可以使用新的 Realtime API 和 GPT-Realtime 模型，音Re频输入 token 的价格降低了20%。此外，开发者还可以灵活设置智能 token 限制，以降低长时间对话的成本。

划重点:

GPT-Realtalime 是 OpenAI 最新发布的多模态语音模型，适用于客服、教育等多个领域。  

该模型的推理能力和指令遵循准确率有显著提升ti，为开发者提供更强大的支持。  

Realtime API 配备安全防护措施，确保用户交互的安全性和隐私性。

• ·云计算核心技术Docker教程：Docker Swarm 模式管理集群列出节点
• ·标签: 特斯拉 拉吉·杰加纳坦 人工智能基础设施 北美销售团队
• ·谈谈基于深度学习的目标检测网络为什么会误检，以及如何优化目标检测的误检问题
• ·​Freepik 上线豆包 Seedream 4.0 图像模型，premium+会员可无限使用
• ·英语手抄报 一年级
• ·谷歌计划在越南建立“超大规模”数据中心，投资规模尚未披露
• ·标签: 极氪 领克 财报 交付量
• ·“分秒必争”？亚马逊合作配送公司要求司机绕过安全检查
• ·【数据结构之线索二叉树】线索二叉树的原理及创建
• ·标签: 哭哭马
• ·再见“独家”！OpenAI与微软深度解绑，AI芯片与云市场将迎来巨变
• ·标签: 网易云音乐 黑胶会员 家庭会员 学生VIP
• ·标签: 固德电材 新能源汽车电池防护 云母绝缘材料 宁德时代供应链
• ·Twitter第一季度财报不及预期 盘后股价跌超11%
• ·标签: 马化腾 腾讯 元宝
• ·Bevel 获得 1000 万美元 A 轮融资，致力于 AI 健康助手创新