Twilio 在其通信平台中添加了 OpenAI 新推出的实时 API。
该 API 可促进自然语音到语音的交互（类似于 ChatGPT 中高级语音模式的工作方式），并带有预设语音。
利用该 API，开发人员可以向 GPT-4o 传输任何文本或音频，并让模型通过其中一种媒介或两种媒介做出响应。
通过提供这种功能，Twilio 希望让其客户能够构建出融合语音、信息和语言的自动化客户体验。
这种客户体验将充分利用现代智能手机和下一代大型语言模型（LLM）的全部功能。
该公告加强了去年启动的 Twilio-OpenAI 合作伙伴关系，当时CPaaS 领导者引入了 CustomerAI以在其平台上嵌入生成式人工智能 (GenAI)。
现在，Twilio 首席产品官 Inbal Shani分享了她对将双方关系提升到新水平并帮助开发人员构建新体验的兴奋之情。
她说：“将 OpenAI 的 Realtime API 与 Twilio 的平台相结合，使企业能够大规模提供更自然、实时的 AI 语音交互。”
企业可以利用这一点来创造更人性化的语音体验，降低运营成本并提高客户满意度。
Twilio 还承诺，由于 Realtime API 降低了延迟，自动对话将“更像真人对话”。它还考虑了对话节奏、语气和中断处理，以便在说话和倾听之间实现更好的平衡。
这些功能对于服务和销售的虚拟代理等用例特别有用。
然而，可能性不止于此。Twilio 客户可以开发自己的用例，例如实时语音翻译工具。考虑一下这在公共部门等垂直领域如何发挥作用。说其他语言的选民和工作人员可以进行流畅的对话。
OpenAI API 产品主管 Olivier Godement分享了他看到 Twilio 客户将这些机会变为现实的兴奋之情。
他说道：“Realtime API 的语音到语音功能旨在满足客户对对话式 AI 解决方案的强烈需求。”
我们很高兴与 Twilio 合作，为构建和部署对话式 AI 代理提供世界一流的开发人员体验。
开发人员还可以将 Realtime API 连接到 Twilio 客户参与平台。这将使他们能够将虚拟代理增强到现有的工作流程中。
在那里，企业可以记录这些自动呼叫，提取见解，并将数据汇集到 CRM 或客户数据平台 (CDP)（如 Segment）。
事实上，如果 Twilio 客户也拥有前面提到的 CustomerAI 产品，他们可能会对 Segment 中的 Golden Profiles（个性化的客户记录）有更深入的了解。
借助这些配置文件，开发人员可以利用以前的交互、购买记录等数据丰富虚拟代理的输出。这可以实现个性化、自动化的语音体验。
现有的 Twilio AI Assistant 已经利用 Segment 来实现这一点，同时还可以提取信息来实时支持每个客户的黄金档案。
例如，如果客户分享了某个偏好，该偏好将被保存在 Segment 中以供将来使用，并可供每个利用 CDP 的部门使用。这可能包括服务、销售、营销、商务和店内团队。
此外，Twilio 最近将 RCS 添加到其通讯功能中。其共享音频笔记的能力，加上 OpenAI 实时 API 的语音功能，可以为更具创新性的自动化消息传递活动铺平道路。
