Sesame 推出全新 CSM 语音模型:成功跨越“恐怖谷”,其逼真程度令人瞩目引发全球关注

Sesame 公司最新推出的语音合成模型“Conversational Speech Model”(简称 CSM)近日在 X 平台上引发热议,被誉为“像真人说话一样的语音模型”。这款模型以其惊艳的自然度和情感表达能力,不仅让用户“已经无法分辨”其与人类的区别,还宣称成功跨越了语音领域的“恐怖谷效应”。随着演示视频和用户反馈的传播,CSM 正迅速成为 AI 语音技术的新标杆。

image.png

跨越“恐怖谷”:CSM 的技术突破

“恐怖谷效应”是指当人工合成的语音或形象接近真实人类但仍存细微差异时,会引发人类的不适感。Sesame 通过其 CSM 模型正面应对这一难题。X 用户 @imxiaohu 在3月1日发帖称:“兄弟们,这个全新的语音模型很厉害,已经无法分辨了!”他指出,CSM 在个性、记忆、表达能力及语境恰当性上表现出色,几乎消除了传统语音助手的机械感。

Sesame 团队在官方研究文章中表示,CSM 的目标是实现“语音存在感”——让语音交互不仅真实可信,还能被理解和重视。这一突破得益于其核心组件:情感智能(解读并回应情感)、上下文记忆(基于对话历史调整输出)以及高保真的语音生成技术。演示中,CSM 在超长对话中展现了语气自然、情感丰富的一面,用户甚至无法在不知情的情况下分辨其为 AI。

image.png

用户体验逼真

X 平台上的用户反馈进一步印证了 CSM 的惊艳表现。@imxiaohu 在帖子中分享了一段超长对话演示,涵盖多种场景和情景,并感叹:“语气、情感一些表达上非常非常的接近人类,哈哈哈哈。”他提到,在无提示的情况下,这款模型的输出已让人难以区分真假。另一位用户 @leeoxiang 在3月1日表示,他用 CSM 练习了半小时英语口语,几乎感觉不到延迟,并称其“口语化做得特别好,会有一些口气在里面”,主动对话能力也令人印象深刻。

社区的热情不仅限于称赞。许多用户指出,CSM 的对话流畅度和情感表达已超越现有主流模型,如 OpenAI 的 ChatGPT 语音模式。@op7418

 在2月28日推荐研究者关注 Sesame 的技术文章,并强调其独特的语音真实度评价体系,显示出该模型在技术上的严谨性。

仍有提升空间:Sesame 的未来计划

尽管 CSM 的表现令人震撼,Sesame 官方坦言这并非终点。@imxiaohu援引官方说法称,“这还不是最完美的,还有很大提升的空间!”目前,CSM 支持英语等多语言,但如 @leeoxiang 所指出,尚不支持中文。此外,部分用户在测试中发现,模型在特定语境(如外语切换或音乐演唱)下的表现仍有改进余地。

Sesame 已承诺将部分研究成果开源,其 GitHub 页面(SesameAILabs/csm)显示 CSM 将采用 Apache2.0许可。这一举措引发了开发者社区的期待,许多人希望通过对其架构的深入研究,进一步推动语音 AI 的发展。

行业影响与展望

CSM 的亮相不仅是对“恐怖谷效应”的技术回应,也为 AI 语音交互树立了新标准。与 Grok、Claude 等模型相比,CSM 在实时性、低延迟和情感表达上的优势尤为突出。X 用户 @AbleGPT

 在3月2日表示:“如果你在研究 AI 语音,强烈推荐看看这个文章。”这反映了 CSM 对技术圈的启发意义。

随着 Sesame 计划扩大语言支持并优化模型,CSM 有望在教育、娱乐和虚拟伴侣等领域大放异彩。从 X 上的热烈反响来看,这款“兄弟们都觉得厉害”的语音模型,正以逼真的对话能力重新定义人与 AI 的互动方式。未来,它是否能彻底消除“恐怖谷”,成为真正的“数字伙伴”?答案或许就在 Sesame 的下一次迭代中。

试玩地址:https://www.sesame.com/research/crossing_the_uncanny_valley_of_voice#demo

猜你喜欢

伟大的妈妈35节阅读答案:深度解析母爱的伟大与无私,怎样理解母亲的牺牲与奉献?
伟大的妈妈35节阅读答案:深度解析母爱的伟大与无私,怎样理解母亲的牺牲与奉献?

母亲,这个词听上去平常却又分外沉重。回想起自己的成长历程,无数个温暖的瞬间都与母亲的付出密不可分。伟大的妈妈不仅仅是家庭的支柱,更

法国满天星《勤务秘书》:为白领职场提供全新支持和互动平台
法国满天星《勤务秘书》:为白领职场提供全新支持和互动平台

法国满天星《勤务秘书》,一部关乎职场小助手的佳作,着眼于现代白领之工作生活,旨在为其提供诸多便捷之服务。此书将助力职场人士更高效地

卖保险套的女销售3:她的故事如何改变了性教育的认知和态度
卖保险套的女销售3:她的故事如何改变了性教育的认知和态度

在当今社会,性教育逐渐被人们所重视。尤其是在年轻人中,如何传播健康的性知识成为了一个重要课题。在这个关系到人们身体健康与心理发展的

在情趣店上班被爆CAO翻了:情趣产业幕后故事引发社会热议
在情趣店上班被爆CAO翻了:情趣产业幕后故事引发社会热议

在情趣店上班被爆CAO翻了,此事传出之后,引发社会广泛讨论,众人皆对此现象感到震惊。情趣店作为满足特殊需求之场所,背后隐藏着多少不为

中字hd丈夫的下属的成就:在职场上展现卓越领导力与团队协作能力
中字hd丈夫的下属的成就:在职场上展现卓越领导力与团队协作能力

在现代职场环境中,领导者的影响力往往超越个人的成就,展现团队的成功才是衡量杰出管理者的重要标准。中字hd的丈夫作为行业中的佼佼者,其

外国大片又大又好看的ppt:探索那些令人叹为观止的游戏视觉盛宴与创意设计
外国大片又大又好看的ppt:探索那些令人叹为观止的游戏视觉盛宴与创意设计

电子游戏作为一种新兴的艺术形式,近年来迅速崛起,成为全球文化现象的重要组成部分。从早期的像素艺术到如今的高清3D画面,游戏的视觉效果

《老公请部长家里吃饭》:一场游戏中的策略与人际关系的较量,探索社交游戏的新玩法
《老公请部长家里吃饭》:一场游戏中的策略与人际关系的较量,探索社交游戏的新玩法

在当今快节奏的生活中,社交游戏已经成为一种新兴的娱乐方式,尤其是那些能够引发思考与交流的游戏更是备受玩家青睐。《老公请部长家里吃饭

亚洲经典一区二区三区区别小说:探索游戏世界中的策略与情感交织(沉浸式体验与游戏设计的深度探讨)
亚洲经典一区二区三区区别小说:探索游戏世界中的策略与情感交织(沉浸式体验与游戏设计的深度探讨)

在今天的数字时代,游戏不仅仅是消遣娱乐的工具,它更是一个深蕴文化和情感的载体。从简单的图形和音效演变为如今复杂的多维度世界,游戏的

春日阅读的盛况!南通崇川区“阅·音乐LiVE”活动隆重开启,带你沉浸书海与乐音交织的魅力世界
春日阅读的盛况!南通崇川区“阅·音乐LiVE”活动隆重开启,带你沉浸书海与乐音交织的魅力世界

在第30个世界读书日即将到来之际,南通市崇川区举办了一场别开生面的全民阅读推广活动,为春日阅读增添了一抹独特的色彩。4月

圆明园遗韵:清代陈枚《山水楼阁图册》中的东方美学极致体现与文化回顾
圆明园遗韵:清代陈枚《山水楼阁图册》中的东方美学极致体现与文化回顾

在东方园林艺术的璀璨星河中,18世纪的圆明园无疑是最为耀眼的明珠之一。而提及圆明园,便不得不提清代画家陈枚的杰出作品——