这才是现在最强的AI声音模型。
创始人
2025-05-16 17:01:31
0

几个月前,我写过一篇MiniMax的AI声音模型。

我说,那就是当时最强的中文AI音频。数据也有点小爆。

而在去年12月之后,至今将近半年时间,在AI声音模型这块,我觉得还是没有能超越MiniMax的。

直到昨天,我看到MiniMax在X上发了他们新一代声音模型的技术报告,Speech-02来了。看来想突破Speech-01的上限,还是得他们自己。

不过就是这数据是真的惨淡,看来大家最近关注的都是Agent、MCP,AI音频关注的人,是真的少。。。

我大概翻了一下,跑分确实牛逼不少,主要是WER和SIM这两数据。

两个维度,左边是WER,越低越好,代表这个模型讲出来的话,有多准确。右边是SIM,越高越好,代表这个模型讲出来的声音,有多像原声。

你可以简单的理解成,左边看的是AI说的对不对,右边看的是AI像不像本人。

WER的数据,除了一些欧美的小语种,主流语种几乎都压了目前世界公认最被推崇的11Labs一头,特别是周边的亚洲国家,日本、越南、泰国,几乎都是纯碾压姿态,所有语种的WER指标几乎平均都在1~4之间,很牛逼,他们这是正儿八经在多语种上发力了

而音色相似度上,上一代其实做的没有11labs好,海外的很多反馈都是声音没有11Labs像,但是这一次,实现了全面超越,32个语种,每一个在跑分上都比11Labs要强,我自己实测,也能明显感觉到,相似度已经比11labs好了。

我又去看了一下AI音频领域的盲测竞技场。

意外的发现。

MiniMax这个新模型。

登顶了。。。

现在,这个新模型,MiniMax Speech-02,已经可以在MiniMax官网用了,目前只有海外版有声音克隆,别问我为什么只有海外版有。

网址在此:https://www.hailuo.ai/audio

我随手用MiniMax+即梦大师版,搓了一个有趣的郭小纲动画,给大家直观的感受一下,MiniMax的Speech-02有多强。

我就扔了一段不到1分钟的原声进去复刻,说实话,这音调,这起伏,这音色,强的有点不像话了。

我第一次听到的时候,真的感觉真假难分。

不仅郭小纲,还能让,周小伦,来夸一夸我。

太像了。

你闭着眼睛,你是真的能感觉到,是周董,在你面前挥舞着手臂,用那独特的强调跟你说,你还挺屌的。

还有之前万艾尔登法环,预告片里面菈妮的配音我一直很喜欢。

我也让MiniMax复刻了一下。

这是上一代Speech-01-hd的效果。

而这是,Speech-02-hd的效果。

我相信,一定能非常轻松的感受到,情绪的差距。

说说咋用。

进入Minimax的Audio官网后,点击左边的Voices。

免费用户,可以免费克隆3个声音。

我是开了5刀的会员,所以可以创建10个。

点进去以后,直接上传你的素材,然后正常命名,选素材的主语言就行,超级简单。

上传的语音最少上传10s的音频片段就可以克隆了,不过这个样本其实不是特别够,所以我一般推荐音频素材最好在30s左右,当然你也可以更长,不过一般不需要超过5分钟。

然后只需要十几秒,一个新鲜的声音模型,就克隆好了。

后续使用的时候,直接在右边的声音选择界面里面找到自己的tab,正常使用就行。

一代的时候,这个声音模型,只支持12种语言,分别是:

中文、粤语、英语、韩语、日语、印尼语、西语、葡语、法语、意大利语、俄语、德语。

但是这一次的2代,支持了32种语言。

而且在混合语种上,有更好的效果了。

比如我之前看到一个非常有意思的挑战。

文字是这样的:

“皆さん,我在网络上面看到有someone把三个国家的 language 混在一起去 speak 。我看到之后 be like これは我じゃないか,私も try one try です”。

非常离谱。

我克隆了我自己的声音,然后去试着念了一下。

这是上一代Speech-01-hd:

我保证,你听完以后也不知道它到底念了个啥,我就听到一个Speak。。。

再来听听2代的。

虽然日文那还有一点奇怪,但是,已经是能完整的区分出来念的明明白白的了好吧,这已经是,史诗级进步了。

我又搞了一个更复杂的,小皇四郎。

文本是这样的:

“妈的,最烦装逼的人了。刚回国,问他论文咋样,他说:

“我要 restructure 一下 framework。”

我翻了个白眼,结果他又来一句:

“Ah non, pas de sucre, merci~”

然后切日语:「これはマジでイラっとするわ〜」

再来西语:“¡Qué pesado! Pero suena perfecto.”

最后还补一句英语:“Seriously. Stop pretending you’re special.”

我都想说:你到底是人,还是 AI?

哦,他是 MiniMax Speech two,新模型。”

真的,实在太好玩了。

虽然最后的中文,念的还是冒出了翻译腔,但是进步已经巨大了。

而且,还有一个超级屌的点是,他们在讲故事的场景中,如果你只用一个声音的话,在一些不同角色那里,它甚至会有不同的音调变化和情绪变化。

这是我的一份故事文稿。

我直接让Speech-02-hd一键直出,然后我自己稍微剪了下,加了点音效,大家可以听一听这个情绪,还有角色的变化。

文稿中标黄的那几句,大家应该能明显的听出来,是刻意压低了音调,改了情绪。这可不是我处理的,是MiniMax直出的,这就非常牛逼了。

除了C端产品之外,我看了一眼API,发现,他们已经第一时间把Speech-02给支持了。

甚至,MCP也弄好了。

现在,你可以在任何Agent产品里,也可以接入这个逼真到爆炸的语音模型了。

我们也可以自豪的说一声。

之前,中文AI语音,我们做到了世界最强,但是现在,可以把中文去掉了,整体上,我们都已经做到了世界最强。

这是一个被所有人低估的战场。

大家都在盯着谁做出第一个像人一样思考的Agent,却没看到,那些AI说话的声音,其实早已变得越来越跟真人无异。

而且,这一次,还是我们做出来的。

在12月份的那边MiniMax AI音频的文章中,我在最后写道:

“也许,这就是属于中文世界的AI时代的序章。而这一切,才刚刚开始。”

然后就是波浪壮阔的春节。

随后的故事,大家也都知道了。

一语成箴。

现在的AI世界,再也不是英语的独角戏了。

我们从配角,走向主角。

然后不仅仅止步于起。

像MiniMax,也用AI,给世界,尽可能的带来语言平权。

那些过去没被在意的语言,过去只能在家族里、在小巷里、在庙宇里才能听到的声音,现在终于有机会,能被世界听见了。

AI没有带来统治。

反而是把人类的多样性。

放进了未来。

相关内容

热门资讯

一加Ace5竞速版首发天玑94... 5 月 14 日消息,在今日下午的一加游戏战略沟通会上,一加与联发科技成立游戏实验室,联合打造的基于...
首批搭载华为鸿蒙座舱5!岚图F... 快科技5月16日消息,岚图汽车CEO卢放今日分型了一条全新岚图FREE+内饰的视频,并表示岚图FRE...
菏泽:优化营商环境 激发企业活... 菏泽市各地立足产业优势,紧盯市场需求,聚焦科技赋能,聚力传统产业提档升级、新兴产业落地见效,通过政策...
未野、GXA、小米专业级筋膜枪... 大家可千万不要忽视专业级筋膜枪的实力,它能够达到快速舒缓肌肉的目的。然而当前市面上却涌现出了诸多性能...
人民网评:共建网络文明,共享文... 在网络文明的浩瀚星空中,每一个积极参与者都是追光的行者。当众多微光汇聚,便能照亮网络空间的每个角落。...
爱康生物:先做精再做强,“隐形... 高端医疗器械是“国之重器”,被视为国家制造能力和科技发展水平的重要标志。深圳是国内高端医疗器械产业的...
腾讯发布混元图像2.0模型 支... 【太平洋科技快讯】5月16日,腾讯正式发布了其新一代 AI 图像生成模型——混元图像 2.0(Hun...
OPPO Reno14 系列正... 【环球网科技综合报道】5 月 15 日,OPPO 正式发布 Reno14 系列,首发流光幻影工艺,打...
联想moto加速回归 亮相多个... 本报讯 (记者贾丽)5月16日,以“换moto换我上场、换moto换我出彩、换moto换我折服、换m...
谷歌为安卓和Chrome推出新... 【环球网科技综合报道】5月16日消息,据外媒报道,谷歌近日将为Android操作系统和Chrome浏...
转人工客服,怎么这么难? 及时响应客户诉求,快接、快办、办成、办好,才能让更多人敢消费、愿消费 你是否有过这样的体验?与智能客...
教博会上 “智” 趣横生!黄浦... “听!前面展厅飘出来的歌好特别,听说是这个姐姐用计算机编出来的!”扎着双马尾的小女孩拽着同伴衣角,眼...
管城回族区星火路小学:红领巾心... 大象新闻记者龚丰硕 为增强少先队员的光荣感和组织归属感,引导少年儿童传承红色基因,5月15日,郑州市...
原创 四... 5月14日下午,四川工商学院科研与学科建设大会在眉山校区召开。该校董事长王六章,校党委书记、省政府督...
抢先苹果,三星Galaxy S... 三星邀请函 北京时间5月8日,据科技博客MacRumors报道,三星电子已发出邀请函,将于美国当地时...
浙江浪尖工具取得电机转子线圈绕... 金融界2025年5月16日消息,国家知识产权局信息显示,浙江浪尖工具股份有限公司取得一项名为“一种电...
驭“数”前行 向“新”而生 跳动的字节,穿上特制的“舞衣”,闪耀互联网的灿烂星河;柔性生产线上,零延时切换生产线,实现多类产品“...
【A股收评】三大指数调整,人形... 5月16日,三大指数调整,截至收盘,沪指跌0.4%,深成指跌0.07%,创业板跌0.19%,科创50...
AIGC专题:AIGC赋能城市... 今天分享的是:AIGC专题:AIGC赋能城市治理应用白皮书 报告共计:39页 《AIGC赋能城市治理...
卢伟冰开直播:小米15周年战略... 快科技5月16日消息,小米集团总裁卢伟冰预告,今年是小米15周年,我们准备了很多“献礼”新品,上午介...