全球第三!百融智能的语音模型:让AI听懂长语音、答对复杂问题!

2026-08-20 13:43:57 来源:今日热点网

打印 放大 缩小

拿下INTERSPEECH 2026任务全球第三!百融算法团队用「动态证据路由」刷新多语种对话理解新高度

全球语音顶会 INTERSPEECH 2026 官方挑战赛 · MLC-SLM 2026 Challenge · 任务二「多语种对话语音理解」全球第三 · 国内产业界第一 · 官方准确率 94.84%

又一个全球第三,但这次不一样

✦ 赛事规模 · 14 种语言 / 2,100 小时 / 94.84%

2026 年 7 月,来自全球110多支队伍参赛的——INTERSPEECH 2026 多语种对话语音语言模型挑战赛(MLC-SLM 2026 Challenge)官方公布最终成绩。百融智能算法团队 BRVoice 凭借自研的「动态问题感知证据路由」框架,在任务二「多语种对话语音理解」中斩获全球第三名、位列国内产业界第一,官方准确率达到 94.84%。

INTERSPEECH 是国际语音领域公认的三大顶会之一(与 ICASSP、ASRU 并列),其官方挑战赛历来以赛题硬、数据严著称,被视为语音技术领域的"硬指标考场"。而 MLC-SLM 2026 是 INTERSPEECH 2026 的官方卫星赛事,聚焦多语种对话语音大模型这一前沿方向。主办方由国内外顶尖高校与数据机构联合组成,赞助方包括 Meta、Google、中国移动、Samsung、NAVER、DataTang 等——也就是说,这场赛事的难度和分量,是行业公认的。

拿下一个名次不难。难的是:在一个不提供训练集、没有预切分、还要面对 14 种语言、约 2,100 小时真实双人长对话的赛制下,把准确率做到接近 95%。

这件事,百融算法团队做到了。

▶先看看 BR-Voice 已经做到了什么

在讲"全球第三"、“110多支队伍参赛”、"94.84%"这些数字之前,先回到一个更基础的问题:一个语音大模型,强到能参加国际顶会挑战赛,在真实业务里到底能做到什么?

这是 BR-Voice 在 RC 生态规模化落地中已经验证过的能力清单(详细数据见本系列前文《从"听懂"到"会共情":BR-Voice 语音多模态大模型核心拆解》):

字错误率 0.92%——转写一万字,错不到一百字。

TTS 拟人度约 95%——听完能分辨出是 AI 说话的用户不到 5%。

行业热词检索 F1 值 97.03%——"等额本息""宽限期""年化利率"这类专业词不会识别错。

对话轮次感知 F1 值 96.35%——自然停顿、节奏切换都能精准捕捉。

副语言识别:性别 99.28%、年龄 95.86%、情绪 90.29%。

端到端响应低于 500 毫秒——边听、边想、边说,几乎无感。

这些数据意味着什么?

它意味着当一位带方言口音的客户打电话咨询业务术语时,硅基员工不会听错、不会卡顿。

它意味着当一位客户在销售会谈里说"我再考虑考虑"时,硅基员工能识别出这句话背后的语气是"礼貌拒绝"还是"真的犹豫",并把这个判断写进复盘报告。

它意味着在跨境客服会话分析等真实业务场景下,硅基员工能像一位资深的多语种客服一样,稳定、准确、有温度地工作。

而 MLC-SLM 2026 任务二验证的"动态证据路由"能力,是让 BR-Voice 在长对话复杂场景下保持上述精度的下一代方法——它让硅基员工不是"听完再说",而是"边听边想边定位关键证据",是 BR-Voice 工业级产品力的一次重要迭代。

01 一场什么样的比赛?

✦ 赛题结构 · 任务一 vs 任务二

MLC-SLM 2026 的全称是「多语种对话语音语言模型挑战赛」,围绕"多语种对话语音理解"展开。赛事分两大赛道,难度层层递进:

任务一:多语种对话的自动语音识别加上说话人归属。即:在一段两个人用外语聊天的长录音里,先把"谁是谁、谁说了什么话"准确还原出来。

任务二:在任务一的基础上,让模型真正"听懂"对话内容,回答关于这段对话的问题。例如"对话里第三个方案是谁提的?""说话人 A 的情绪是怎么变化的?"

任务二的难度在于:不给训练集,不给预切分。 主办方直接丢给你一段几十分钟的双人长对话音频,参赛系统需要自己完成切分、说话人归属、识别、上下文理解,再作答。

数据集覆盖 14 种语言、约 2,100 小时真实双人对话,评测时也没有任何预切分语句和说话人标签——这意味着参赛队伍必须端到端地处理真实场景中最复杂的那一类语音数据。

如果说任务一是"考听力",任务二就是"听力 + 阅读理解 + 推理"三合一。我们这次拿到第三名的,是任务二。

02 行业痛点:为什么这道题这么难?

✦ 行业痛点 · 只喂文本 vs 只喂音频 vs 我们的方案

多语种双人对话口语问答是语音大模型领域公认的前沿难题。在一段真实长对话里,不同的问题往往依赖完全不同维度的"证据"——这正是任务二真正难的地方。

例如,要回答"对话主要讨论什么?"这类全局性问题,需要全局长文本语义作为证据;回答"第三个方案是谁提的?"需要说话人角色归属,把"谁"和"哪句话"精准匹配;回答"他刚才说这话时是什么语气?"则高度依赖声学细节,比如语调、笑声、语气词。

而现有系统普遍面临两难困境——

只喂文本 方案,能保留长上下文语义,但会丢失声学副语言信息,语气、笑声、说话人音色全没了。

只喂音频 方案,能保留丰富的声学信息,但在超长音频里,冗余和无关段落会急剧消耗模型的算力,并分散大模型的注意力。

那么,能不能针对不同的问题,智能、动态地决定"该看什么文本"+"该听什么音频"?这正是百融算法团队这次提交方案要解决的核心命题。

03 我们的解题思路:动态问题感知证据路由

✦ 核心创新 · 二维路由空间

针对这一痛点,BRVoice 团队提出了一种混合型"问题感知证据路由"框架。

核心思想只有一句话:以文本为骨干,按需激活声学证据。 系统不是"一刀切"地决定输入策略,而是先看问题,再决定给模型"看什么"和"听什么"

3.1 把"该怎么组织输入"建模成二维空间

团队把路由目标建模为一个二维空间:

证据类型 决定用哪种媒介的信息,包括纯文本语义、语义加局部声学细节、说话人敏感信息(音色、角色)、全局声学特征。

上下文范围 决定信息提取的跨度,包括单时间戳邻域、多时间戳跨段对比、特定发言人的关联回合、对话全局稀疏采样。

3.2 混合路由器三步走

粗粒度估计:基于Base模型仅根据"问题 + 选项"预测粗粒度的证据类型与范围。。

确定性解析:用正则和规则直接从文本中提取时间戳、说话人标识等硬约束。

映射与执行:把前两步结果融合,映射成最终的执行策略。例如对"包含时间戳的声学问题",自动截取对应时段前后的局部音频和文本,做多模态融合输入。

简单说,就是先看题,再决定"听哪段 + 看哪段"。不是把整段几十分钟的音视频一股脑塞给模型,而是有选择地、按需地喂给模型最相关的那一截。

这个方法背后的直觉是:当 AI 已经知道用户想问什么,它就不需要把所有信息都装进工作记忆——它只需要精准调出"那一段"。 这种"按需取证"的能力,本质上是在模拟人类专家在长对话中快速定位关键证据的认知方式。

04 实战成绩单

✦ 消融实验 · M1→M4→M6 准确率跃升

空口说技术没用,成绩单说话

在 MLC-SLM 2026 任务二的官方排行榜上,百融算法团队 BRVoice 提交的系统最终以 94.84% 的准确率锁定全球第三、国内产业界第一。

而在这背后,是一次次实打实的消融实验

基线方案:仅输入全文文本,准确率 93.16%

方案二:在基线方案基础上融入局部音视频融合,准确率提升至 94.22%,相对基线提升 1.06 个百分点——说明声学证据确实重要。

最终方案:换成"动态问题感知证据路由"框架后,准确率进一步提升至 94.84%,相对基线提升 1.68 个百分点——说明"按需分配"比"无脑塞入更多音频"更聪明、更划算。

任务一同步表现同样扎实:级联式说话人归属与语音识别系统在测试集上分别实现 25.70%18.44% 的 tcpMER,为任务二构建了高质量的文本主干。

94.84% 这个数字背后,藏着的不只是模型能力,更是一套"如何让大模型在长语音场景下保持高精度"的工程方法论

05 为什么这场胜利,对"硅基员工"和"RaaS"很重要?

✦ 价值链 · 学术→产品→业务

拿下一个国际赛事的名次,对一家企业级 AI Agent 公司来说,绝不是为了发新闻、贴 logo。它的真正价值,是验证一条工程路径是否真的走得通——并且,能把赛场上的方法论搬回真实业务里

5.1 获奖能力直接反哺 BR-Voice 产品线

这次挑战赛验证的"动态证据路由"能力,不是纸面技术。它会直接进入百融语音大模型 BR-Voice 的产品迭代里:

复杂人机交互场景:让语音 Agent 能在长对话中精准定位关键证据,避免"听了半小时还在兜圈子"。在百融 RC 生态下的硅基员工业态中,这意味着客户咨询从"被反复转接、平均十几分钟无解",变成"AI 一次就定位到关键信息、几分钟闭环"。

客服与销售会谈分析:自动捕捉"谁说了哪句关键话 + 当时是什么情绪",把过去沉睡的通话录音变成可量化、可检索、可复盘的结构化资产。这正是百服(硅基联络中心)、百回(催收)、百盈(营销)这三个硅基员工每天在做的事。

多语种跨国协作:14 种语言的覆盖能力,直接对应中国企业出海、跨境客服、全球化部署的硬需求——百销(企业级 AI 全球营销)的核心场景。

5.2 RaaS:客户为"经营结果"付费,语音能力是关键交付通道

百融一直对外讲一个核心叙事:"结果即服务"(Results as a Service,简称 RaaS)。意思是——客户不再为"软件账号"付费,而是为 AI 员工交付的经营结果付费

那么问题来了:客户愿意为什么样的"结果"买单?

是"上线了一个 AI 系统"吗?不是。

是"AI 多说了几句话"吗?不是。

"客户满意度提升了几个百分点"、"通话平均处理时长缩短了几分钟"、"销售线索转化率提高了百分之几"、"逾期客户被提前几天精准触达"——这才是客户真正愿意付费的"结果"。

语音能力,恰恰是把这些"结果"真正交付出去的通道。一个听不懂客户在说什么、读不懂客户情绪、找不到关键对话节点的语音 Agent,再先进的系统也无法形成结果。这次 MLC-SLM 2026 任务二拿下的"动态证据路由"能力,本质上就是硅基员工在语音通道上"按需取证、精准作答"的核心能力

5.3 已经在 8,000+ 企业、20 万硅基员工一线被验证

纸上谈兵的模型能力不值钱。真正值钱的,是这条能力已经被无数真实业务场景反复锤炼过

百融 RC 生态下的硅基员工产品矩阵,包括百盈(营销)、百回(催收)、百服(联络中心)、百才(招聘)、百灵(个贷不良资产管理)、百销(企业级 AI 全球营销)、百智(WiseNote)等,已经在金融、保险、电信、互联网、汽车等行业的 8,000+ 企业客户中规模化落地,核心客户留存率高达 98%。全双工端到端响应低于 500 毫秒,语音识别准确率达 98%,情绪、场景等识别准确率达 90%–99%,已具备从技术研发到商业落地的成熟转化能力。

这次国际赛场的成绩,是这条工程能力第一次被全球学术权威机构"打分定级"。反过来,这次验证的方法论,又会回流到 RC 生态、让 20 万硅基员工在真实业务里"听得更准、答得更稳"

这是百融"以研促产、以产养研"的双轮飞轮。

写在最后

✦ AI 语音系列 · 四篇回顾

MLC-SLM 2026 全球第三,对百融算法团队来说,是一个阶段性的肯定,更是一个新的起点。

它验证了三件事:

BR-Voice 的多语种对话理解能力,已经进入国际第一梯队;

"动态证据路由"这条工程路线,是处理长语音复杂对话的有效解法;

百融的语音大模型不仅能在 RC 生态里规模化落地,也能在学术最严苛的考场上交出漂亮答卷

未来,我们还会继续把学术赛场上的方法论,一项一项搬回 BR-Voice 的产品线,搬回 RC 生态的硅基员工,搬回 8,000+ 客户的真实业务场景里

让语音大模型从"能听会说",真正走向"能思考、能落地、能交付结果"。

这才是 RaaS——客户为结果付费,AI 为结果而生。


责任编辑:ERM523

相关阅读

最新动态

全球第三!百融智能的语音模型:让AI听懂长语音、答对复杂问题! 从趋势到落地:百语,面向智能硬件的语音Agent全栈服务平台
百融智能:语音将成为全域人机交互终极入口 对话戴尔科技:智能体时代,企业技术转型要避开哪些坑?
出海进入AI时代,百融智能给出的“操作系统” 基础设施季度营收涨181%背后,戴尔科技的存储创新还在加速
百智WiseNote2.0全新上市,锁定天猫交个朋友直播间,多场直播畅享 618 超值购机权益 “闪念”记录灵感:百智WiseNote 2.0全面升级,打造职场人的“硅基搭子”
47M参数打赢7B:语音判停模型TurnSense开源 同行致远 共赴万象 | 东软2026北京车展释放“全栈·全球”新势能
百融智能×北京半马:2.2万条紧急通知同时出发,AI原生改写赛事服务 高工发布座舱域控榜单,东软智行以15.65%份额位居榜首
百融智能护航2026北京半马:当万人级赛事遇上AI,服务效率与温度如何兼得? “硅碳”携手赋能新质生产力——拥抱人工智能体开启企业智能化改造新征程
百融智能双品发布,树立语音Agent技术标杆 悦定制 越清晰 | 飞利浦第三代AI隐形助听器荣耀上市
吉利星愿:精准定义与敏捷交付成就市场黑马 当养生成为情绪出口,劲酒给春节换了一种更生动的打开方式
超绚丽仰韶醇,沉浸式开箱视频! 荣膺“新高尚·旗帜奖” 东软与一汽红旗十年携手 共赴智慧新程
东软集团与Cerence AI达成战略合作 共筑新一代AI智能座舱平台 从“卖铲子”到“派员工挖金子”:百融云创如何让AI能力不被困在“旧牢笼”?
《阿凡达3》上映背后,跨越数十年的合作力量 向RaaS进击!百融云创发布“硅基员工”与Agent生态,开启硅碳共治新时代
思特奇实力入选“2025中国信创服务商TOP50”,以创新驱动信创生态建设 【观察】Cyber Resilience网络弹性筑基,主动防御铸盾,戴尔科技重构企业安全防护体系
戴尔科技:从“模型驱动”到“数据驱动”,重塑企业智能化转型新范式 戴尔科技出海一体化方案助力企业破解出海“七重关卡”
“奥运级”科技实力获全球认证!TCL实业荣获三项IFA 2025大奖 腾讯云9月金秋上云季:爆品秒杀,优惠低至骨折价,概泽科技限时回馈!
“三位一体”数据保护体系,筑牢企业出海安全“生命线” 狂飙的算力,炽热的难题:戴尔如何冷静破局
9.9元享1年腾讯云服务器!0.15折超值优惠来袭,概泽科技限时回馈! 戴尔科技:构筑数据基础设施“坚实底座”,筑牢数据安全保护“最后防线”
谁是 AI 搜索先锋? Elastic 先锋者招募令正式启动! 戴尔科技集团渠道“数智同行者计划”招募开始啦!
绿色承诺 创意新生——阳光人寿上海分公司开展植树节环保创意活动 搭载第5代AMD EPYC的全新PowerEdge上市!
迎接AI挑战,联想携手英特尔构建新一代智算网络 看这台全是狠活的液冷服务器,到底是如何给机房降温的!
英特尔最强服务器CPU来了!AI性能直接翻倍 算力存力Buff都叠满,至强6最强形态现身!
百信受邀出席2024数字生态大会并揽获两项大奖 齐天战力,直面天命!技嘉《黑神话:悟空》联名显卡正式开售
商用120天,宇视大模型「梧桐」2.0的四大成果 戴尔科技携手合作伙伴,共绘智能时代新蓝图
Dell携手AMD,助力制造业打造“新质生产力” 戴尔科技:夯实AI时代“算力底座”,让每一分算力“物尽其用”
AKG重磅发布N5 Hybrid耳机|参考级音质与AI黑科技对撞,引爆降噪耳机新潮! 茂森让智能手机变身移动数据釆集器
Rokid牵手江西中童镇,为百年眼镜产业注入新势能 一加 Ace 3V 正式发布,售价 1999 起
一加 Ace 3V 售价 1999 起, 打造「年轻人的第一台 AI 手机」 一加Ace 3V挑战中端手机护眼冠军,成就1.5K护眼直屏新标杆
年轻人第一台 AI 手机: 一加 Ace 3V 引领中端手机 AI 时代普及 一加Ace 3V引领旗舰质感普及,材质、工艺、质感全面跨越式升级
一加 Ace 3V 全球首发第三代骁龙7+移动平台,打造中端性能新标杆 行业联名款定制天花板!一加 Ace 3 原神刻晴定制机首销火速告罄
6 城同开,一加 Ace 3 原神刻晴定制机 Pop-up 快闪活动火热开启 一加 Ace 3 原神刻晴定制机正式发布 打造 2024 行业深度定制新标杆
一加 Ace 3 原神刻晴定制机将于 2 月 28 日发布 现已开启电商预约 魅族21成Last Phone?魅族或转型造车?
「知其所以」特别篇 X四川观察|当科技更有温度,AI能否打破老年人的数字鸿沟? 一加 Buds 3发布:搭载旗舰同款“同轴双单元”,打造标杆音质
一加李杰:超长续航将会是一加 Ace 3 的显著优势 一加 Ace 3 将于 1 月 4 日发布,让旗舰性能全面普及
一加 Ace 3 搭载二代骁龙 8 旗舰芯片,引领同档位性能体验 索尼旗舰主摄+超光影旗舰算法,一加 Ace 3让旗舰影像全面普及
没有 LTPO,就不要谈旗舰屏幕!一加 Ace 3 采用行业领先 8T LTPO 电路设计 2024开年首款旗舰耳机一加 Buds 3,1月4日一加Ace3发布会见
一加 Ace 3 官宣 1 月 4 日发布,让旗舰性能全面普及 7家高科技企业落户海曙!第二届宁波海曙“科创中国”赛道明星圆满落幕
小标识大有作为,如何抓住互联万物时代的中国机遇?| 标识应用创新大赛圆满收官 一加 12 开售 5 分钟,斩获第三代骁龙 8 机型首销全天销量和销售额品牌 TOP 2
十年超越之作一加12售价4299元起 产品力超越所有骁龙8Gen3 Pro版旗舰 体验领先行业一年,一加 12 全球首发仿生振感马达 Turbo
开启手机护眼新时代,一加 12 首发医疗级明眸护眼技术 一加 12 携手影像创作官“武王”于适 打造超越Pro的极致影像
一加 12官宣12月5日发布 ,全面超越骁龙8gen3 Pro机型 一加十周年围炉夜话活动定档12月4日,刘作虎将亲自解答网友问题
发展新引擎 宇视受邀参加中国电信数字科技生态展 一加联合京东方推出全世界显示效果最好的屏幕:打破18项DisplayMate记录
来酷科技半年报数字的背后 降本增效提速显著 经营质效双提升 “你好 BOE”首站隆重启幕 携手敦煌画院以创新科技致敬传统文化
BOE(京东方)智能座舱生态论坛成功召开 科技生态绘就未来出行新蓝图 BOE(京东方)亮相2023世界显示产业大会 以创新科技推动产业高质量发展
一加助威中国电竞亚运夺冠 中国区总裁李杰担任火炬手 卓世科技重磅发布知识增强行业模型及MaaS产品系列 引领企业数字化变革新潮流
2023年世界清洁能源装备大会 新品发布会在德阳顺利召开 起猛了!魅族在欢迎Mate系列回归,这格局没谁了!
全新门派“万灵山庄”首曝 《剑网3》十四周年发布会全回顾 2023AI+智能制造创新大会暨Create@阿里巴巴诸神之战“智能制造赛道”全球总决赛圆满收官
上半年国产领衔最畅销折叠屏!新品OPPO Find N3 Flip将发布,更有专业人像镜头 OPPO折叠屏持续热销,斩获上半年销量TOP1,Find N3 Flip即将发布
OPPO超影像大赛获奖作品展登陆北上广深,近距离感受移动影像魅力 移动影像无上限!Find X6系列助力OPPO超影像大赛,获奖作品展登陆北上广深
“AI+”智能制造新标签,Create@阿里巴巴诸神之战“智能制造赛道”全球总决赛即将举行 一加 Ace 2 Pro Pop-up快闪活动7城联动引排队热潮
一加 Ace 2 Pro 预售火爆 打破今年全价位段所有机型预售纪录 历时99天圆满收官!OPPO超影像大赛获奖作品出炉,每一张都惊艳