arXiv新研究：多模态大模型智能体StrixAE面向复杂失真耦合的音频增强
研究者提出基于多模态大语言模型的音频增强智能体StrixAE，采用两阶段训练（CoT微调与音频感知强化学习），在真实世界测试集上多项感知指标达最优。
AI解读：StrixAE的独特之处在于把一条复杂的音频修复链路交给多模态大语言模型来统筹：它作为控制器，决定调用哪个增强或个性化模型、按什么顺序执行。研究中提到的两阶段训练是关键——先在AcoustBench上用思维链监督微调，让模型学会基础推理和调用工具；再用专为音频修复设计的强化学习奖励（APRL）来优化，这种奖励同时约束输出格式是否合法、结构是否连贯、听感是否好，目的是减少模型凭空捏造不存在的工具或步骤。对实际要处理录音的用户来说，这意味着不需要手动挑选降噪、去混响、修复频谱缺口等一长串处理，智能体可以自行编排流程；而且因为奖励里强调了可执行的流程，它给出的方案更可能直接可用，而不是逻辑上说得通但跑不通。不过要留意，这里的优势都来自研究者自己的真实世界测试集，跨数据集或极端场景的稳定表现还没有公开的第三方验证；普通用户暂时不必行动，毕竟论文刚发布，StrixAE尚未提供可用的开源代码或在线demo，要判断它在自己的设备上是否好用，还得等后续的公开实现和更广泛的评测。
9 月 3 日提交至arXiv的论文（编号 2609.03414，属Sound与AI交叉方向）提出StrixAE，一个以多模态大语言模型（MLLM）为控制器的音频增强智能体。作者团队来自多所机构，论文称该智能体旨在同时应对真实场景中复杂的失真耦合与个性化增强需求。
系统结构与训练方法
StrixAE将MLLM用作控制器，协调多个音频增强与个性化模型的工作。训练分两个阶段：先在AcoustBench上做思维链（CoT）监督微调，使模型学会基础推理与工具调用；随后采用音频感知强化学习（APRL），这是一种专为音频修复流水线设计的奖励机制，联合优化格式有效性、结构连贯性与感知质量。论文称，与通用强化学习微调不同，APRL通过结构化奖励强制生成可执行的流水线与合理的分节顺序，从而让智能体产生可靠、可解释的增强方案，且不会凭空虚构工具。
测试结果
研究者在真实世界测试数据集上进行评估，称StrixAE在多项感知指标上优于大多数现有开源与专有方案，达到最先进水平，并表现出较强的泛化鲁棒性。摘要未提供具体数据集细节、对比基线或指标数值。