文本到音频生成

AudioStory：利用大语言模型生成长篇叙事音频

AudioStory: Generating Long-Form Narrative Audio with Large Language Models

AudioStory 将 LLM 的指令分解与扩散模型的音频生成通过解耦桥接机制（桥接查询和残差查询）结合，并实现端到端训练，这种思路可迁移到视觉领域的可控长视频生成，例如利用 LLM 分解复杂叙事为时序子任务，再通过扩散模型生成连贯视频。