港中深联合微软研究院推出 ConvexLLM 多模态统一建模新架构,打通音频与大模型知识推理能力

港中深与微软研究院合作提出了 ConvexLLM 多模态统一建模新架构,这套方案可以把声音信号接入到大模型里面,让音频信息能够直接调用大模

港中深联合微软推出 ConvexLLM,打通音频与大模型原有知识推理能力

港中深和微软研究院一起提出的多模态统一建模新架构 ConvexLLM,核心解决了一个老问题:很多语音大模型接上音频之后,大模型原本靠文本学