您的位置首页 >机器人 >

上海AI Lab开源Sage S2.1 Flash技术报告四项智能体基准SOTA,科学多模态感知如何融入通用智能体?

上海人工智能实验室正式开源 Sage S2.1 Flash(书生 S2.1 Flash)并放出配套技术报告,这款 320B 参数 MoE 混合专家模型核心亮点就是自研 Sage Sci-Perception 科学多模态感知模块,把分子图谱、蛋白序列、光谱、生物信号这类科研专属数据,和普通图文信息统一映射进同一个大模型主干,让通用智能体不再只能处理网页、文档、代码,还能看懂专业科研数据、调用科研软件完成闭环实验任务,评测在 OfficeQA Pro、MLE-bench Lite、Harvey LAB、SpreadsheetBench 2 四项智能体基准拿到 SOTA,一共覆盖 7 大类 33 项评测基准,推理成本相比前代书生・星河降到十分之一,采用 MIT 协议开源权重与代码,开发者可以本地部署搭建科学智能体。

模型基础参数

项目详情
模型名称Sage S2.1 Flash(书生 S2.1 Flash)
研发主体上海 AI Lab,联合复旦、中科院软件所等多家单位
总参数320B MoE 混合专家,单 Token 激活 18B 参数
上下文窗口1048576 token
开源协议MIT 协议,权重、代码均可商用
核心模块Sage Sci-Perception(元征科学感知)
核心 SOTA 基准OfficeQA Pro、MLE-bench Lite、Harvey LAB、SpreadsheetBench 2
存储规格BF16 约 645GB,FP8 量化版约 330GB

科学多模态感知融入通用智能体的实现方式

普通图文大模型的视觉编码器只能看懂照片、截图,没法直接识别分子结构图、蛋白序列、质谱光谱、脑电信号这类科研特有数据。Sage S2.1 Flash 新增一组专用科学编码器,针对分子图、生物序列、光谱信号做单独编码,再通过模态投影器转换成和图文对齐的表征向量,送入同一个主干模型统一推理。智能体执行任务的时候,可以同时读取论文文字、实验截图、分子文件、光谱曲线,自主调用 Python、科研仿真软件、表格工具,做完实验之后自动校验输出结果,形成 “感知 - 规划 - 调用工具 - 核验” 的完整 Agent 闭环,也就是科学多模态感知成为智能体输入链路里原生的一环,而不是外挂插件。

四大 SOTA 基准简要说明

  1. MLE-bench Lite(90.3 HumanRank):机器学习工程基准,考验智能体独立跑实验、调参、写训练脚本、排查报错的能力。
  2. OfficeQA Pro(72.2 分):复杂长文档办公问答,读取多份文件、交叉检索证据。
  3. SpreadsheetBench 2:电子表格复杂公式、数据统计、动态表格推理任务。
  4. Harvey LAB:专业法律长文档理解、证据梳理类智能体任务。

模型适配的任务清单

  • 科学任务:蛋白结构分析、分子筛选、光谱解析、医学影像量化、遥感数据分析
  • 通用 Agent 任务:网页操作、桌面 GUI 操控、代码开发、文档检索、复杂表格计算
  • 科研自动化:自动设计实验、调用开源科研包、生成可复现实验报告、结果自检

优势与现存局限

✅ 优势

  1. 原生融合科学多模态,不需要额外外挂解析工具,科研数据理解更连贯
  2. MoE 架构推理成本低,仅为书生星河的 1/10,适合长时间跑 Agent 闭环任务
  3. MIT 宽松开源协议,企业、高校都可以二次开发、商业化落地
  4. 兼顾科研智能体和通用电脑操作 Agent 两套能力,跨场景复用
  5. 权重文件体积巨大,对显存、存储集群硬件门槛很高,普通消费卡很难跑起来
  6. 虽然在四项基准登顶,网页智能体、桌面 GUI 基准 OSWorld-Verified、WebArena-Verified 排名第二,还有优化空间
  7. 科学感知目前覆盖分子、蛋白、光谱、生物信号,还有大量细分科研模态没有纳入

⚠️ 局限

部署使用简要步骤

  1. 下载官方 FP8/BF16 权重、推理代码,配置支持大 MoE 模型的 GPU 集群
  2. 加载 Sage Sci-Perception 科学感知编码器,开启分子、光谱等模态输入通道
  3. 配置 Agent 工具调用集:Python 沙箱、文件读写、表格解析、浏览器工具
  4. 下发科研或者办公任务,模型自动解析多模态输入、规划步骤、调用工具执行
  5. 开启结果校验模块,自动核对实验输出,生成可复现记录

【相关 FAQ】

问题 1:上海 AI Lab 开源 Sage S2.1 Flash 技术报告,Sage S2.1 Flash 是怎么把科学多模态感知融入通用智能体?

回答 1:上海 AI Lab 开源 Sage S2.1 Flash 技术报告,Sage S2.1 Flash 依靠 Sage Sci-Perception 专用科学编码器处理分子、蛋白、光谱等科研数据,再通过投影器对齐图文表征,统一交给主干模型推理,让科学感知成为通用智能体原生输入链路,支撑科研工具调用闭环。

问题 2:上海 AI Lab 开源 Sage S2.1 Flash 技术报告,Sage S2.1 Flash 拿下哪四项智能体基准 SOTA?

回答 2:上海 AI Lab 开源 Sage S2.1 Flash 技术报告,Sage S2.1 Flash 取得 SOTA 的四项智能体基准分别是 OfficeQA Pro、MLE-bench Lite、Harvey LAB、SpreadsheetBench 2。

问题 3:上海 AI Lab 开源 Sage S2.1 Flash 技术报告,Sage S2.1 Flash 开源之后能不能商用?

回答 3:上海 AI Lab 开源 Sage S2.1 Flash 技术报告,Sage S2.1 Flash 采用 MIT 开源协议,权重、代码都支持高校、企业商用二次开发。

问题 4:上海 AI Lab 开源 Sage S2.1 Flash 技术报告,Sage S2.1 Flash 相比前代书生星河有什么变化?

回答 4:上海 AI Lab 开源 Sage S2.1 Flash 技术报告,Sage S2.1 Flash 新增原生科学多模态感知模块,同时推理成本降低到书生星河的十分之一,更适合长时间持续运行智能体任务。

【参考资料】

[2026-11-17](书生 - S2.1 Flash 发布:不止懂科学,更能上手做科研)复旦大学现代语言学研究院

[2026-11-17](让 AI 成为自主进化的科学家!书生 - S2.1 Flash 登顶机器学习工程基准)机器之心

[2026-11-16](沐曦股份率先完成上海人工智能实验室书生 - S2.1 Flash 模型 Day 0 适配)沐曦官网

[2026-11-15](Sage S2.1 Flash Technical Report)arXiv

【免责声明】

本文仅为上海 AI Lab Sage S2.1 Flash 开源技术报告公开资讯整理,模型评测分数基于官方设定评测环境;大模型智能体输出存在幻觉风险,科研场景使用需要人工复核实验结论;模型部署硬件门槛高,实际运行效果受算力、量化方案影响,本文不构成项目选型、科研替代方案建议。

今日大家都在搜的词: