您的位置首页 >科技要闻 >

姚顺雨和混元团队上Reddit答网友,Hy小模型已进路线图

北京时间 11 月 21 日凌晨,腾讯首席 AI 科学家姚顺雨和混元团队研究员登陆 Reddit 的 LocalLLaMA 社区开展 AMA 问答,这是混元团队第一次面向全球开发者做公开交流,整场问答持续约 2 小时,收到 300 多条开发者提问,核心放出 Hy 小模型也就是 Hy4-mini 已经进入路线图的消息,同时还对外公布下一代 Hy 模型会继续扩容、Flash-Lite、24GB 显存适配模型等一系列规划,这次问答也是配合近期 Hy4、Hy4 flash 两款模型发布,集中回应海外开发者关心的本地部署、量化、架构、未来产品规划等问题。团队采用一大一小双线研发思路,一边做更大规模的旗舰模型去冲击推理上限,一边推出轻量化小模型降低本地运行门槛,兼顾复杂任务性能和推理成本,也解释了不盲目追逐超高参数量模型的原因,扎实优化的中小模型同样能拿到不错效果,成本还更低。

本次 Reddit AMA 核心信息清单

  • 活动形式:Reddit LocalLLaMA 社区 AMA(Ask Me Anything)
  • 参与人员:姚顺雨、混元团队研究员
  • 时长:约 120 分钟
  • 核心官宣:Hy4-mini(Hy 小模型)已进路线图
  • 配套规划:Flash-Lite、24–31B 稠密模型、5–12B 小型图像模型、新一代视频模型
  • 现有主力:Hy4(旗舰多模态)、Hy4 flash(低成本高速度)
  • 下一代旗舰:规模会显著扩大,但暂不确认 1.5 万亿~2 万亿参数
  • 本地部署:确定推出适配 24GB 显存设备的模型
  • 技术方向:循环 MoE、持续学习、多种注意力机制持续探索

两条产品研发路线说明

  1. 大模型路线:持续扩大模型规模,投入大规模强化学习,主打复杂 Agent 任务、长程代码、多步推理,代表就是 Hy4 旗舰版
  2. 轻量化小模型路线:Hy4-mini、Flash-Lite,面向本地电脑、低显存设备,适合文档解析、分类、自动化、客服这类低延迟任务

开发者高频技术回复摘要

  • 96GB 显存设备可以跑 Hy4 flash,部分专家层能卸载到内存
  • 量化优先推荐 GPTQ 方式的 NVFP4 版本,和 BF16 精度差距更小
  • Hy4 flash 使用滑动窗口注意力,把 KV 缓存压缩到原来 1/4,降低推理开销
  • 训练数据过滤了漏洞利用类攻击数据,侧重漏洞发现能力,弱化恶意利用能力

【相关 FAQ】

问题 1:姚顺雨和混元团队在 Reddit AMA 里说的 Hy 小模型是什么?

回答 1:Hy 小模型就是 Hy4-mini,姚顺雨和混元团队在 Reddit 问答中确认 Hy4-mini 已经纳入路线图,定位轻量化版本,适合本地部署、低显存设备使用。

问题 2:混元团队这次 Reddit AMA,除了 Hy 小模型还有哪些新模型规划?

回答 2:除了 Hy 小模型 Hy4-mini,团队还预告 Flash-Lite,正在评估 24–31B 稠密模型,同时考虑 5–12B 小型开源图像模型以及新一代视频模型。

问题 3:姚顺雨在 Reddit 上怎么看待超大参数量大模型?

回答 3:姚顺雨和混元团队表示,Hy3、Hy4 的经验证明打磨扎实的中小模型也能媲美超大模型,而且推理成本更低,研发过程还能积累更多技术经验,不会盲目追逐超高参数量。

问题 4:混元 Hy 小模型上线之后,能在 24GB 显存显卡上跑吗?

回答 4:混元团队在本次 Reddit 问答中明确,未来会推出适配 24GB 显存设备的模型,Hy 小模型系列会覆盖这类低显存本地部署需求。

【参考资料】

[2026-11-21](姚顺雨和混元团队上 Reddit 答网友,Hy 小模型已进路线图)量子位

[2026-11-21](姚顺雨现身 Reddit 答问两小时:混元后训练最难的问题,是过度思考)钛媒体

[2026-11-21](腾讯姚顺雨团队深夜回应一切:算力不足、模型刷榜、雷霆大思考)36 氪

[2026-11-21](姚顺雨与腾讯混元团队首次公开问答:下一代模型将显著扩容,也会推出小模型)界面新闻

免责声明:本文仅为混元团队 Reddit AMA 资讯整理,模型发布时间、参数规格、能力表现以腾讯混元官方后续正式公告为准;模型效果受硬件、量化方式、提示词影响,不构成选型、商用落地建议。

今日大家都在搜的词: