DeepSeek 被曝要训 8 兆参数模型,保密到收走所有电子设备
🚨 DeepSeek 这次可能真要放大招了!
据报道,梁文锋跟投资人说,DeepSeek 正在训一个 2 兆参数的模型,下一步要挑战 8 兆!
什么概念?目前DeepSeek V4 Pro的总参数约1.6兆,正在训练的2兆参数预计应该是V4.1 Pro了 其次 8 万亿参数,接近 Kimi K3 总参数量的 3 倍……
更夸张的是,这场投资人会议要求所有人上交手机、电子设备和随身包,只允许用纸笔记录,梁文锋本人甚至是线上出席。 这保密程度,不言而喻……
但真正值得关注的是: DeepSeek 之前一直强调用更低成本、更高效率挑战顶级模型 如今却传出要向 8 万亿参数发起冲击 难道 DeepSeek 也要走上疯狂堆参数的道路?
未必…… Kimi K3 已经证明,MoE 架构可以让模型拥有巨大的总参数量,同时只激活其中一小部分 所以,8 万亿参数并不意味着每次推理都要调用 8 万亿参数,更不意味着性能一定更强
如果报道属实,DeepSeek 接下来真正值得看的,是它如何在模型规模、训练成本和推理效率之间找到新的平衡
沉默这么久的 DeepSeek,难道真在憋一个超级大招?
注:以上信息来自媒体报道,尚未获得 DeepSeek 官方证实 来源:http://chiefbao.com/new/AI/article…