扩散语言模型被视为挑战自回归范式的新路线,其生成方式与主流大模型截然不同。近日,人工智能实验室扩散智能(DiffuSpace)发布了 Clover(三叶草)系列模型家族的首个成员 Clover-35B-A3B-Preview,并以 Apache 许可开源。
该模型采用 MoE(混合专家)架构,与传统自回归模型不同,具备“全局思维”,通过多轮迭代让结果从模糊逐步走向具体,同时保持更快的生成速度。
据官方介绍,该模型的诞生证明扩散语言模型能在更大参数尺度下与自回归模型竞争甚至略胜一筹。在多项基准测试中,其性能超过同规模自回归模型 Qwen3.6-35B-A3B,在智能体编程与工具使用任务上优势明显。
推广
评论
正在加载评论…