huggingface上,今天由Deca ai开源了一个4600B 的模型。
huggingface: https://huggingface.co/deca-ai/3-alpha-ultra
Deca 3 Alpha Ultra 是一款基于 DynAMoE(动态激活专家混合)架构构建的尖端语言模型,它采用了与传统专家混合(MoE)模型截然不同的方法。
有 4.6 万亿参数,利用尖端技术突破了自然语言理解和生成的界限。
Deca Deca 最初是成立于美国的一家小型 AI 公司,在获得 GenLabs 的关键支持后迅速扩张,推进 AI 研究并开发了 Deca 3 Alpha Ultra 等突破性模型~
模型卡也没有具体的效果评测。
比较没营养,但是cohere昨天也开源了一个模型,Command A Reasoning 看起来就有点牛皮了。
主打Agentic能力,目前Agentic benchmark上跑分开源最强。
DeepResearch bench,跑分宇宙最强(超过闭源)。
110B大模型,上下文长度:256K。
huggingface: https://huggingface.co/CohereLabs/command-a-reasoning-08-2025