这可能是史上参数量最大的开源模型~

大模型向量数据库云存储

huggingface上，今天由Deca ai开源了一个4600B 的模型。

picture.image

Deca 3 Alpha Ultra 是一款基于 DynAMoE（动态激活专家混合）架构构建的尖端语言模型，它采用了与传统专家混合（MoE）模型截然不同的方法。

有 4.6 万亿参数，利用尖端技术突破了自然语言理解和生成的界限。

Deca Deca 最初是成立于美国的一家小型 AI 公司，在获得 GenLabs 的关键支持后迅速扩张，推进 AI 研究并开发了 Deca 3 Alpha Ultra 等突破性模型~

模型卡也没有具体的效果评测。

比较没营养，但是cohere昨天也开源了一个模型，Command A Reasoning 看起来就有点牛皮了。

主打Agentic能力，目前Agentic benchmark上跑分开源最强。

picture.image

DeepResearch bench，跑分宇宙最强（超过闭源）。

picture.image

110B大模型，上下文长度：256K。