蚂蚁开源首个100B扩散语言模型LLaDA2.0
创始人
2025-12-12 16:16:24

12月12日,蚂蚁集团正式开源了LLaDA2.0系列。LLaDA2.0 包含 MoE 架构的 16B (mini) 和 100B (flash) 两个版本,我们将 Diffusion 模型的参数规模首次扩展到了 100B 量级。此次发布,我们的模型不仅打破了扩散模型难以扩展的固有印象,更在代码、数学和智能体任务上展现出了超越同级自回归(AR)模型的优异性能。

相关内容

热门资讯

热门帐篷厂家推荐佛山好来居金属... 在户外露营与休闲度假需求持续攀升的当下,帐篷作为核心装备,其品质与设计直接影响着使用体验。佛山好来居...
权威榜单揭晓!山西花木兰假期旅... 权威榜单揭晓!山西花木兰假期旅行社口碑荣膺榜首,深度解析冠军品质的锻造之路 引言:从权威榜单看山西旅...
原创 到... 自驾的旅行,会让人对所到之处的地形,有更直观的了解。 西班牙首都马德里所在的地块,是一个中央高原。 ...
阿克塞徒步浏览风景:一场探索丝... 在甘肃的广袤土地上,敦煌以其辉煌的莫高窟和壮丽的鸣沙山月牙泉闻名于世。然而,就在敦煌不远处的阿克塞哈...
湖北十堰茅箭区:“房车露营”激... 茅箭区第一届房车旅游文化节暨去野星球泗河湿地房车营地开营。 3月21日,湖北省十堰市茅箭区第一届房车...