软件分类 游戏分类 资讯分类

原创美团龙猫开源LongCat-2.5,1.6万亿参数支持百万上下文

编辑:佚名 时间:2026-11-17 13:50:59

      美团“龙猫”团队近日开源了新一代大模型LongCat-2.5.引发行业广泛关注。这款模型基于宽松的MIT协议发布,允许商用推理部署与二次训练,且无需额外授权,大幅降低了企业和开发者的使用门槛。这款面向长程智能体任务的原生多模态模型,其在复杂代码库开发、完整项目构建、Visual Coding 及专业办公等场景中,端到端交付能力均实现了显著进步。

      美团龙猫开源LongCat-2.5,1.6万亿参数支持百万上下文

      在模型规格方面,LongCat-2.5 展现出强大的技术实力。模型总参数量达到 1.6 万亿级别,采用稀疏激活机制,每个 token 仅激活约 480 亿参数,在保证性能的同时有效控制了推理成本。此外,模型还支持高达一百万 token 的上下文长度,能够轻松处理超长文档分析、大型代码库理解等复杂任务,为长程智能体应用提供了坚实基础。

      值得一提的是,针对显存与带宽受限的国产算力芯片,研发团队在模型架构、芯片适配与部署策略三个层面进行了深度协同优化。这一举措不仅提升了模型在国产硬件上的运行效率,也为国内 AI 产业链的自主可控发展提供了有力支撑,体现出开源生态与本土算力深度融合的新趋势。

      LongCat-2.5 在 Visual Coding 领域的表现尤为亮眼,支持创意设计、3D 建模等任务。这些能力源于视觉表征层的深度改造:模型将视觉信号表示为多层级离散 token,与文本一样由主干模型统一处理,而非采用传统的外挂视觉模块方案,实现了视觉与语言能力的原生融合。

      从技术细节来看,LongCat-2.5模型对原生分辨率视觉特征做残差向量量化,逐级补足细节信息;视觉 token 可离线预计算并缓存,既减少在线计算量,又让分布式训练负载更加均衡。视觉码本与主干联合训练,视觉与文本共享同一套主干参数,在同一语义空间内协同完成理解与生成。与此同时,模型采用 W4A4 高效推理方案,将专家权重与激活同步量化至 4 bit,并利用原生 INT4 矩阵乘法单元进行运算,部署效率因此得到进一步提高。

热门推荐

相关文章