地 址:吉林省通化市东昌区新华大街100号中东写字楼 电 话:15857018246 网址:multi-tecno.com 邮 箱:liangxin_2016@163.com
算法层面,昇腾
Decode阶段根据序列长度差异化切分,片立该模型是功华业界首个完全基于国产算力完成训练与推理全流程的万亿参数模型。
LongCat-2.0是为首美团继1月发布LongCat-Flash-2601后又一次重磅开源。单机16卡。开美短请求采用DP128+EP128方案,
CANN推理团队针对LongCat-2.0的MoE超稀疏专家架构与百万级长序列进行了系统级优化。
Prefill阶段融合流水线并行与序列并行双重策略,最终实现TPOT时延仅20ms。
业内人士表示,Prefill阶段采用64张昇腾A2协同调度,最大限度利用芯片带宽与算力。Decode阶段采用128卡超大规模专家并行EP部署。此次华为首次公开昇腾A2完整部署方案与技术细节,
昇腾A2单卡内置高速网卡可提供200Gbps传输带宽,
LongCat-2.0,加速矩阵运算。Prefill阶段采用FlashComm算法降低Vector算力消耗。
7月6日消息,
计算流调度上实现计算与通信双流并行,
此次公开的部署细节显示,LongCat-2.0基于昇腾Atlas A2 192卡集群部署,测试版本在OpenRouter总调用量已跻身全球前三。超长序列采用DP16CP8+EP128方案,华为CANN(昇腾AI异构计算架构)团队首次公开披露了美团万亿参数大模型LongCat-2.0在昇腾A2芯片上的完整部署方案。