东北通信
MoE混合专家模型相比传统Transformer模型具备更高的效率和更低的成本：MoE的核心优势在于能在远低于稠密模型所需计算资源的情况下进行高效训练；更多实时信息，关注“价值投机王牌”。

DeepSeek V2做为MoE模型典范，相比目前LLM开源大模型在各项性能方面均位于行业顶级水平：DeepSeek V2引入MLA算法，显著提高推理效率，相比DeepSeek V1节省42.5%的