AI用語辞典

A comprehensive multilingual AI terminology dictionary

Definition

「GLM MoE DSA」という単一の標準用語は存在しません。しかし、これはおそらくGLM(特定のLLMアーキテクチャ)、MoE(Mixture of Experts、モデルサイズを効率的にスケールさせるために一部のエキスパートのみを活性化する手法)、およびDSA(動的スパースアテンションなどの技術)を組み合わせたものを指していると考えられます。

Summary

これは、異なる概念の混同と思われます:GLM(一般言語モデル)、MoE(エキスパートの混合)、およびおそらくDSA(動的スパースアテンションなど)。

Key Concepts

Use Cases