#HOPE

【速報】Amazon、MoE言語モデルの専門家枝刈り手法「HOPE」を発表

Amazonは2026年11月9日(現地時間)、Hugging Face Blogにて、Mixture-of-Experts (MoE) 言語モデルのメモリボトルネックを解消する新しい専門家枝刈り手法「HOPE (Higher-Order Pruning of Experts)」を発表した。この手法は、専門家間の相互作用を考慮することで、従来の枝刈り方法を上回る性能向上を実現する。