SMELT首次同时对齐算力、参数量和KV cache,在多个模型尺度上公平比较Looped Transformer与基线模型。
推荐理由本文涵盖「Looped Transformer」、「SMELT」、「清华」等多个主题,重点关注 Looped Transformer。