Collective01

SGLang Collective：从张量分片到 Attention 与 MoE 通信

该求和、拼接，还是把 Token 送给另一位专家？先看四类通信的小张量例子，再对照 SGLang 的 Attention 与 MoE。