跳到正文
热点事件持续更新

KTransformers发布KT-FT,CPU参与MoE微调

1 篇报道1 个报道来源22 小时前更新

先了解这件事

AI 综述

2026年10月16日,清华大学 MADSys 实验室与趋境科技提出 KTransformers-FineTune(KT-FT),采用 CPU/GPU 协同计算方案:CPU 利用主存中的权重直接完成 MoE 专家计算,GPU 负责注意力模块。报道称,在标准 LoRA 微调下,其吞吐达到卸载基线的 2.5–21.2 倍。目前该工作处于方案发布阶段,报道未披露更多测试细节与后续计划。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月16日
  1. 国际大厂精选
    KTransformers-FineTune 提出 CPU/GPU 协同计算,MoE 微调吞吐达卸载范式 2.5–21.2 倍

    清华大学 MADSys 实验室与趋境科技提出 KTransformers-FineTune(KT-FT),让 CPU 用主存中的权重直接完成 MoE 专家计算,GPU 负责注意力模块,标准 LoRA 微调吞吐达到卸载基线的 2.5–21.2 倍。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。