DeepSeek开源周第3天:DeepGEMM DeepGEMM是一个用

游乐看科技 2025-02-26 11:44:14

DeepSeek开源周第 3 天:DeepGEMM DeepGEMM 是一个用 CUDA 编写的库,旨在实现干净高效的具有细粒度缩放的 FP8 通用矩阵乘法(GEMM),支持普通和混合专家(MoE)分组 GEMM。安装时无需编译,通过轻量级即时(JIT)模块在运行时编译内核。

0 阅读:2
游乐看科技

游乐看科技

感谢大家的关注