Kernel
共 3 篇文章。
TVM 与 TileLang:深度学习编译器
整理深度学习编译器和高性能 kernel DSL 的实际作用,避免和推理引擎搞混。
MLA 和 MHA 的 Kernel 区别
从 Kernel 实现角度对比 MLA 和 MHA,包括内存访问、计算强度和量化影响。
TileLang 学习笔记
整理 TileLang 的核心概念和写法,作为学习过程中的记录。
共 3 篇文章。
整理深度学习编译器和高性能 kernel DSL 的实际作用,避免和推理引擎搞混。
从 Kernel 实现角度对比 MLA 和 MHA,包括内存访问、计算强度和量化影响。
整理 TileLang 的核心概念和写法,作为学习过程中的记录。