使用教程

• 向量相加 （Vector Addition）
• 融合 Softmax （Fused Softmax）
  • 使用原生 PyTorch 对 X 逐行进行 Softmax 计算
  • 计算内核
  • 单元测试
• 层标准化 （Layer Normalization）
  • 计算内核
• 融合注意力 （Fused Attention）
• 矩阵乘法 （Matrix Multiplication）
  • 计算内核
  • 工具方法
  • 参数化测试
• 自动调优 （Autotune）