karmarkar
  • 首页
  • 归档
  • 分类
  • 标签
  • 关于
注意力机制

注意力机制

注意力机制(Attention Mechanism)是深度学习最重要的思想之一。本文从 RNN 的瓶颈讲起,用直觉和公式拆解 Q/K/V、缩放点积、Softmax 与多头注意力,并给出可运行的 PyTorch 实现。
2026-09-01
人工智能
#深度学习 #Transformer #机器学习

搜索

Hexo Fluid
总访问量 次 总访客数 人