Skip to content

[BUG] attention 使用 vanilla 版本质量差上许多 #296

Open
Open
[BUG] attention 使用 vanilla 版本质量差上许多#296
@QingshuiL

Description

@QingshuiL
QingshuiL
opened on Oct 29, 2025

attention 的实现方式从 torch 或者 flash 切换至 vanilla 以后。质量差上许多是什么问题？

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Type

    No type

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions
      ⚡