跳到正文
热点事件持续更新

LISA:线性索引稀疏注意力用于长上下文推理

1 篇报道1 个报道来源18 小时前更新

先了解这件事

AI 综述

2026年10月28日,arXiv 人工智能板块出现 Yu Zhao 等作者的论文,提出 LISA(Linear-Indexed Sparse Attention,线性索引稀疏注意力)。据该论文,LISA 是一种即插即用的自注意力替代方案,无需完整预训练即可替换自注意力;其结构由线性注意力分支与 Lightning Indexer 组成,后者动态选取相关 token 的稀疏分支,两路经学习门控融合,面向高效长上下文推理。目前可核实的信息仅来自这篇主报道,尚无跟进报道披露实验结果、适用模型范围或部署条件,事件仍处论文发布阶段。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv Artificial Intelligence
    LISA:面向高效长上下文推理的线性索引稀疏注意力

    LISA 是一种无需完整预训练即可替换自注意力的线性索引稀疏注意力机制,通过线性注意力分支与 Lightning Indexer 动态选取相关 token 的稀疏分支经学习门控融合。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。