논문해외
DAMI: Dual-Axis Memory Initialization for Enhanced Long-Context Retrieval in Gated Linear Attention
HF Daily Papers
Linear attention scales linearly with sequence length, but its finite-state memory can limit long-context retrieval.
원문의 저작권은 HF Daily Papers에 있습니다. 위 발췌는 원문 확인을 돕기 위한 짧은 인용입니다.