[논문리뷰] DAMI: Dual-Axis Memory Initialization for Enhanced Long-Context Retrieval in Gated Linear Attention본 논문은 Gated Linear Attention 기반 모델들이 훈련 후에도 초기화 시점의 기억 파라미터 구조를 지속적으로 유지하며, 이것이 Long-Context Retrieval 성능을 제약한다는 점을 지적합니다.#Review#Gated Linear Attention#Long-Context Retrieval#Memory Initialization#Recurrent Neural Networks#Timescale Allocation2026년 11월 2일댓글 수 로딩 중