[논문리뷰] PACE: Periodic and Channel-Aligned Encoding of Four-Bit Recurrent StatesLinear-attention Language Models는 고정된 크기의 recurrent state를 사용하여 Transformer의 Key-Value cache를 대체하지만, 여러 concurrent sequence를 처리할 때 이 state가 상당한 memory를 차지하게 됩니다.#Review#State Quantization#Linear-Attention Language Models#Recurrent State#Periodic Rounding#Decode Buffer#Channel-Aligned Scale Groups#Four-Bit Quantization#Throughput2026년 10월 21일댓글 수 로딩 중