[논문리뷰] KV4-RL: Unlocking Faster Asynchronous Rollouts for RLVR with INT4 KV Cache Quantization본 논문은 비동기 rollout이 Long-Tail 생성 중 유휴 시간을 줄여 RLVR의 효율성을 향상시키지만, 지속적인 concurrency가 Key-Value (KV) 캐시 처리를 더 적은 디코드 스텝으로 집중시켜 KV workload를 증가시키고 KV 연산을 새로운 Bottleneck으로 만든다고 지적합니다.#Review#Reinforcement Learning with Verifiable Rewards (RLVR)#Asynchronous Rollout#KV Cache Quantization#INT4#Selective Protection#Sampler Mismatch#Group Relative Policy Optimization (GRPO)2026년 10월 14일댓글 수 로딩 중