#Asynchronous Reinforcement Learning

1개의 포스트

[논문리뷰] Stale but Stable: Staleness-Adaptive Trust Regions for Stabilizing Asynchronous Reinforcement Learning

본 논문은 대규모 비동기 강화학습에서 발생하는 training-inference mismatch와 누적된 staleness가 모델 학습의 조기 붕괴(collapse)를 야기한다는 점을 지적합니다.

#Review #Asynchronous Reinforcement Learning #Staleness #Trust Region #PPO #Training-Inference Mismatch #Adaptive Clipping #LLM

2026년 7월 21일