[논문리뷰] Hierarchical Residuals: A Minimalist Decoupling of Residual Width from Compute Width본 논문은 Residual width와 Compute width의 결합을 풀되, 최소한의 아키텍처 변경과 standard operator만으로 넓은 residual state의 이점을 얻는 것을 목표로 합니다.#Review#Residual Connection#Transformer Architecture#Residual Width Expansion#PreNorm/PostNorm#Scaling Laws#Hyper-Connections#Mixture-of-Experts2026년 11월 8일댓글 수 로딩 중