#Autoregressive LLMs

1개의 포스트

[논문리뷰] Skip to the Good Part: Representation Structure & Inference-Time Layer Skipping in Diffusion vs. Autoregressive LLMs

본 논문은 Autoregressive (AR) LLM과 Diffusion (dLLM)의 내부 표현 구조가 어떻게 다른지 체계적으로 분석하고, 이러한 차이를 활용하여 추론 시 레이어 스키핑(layer skipping) 을 통한 효율성 증대 가능성을 탐색합니다.

#Review #Diffusion LLMs #Autoregressive LLMs #Representational Analysis #Layer Skipping #Inference Efficiency #Initialization Bias #FLOPs Reduction #Recency Bias

2026년 3월 9일