[Liger-Kernel] Liger-Kernel: Cross-Entropy와 Total Variation Distance를 하나로 융합하여 성능을 극대화하다Liger-Kernel이 Cross-Entropy와 Total Variation Distance를 단일 연산으로 융합하여 메모리 및 HBM 트래픽을 획기적으로 개선했습니다.#딥러닝#최적화#Triton#GPU#Liger-Kernel2026년 9월 27일댓글 수 로딩 중
[Liger-Kernel] Liger-Kernel: SM90 MoE 통신 최적화 및 안정성 개선SM90 아키텍처에서 MoE 통신을 로컬/인터호스트로 분리 최적화하고, 백워드 동기화 행 문제를 해결하여 성능을 극대화했습니다.#Liger-Kernel#MoE#SM90#CUDA#NVSHMEM#Performance2026년 9월 14일댓글 수 로딩 중
[Liger-Kernel] Ascend NPU 성능 극대화: Liger-Kernel의 커널 최적화 분석Ascend NPU를 위한 CrossEntropy, RMSNorm, RoPE 커널 최적화로 HBM 오버헤드를 줄이고 학습 성능을 극대화한 사례를 분석합니다.#Ascend#NPU#Triton#Liger-Kernel#Optimization2026년 9월 9일댓글 수 로딩 중
[Liger-Kernel] Liger-Kernel의 Fused Linear Cross Entropy 성능 최적화: C=16 전략Triton 커널의 메모리 버짓 상수를 조정하여 Fused Linear Cross Entropy 연산의 루프 오버헤드를 획기적으로 줄인 사례 분석.#Triton#LLM#Optimization#Performance#Liger-Kernel2026년 8월 27일댓글 수 로딩 중
[Liger-Kernel] Liger-Kernel의 RMSNorm 최적화: cuTile 도입과 CuTe DSL 성능 개선Liger-Kernel에 네이티브 cuTile RMSNorm을 추가하고, CuTe DSL의 동기화 및 연산 효율을 최적화하여 H100 성능을 극대화했습니다.#CUDA#RMSNorm#Liger-Kernel#CuTe#H100#Performance2026년 8월 21일댓글 수 로딩 중