[Hacker News 요약] SGLang과 Miles, DeepSeek-V4의 Day-0 추론 및 검증된 RL 학습 지원으로 성능 극대화
39
설명
LMSYS 블로그에서 DeepSeek-V4 모델의 출시와 동시에 SGLang 및 Miles를 통한 Day-0 지원 소식을 발표했습니다. 이는 DeepSeek-V4의 하이브리드 스파스 어텐션 아키텍처, mHC(Manifold-Constrained Hyper-Connections), 그리고 FP4 전문가 가중치와 같은 복잡한 특징들을 효율적으로 처리하기 위해 특별히 설계된 시스템 스택입니다. 이번 지원은 최신 대규모 언어 모델(LLM)의 빠른 채택과 성능 최적화에 중요한 이정표를 제시합니다. 특히 추론 속도 향상과 안정적인 강화 학습(RL) 환경 구축에 초점을 맞추고 있습니다.
### 배경 설명
최근 대규모 언어 모델(LLM)은 그 규모와 복잡성이 기하급수적으로 증가하고 있으며, 이는 모델의 학습 및 추론 효율성에 대한 시스템적 도전을 야기합니다. 특히 DeepSeek-V4와 같은 최신 모델은 하이브리드 스파스 어텐션(Hybrid Sparse Attention)과 같은 혁신적인 아키텍처를 도입하여 1M 토큰에 달하는 긴 컨텍스트 윈도우를 효율적으로 처리하려 합니다. 그러나 이러한 복잡한 구조는 기존의 범용 추론 엔진으로는 최적의 성능을 달성하기 어렵게 만듭니다. 예를 들어, 스파스 어텐션은 KV 캐시 관리 방식이 전통적인 밀집 어텐션과 달라 새로운 캐싱 전략이 필요하며, FP4와 같은 저정밀도 가중치는 특정 하드웨어(예: Blackwell)에 최적화된 커널 통합을 요구합니다.
이러한 배경 속에서 SGLang과 Miles 팀의 DeepSeek-V4 Day-0 지원은 매우 주목할 만합니다. 모델 출시와 동시에 해당 모델의 고유한 아키텍처적 특성을 완벽하게 지원하는 시스템 스택을 제공함으로써, 개발자와 연구자들은 DeepSeek-V4의 잠재력을 즉시 활용할 수 있게 됩니다. 이는 모델 개발과 시스템 최적화가 긴밀하게 협력해야 하는 현대 LLM 생태계의 중요성을 잘 보여주는 사례이며, 특히 고성능 추론과 안정적인 강화 학습(RL) 환경 구축이 LLM의 실제 적용에 필수적임을 강조합니다.
### DeepSeek-V4의 핵심 아키텍처
DeepSeek-V4는 이전 버전인 DeepSeek-V3.2를 세 가지 주요 축으로 확장합니다. 첫째, 하이브리드 스파스 어텐션은 슬라이딩 윈도우 어텐션과 두 가지 압축 메커니즘(4:1 top-k 또는 128:1 dense)을 혼합하여 1M 토큰 컨텍스트 윈도우를 효율적으로 관리합니다. 둘째, mHC(Manifold-Constrained Hyper-Connections)는 표준 잔차 연결을 일반화하여 그라디언트 흐름과 표현 품질을 개선합니다. 셋째, FP4 전문가 가중치를 기본 지원하여 최신 Blackwell 하드웨어에서 MoE(Mixture-of-Experts) 모델의 효율적인 서빙을 가능하게 합니다.
### 하이브리드 어텐션 캐싱 및 추론 최적화
DeepSeek-V4의 복잡한 하이브리드 어텐션 구조를 위해 SGLang은 여러 혁신적인 최적화 기술을 도입했습니다. 'ShadowRadix'는 하이브리드 어텐션을 위한 네이티브 프리픽스 캐싱 메커니즘으로, 이질적인 KV 풀과 압축 상태 풀 간의 일관성을 유지합니다. '추측 디코딩(Speculative Decoding)'은 MTP(Multi-Token Prediction) 헤드를 활용하며, 인-그래프 메타데이터 준비와 오버랩 스케줄링을 통해 오버헤드를 최소화합니다. 'HiSparse'는 비활성 KV 캐시를 CPU 메모리로 오프로드하여 C4 레이어의 장문 컨텍스트 처리량을 최대 3배 향상시킵니다.
### 저수준 커널 및 병렬화 기술
성능 극대화를 위해 다양한 커널 통합 및 병렬화 전략이 적용되었습니다. FlashMLA는 하이브리드 어텐션을 위한 새로운 경로를 제공하며, FlashInfer TRTLLM-Gen은 Blackwell GPU에서 MXFP8 x MXFP4 MoE를 효율적으로 처리합니다. TileLang mHC 커널은 split-K를 통해 GPU 활용도를 높이고, DeepGEMM Mega MoE는 EP 디스패치와 MoE GEMM을 단일 메가 커널로 융합합니다. Flash Compressor는 5단계 압축 체인을 온-칩 패스로 융합하여 HBM 왕복을 줄이고, Lightning TopK는 전역 정렬 대신 라딕스 선택 커널을 사용하여 스파스 어텐션의 지연 시간을 단축합니다. 또한, 컨텍스트 병렬화(CP), 페이지드 KV 전송, 계층적 멀티-스트림 오버랩 등 다양한 병렬화 및 배치 최적화가 이루어졌습니다.
### 강화 학습(RL) 지원 및 안정성
Miles는 DeepSeek-V4의 강화 학습(RL) 훈련을 위한 포괄적인 지원을 제공합니다. Megatron-LM 기반의 훈련 백엔드는 DeepSeek-V4의 새로운 아키텍처에 맞춰 재구축되었으며, DP/TP/SP/EP/PP/CP를 포함한 모든 6가지 병렬화 전략을 지원합니다. FP8 롤아웃 및 FP8/BF16 훈련, 어텐션 QAT(Quantization-Aware Training), R3(Rollout Routing Replay), 그리고 실험적인 인덱서 리플레이와 같은 중요한 RL 기능들이 통합되었습니다. 또한, 혼합 정밀도 스택에서 수치적 정밀도를 신중하게 유지하고, 불안정한 경로를 선택적으로 고정하며, KL 손실의 무작위 스파이크를 피하기 위한 결정론적 연산 설정을 통해 훈련 안정성을 확보했습니다.
### 가치와 인사이트
이번 DeepSeek-V4의 Day-0 지원은 최신 LLM의 연구 및 상업적 활용에 있어 매우 중요한 가치를 가집니다. 모델 출시와 동시에 최적화된 추론 및 학습 환경을 제공함으로써, 개발자들은 DeepSeek-V4의 잠재력을 즉시 탐색하고 실제 애플리케이션에 통합할 수 있습니다. 이는 새로운 모델 아키텍처가 가져오는 시스템적 복잡성을 효과적으로 해결하며, 고성능 컴퓨팅 환경에서 LLM의 효율적인 운영을 위한 모범 사례를 제시합니다. 특히, 복잡한 하이브리드 어텐션과 저정밀도 가중치를 위한 혁신적인 캐싱, 커널, 병렬화 기술들은 LLM 시스템 최적화의 새로운 지평을 열었으며, 강화 학습 지원은 LLM의 정렬(alignment) 및 미세 조정 연구를 가속화할 것입니다.
### 기술·메타
- SGLang
- Miles
- DeepSeek-V4 (1.6T Pro, 284B Flash)
- Megatron-LM
- FlashMLA
- FlashInfer
- TRTLLM-Gen
- DeepGEMM
- TileLang
- CUDA
- Hopper GPU (SM90)
- Blackwell GPU (SM100)
- Grace Blackwell
- AMD GPU
- NPU
- FP4, FP8, BF16, FP32 (혼합 정밀도)
- DP/TP/SP/EP/PP/CP (데이터/텐서/시퀀스/전문가/파이프라인/컨텍스트 병렬화)
- ShadowRadix (프리픽스 캐싱)
- Speculative Decoding (추측 디코딩)
- HiSparse (계층적 메모리)
- Flash Compressor
- Lightning TopK
- Rollout Routing Replay (R3)
- Quantization-Aware Training (QAT)
### 향후 전망
DeepSeek-V4에 대한 SGLang과 Miles의 Day-0 지원은 향후 LLM 생태계에 여러 변수를 가져올 것으로 예상됩니다. 첫째, 다른 LLM 개발팀들도 모델 출시와 동시에 최적화된 시스템 스택을 제공하는 것이 표준이 될 수 있습니다. 이는 모델-시스템 공동 설계의 중요성을 더욱 부각시킬 것입니다. 둘째, 다양한 추론 엔진 간의 경쟁은 더욱 심화될 것이며, 특정 모델 아키텍처에 대한 깊이 있는 이해와 최적화 능력이 핵심 경쟁력이 될 것입니다. 셋째, Blackwell과 같은 차세대 하드웨어의 등장과 함께 FP4와 같은 저정밀도 연산의 활용이 더욱 확대될 것이며, 이에 대한 소프트웨어 스택의 지원이 중요해질 것입니다. 마지막으로, 강화 학습 기반의 LLM 정렬 기술이 발전함에 따라, Miles와 같은 안정적이고 효율적인 RL 훈련 프레임워크의 역할이 더욱 커질 것으로 전망됩니다.
📝 원문 및 참고
- Source: Hacker News
- 토론(HN): [news.ycombinator.com](https://news.ycombinator.com/item?id=47905768)
- 원문: [링크 열기](https://www.lmsys.org/blog/2026-04-25-deepseek-v4/)
---
출처: Hacker News · [원문 링크](https://www.lmsys.org/blog/2026-04-25-deepseek-v4/)
신고 · 불법·유해·아동 안전(CSAE) 관련 콘텐츠
댓글 0
아직 댓글이 없습니다. 첫 댓글을 남겨 보세요.