NVIDIA DSX를 통한 AI 공장 전력 관리 최적화
From Megawatts to Tokens: How NVIDIA Maximizes AI Factory Production
NVIDIA의 Emerald AI가 개발한 Conductor 플랫폼은 전력 소비를 조정하여 AI 공장의 유연한 컴퓨팅 작업을 관리한다. Silicon Valley Power가 보낸 200개 이상의 전력 수요 신호에 따라, AI 공장은 전력을 4메가와트에서 3메가와트로 자동으로 줄이며, 높은 우선순위 작업은 계속 실행된다. NVIDIA DSX MaxLPS는 고정 전력 예산 내에서 24% 더 많은 토큰 처리량을 지원할 수 있도록 설계되었다.
NVIDIA DSX MaxLPS는 고정 전력 예산 내에서 더 많은 작업을 수행할 수 있도록 하여 AI 공장의 효율성을 높인다.
원문 출처
NVIDIA Blog