AI의 에너지 스케일링 법칙
The Sequence Opinion- Issue 918: The Energy Scaling Laws of AI
AI는 클라우드에서 작동하지 않고, 변전소, 냉각 루프, 전송 네트워크 및 발전소에서 작동한다. 다음 스케일링 법칙은 매개변수뿐만 아니라 문명이 광자와 원자를 유용한 지능으로 변환하는 효율성에 관한 것이다. 현대 AI 애플리케이션은 거의 무게가 없는 경험을 제공하며, 그 뒤에는 수십억 개의 트랜지스터를 스위칭하는 가속기, 텐서를 이동하는 메모리 시스템, 냉각수를 순환시키는 펌프, 전압을 재형성하는 변압기, 운동, 햇빛 또는 핵 반응을 전자로 변환하는 발전기가 있다. 클러스터에 들어오는 거의 모든 줄은 결국 열로 방출된다.
AI의 에너지 효율성을 이해하는 것은 다음 AI 스케일링의 발전에 중요한 요소이다.
원문 출처
TheSequence (Jesus Rodriguez)