GPU 자원 공유 제어의 어려움
Control How Your GPU Shares Work with Green Contexts
GPU 애플리케이션은 단일 프로세스 내에서 동시에 실행되는 여러 독립적인 구성 요소로 구성되는 경우가 많다. 예를 들어, 지연에 민감한 연산자와 처리량 중심의 백그라운드 커널, 데이터 전처리 단계와 모델 추론, 또는 단일 GPU를 공유하는 여러 처리 워크플로우 단계가 있다. 그러나 이러한 구성 요소 간의 GPU 자원 공유를 제어하는 것은 여전히 어려운 문제이다.
원문 출처
NVIDIA Technical Blog