LLM VRAM 계산기 - ApX

 

ApX Machine Learning의 VRAM 계산기는 대형 언어 모델(LLM)을 실행하거나 훈련할 때 필요한 GPU 메모리 용량을 추정하는 도구입니다. 사용자는 모델 유형, 양자화 수준, GPU 메모리 크기, 배치 크기, 시퀀스 길이 등을 설정하여 예상되는 VRAM 사용량을 확인할 수 있습니다.

 

 

https://apxml.com/tools/vram-calculator

etc-image-0

 

 

 

 

 

 

_

반응형