CUDA (Compute Unified Device Architecture) CUDA(Compute Unified Device Architecture)는 NVIDIA가 개발한 병렬 컴퓨팅 플랫폼 및 API 모델입니다. GPU(Graphics Processing Unit)가 본래 수행하던 그래픽 렌더링 작업을 넘어, 일반적인 계산 작업(General-Purp…
검색 결과
"CUDA Toolkit"에 대한 검색 결과 (총 3개)
주변 환경 1. 개요 주변 환경이란 LLM(대규모 언어 모델) 서비스가 정상적으로 구동되고 최적의 성능을 내기 위해 갖추어야 할 하드웨어, 소프트웨어, 네트워크 및 설정 상태의 총합을 의미합니다. 적절한 주변 환경 설정은 모델의 추론 속도를 결정할 뿐만 아니라, 서비스의 안정성을 확보하고 스트리밍 응답 오류와 같은 기술적 결함을 방지하는 데 필수적입니다. …
cuBLAS cuBLAS(CUDA Basic Linear Algebraprograms)는 NVIDIA에서 개발 GPU 기반의성능 선형대수 라이브러리로 CUDA 플랫폼에서 실행되는 C/C++ 및 Fortran 애플리케이션 대해 BLAS(B Linear Algebra Subprograms) 표준을 구현한 소프트웨어 라이브러리. 이 라이브러리는 행렬-벡터 연산,…