# 병렬 처리 (Parallel Processing) **병렬 처리**(Parallel Processing)란 하나의 복잡한 문제를 여러 개의 작은 하위 문제로 분할하여, 이를 동시에 처리함으로써 계산 속도를 높이고 시스템의 효율성을 극대화하는 컴퓨터 과학 및 공학 기법입니다. 단일 프로세서가 순차적으로 작업을 처리하는 직렬 처리(Serial Proces...
검색 결과
"GPU"에 대한 검색 결과 (총 131개)
# 혼합 전문가 모델 (Mixture of Experts, MoE) ## 개요 **혼합 전문가 모델**(Mixture of Experts, 줄여서 **MoE**)은 대규모 언어 모델(LLM) 및 딥러닝 아키텍처에서 사용되는 효율적인 신경망 설계 패턴입니다. MoE의 핵심 아이디어는 단일 거대한 모델 대신, 여러 개의 작은 '전문가(Expert)' 네트워...
# 리니어ReLU (LinearReLU) **리니어ReLU(LinearReLU)**는 인공 신경망(Artificial Neural Networks)에서 활성화 함수(Activation Function)로 사용되는 수학적 연산자입니다. 이 함수는 입력값이 양수일 경우 선형적으로 값을 전달하고, 음수일 경우 0으로 고정하는 **ReLU(Rectified Li...
# 예측 제어 (Predictive Control) **예측 제어**(Predictive Control)는 공학 및 제어 이론에서 시스템의 미래 동작을 예측하여 최적의 제어 입력을 결정하는 고급 제어 기법입니다. 특히 **모델 예측 제어**(Model Predictive Control, MPC)라고도 불리며, 현재 상태와 미래의 시스템 거동을 수학적으로 ...
# HEVC (High Efficiency Video Coding) **HEVC**(High Efficiency Video Coding, 고효율 비디오 부호화)는 MPEG(움직이는 영상 전문가 그룹)와 ITU-T(국제전기통신연합 전신 표준화 부문)가 공동으로 개발한 차세대 비디오 압축 표준입니다. 이전 세대인 H.264/AVC(Advanced Video ...
# Stable Diffusion **Stable Diffusion**(스테이블 디퓨전)은 텍스트 설명(text prompt)을 바탕으로 고품질의 디지털 이미지를 생성하는 딥러닝 기반의 생성형 인공지능 모델입니다. 2022년 독일의 스태빌리티 AI(Stability AI)와 라이덴 대학교, 컴팩트 랩스(CompVis)가 공동으로 개발하여 공개했으며, 현재...
# LAMB (Layer-wise Adaptive Moments optimizer for Batch normalization) **LAMB**(Layer-wise Adaptive Moments optimizer for Batch normalization)는 대규모 배치 학습(Batch Training) 환경에서 효율적으로 딥러닝 모델을 최적화하기 위해 설...
# XGBoost ## 개요 **XGBoost**(Extreme Gradient Boosting)는 효율적이고 확장 가능한 그래디언트 부스팅 라이브러리로, Tianqi Chen과 공동 연구진에 의해 2014년 공개되었습니다. 데이터 과학 경진대회(Kaggle 등)와 산업 현장 모두에서 높은 예측 성능과 학습 속도로 널리 사용되고 있으며, 현재까지 머신러닝...
# Adapter 모듈 ## 개요 **Adapter 모듈**(Adapter Module)은 사전 학습된 대규모 인공지능 모델(Transformer, Vision Transformer 등)에 경량의 trainable 레이어를 삽입하여 **파라미터 효율적 미세 조정(Parameter-Efficient Fine-Tuning, PEFT)**을 가능하게 하는 구조...
# RT 코어 (RT Core) ## 개요 **RT 코어(RT Core)**는 엔비디아(NVIDIA)가 개발한 GPU 내장 전용 하드웨어 가속기입니다. 실시간 레이 트레이싱(Ray Tracing) 연산을 가속화하기 위해 설계되었으며, 2018년 출시된 `터밍(Turing)` 아키텍처부터 본격적으로 탑재되기 시작했습니다. 기존 소프트웨어 기반 렌더링 파이프...
# ELECTRA ## 개요 **ELECTRA**(Efficiently Learning an Encoder that Classifies Token Replacements Accurately)는 2020년 구글 리서치(Google Research) 팀이 제안한 자연어 처리(NLP) 기반 사전 학습(pre-training) 방법론입니다. 기존 BERT 모델에...
# 사전 학습 (Pre-training) ## 개요 사전 학습(Pre-training)은 인공지능, 특히 딥러닝 모델 개발 파이프라인에서 가장 초기이자 핵심적인 단계로, 방대한 양의 일반 데이터셋을 활용하여 모델이 세계에 대한 기본적인 지식과 패턴을 학습시키는 과정입니다. 이 단계에서 훈련된 모델은 특정 작업에 최적화되지 않은 '기반 모델(Foundati...
# PBKDF2 ## 개요 **PBKDF2**(Password-Based Key Derivation Function 2)는 비밀번호 기반 키 도출 함수(PBKDF)의 한 형태로, 암호화 시스템에서 약한 사용자 비밀번호를 더 강력하고 안전한 암호화 키로 변환하기 위해 설계된 알고리즘입니다. 이 함수는 **PKCS #5 v2.0**(Public-Key Cr...
# NVLink ## 개요 **NVLink**는 엔비디아(NVIDIA)가 개발한 고속 스케일러블 프로세서 간 인터커넥트 기술로, 주로 GPU와 GPU 간, 또는 GPU와 CPU 간의 고대역폭·저지연 데이터 전송을 위해 설계되었습니다. 기존의 PCIe(Peripheral Component Interconnect Express) 인터페이스에 비해 훨씬 높은...
# SHA-1 ## 개요 **SHA-1**(Secure Hash Algorithm 1)은 미국 국립표준기술연구소(NIST)와 국가안보국(NSA)이 개발한 암호학적 해시 함수로, 임의 길이의 입력 데이터를 받아 고정된 160비트(20바이트) 길이의 해시값(또는 다이제스트)을 출력하는 알고리즘입니다. SHA-1은 1995년에 공식적으로 발표되어 디지털 서명...
# 군집화 (Clustering) ## 개요 군집화(Clustering)는 **비지도 학습(Unsupervised Learning)** 기법 중 하나로, 사전에 레이블이 없는 데이터 집합을 **유사한 특성을 가진 그룹(군집, cluster)** 으로 자동 분할하는 방법을 말한다. 데이터 포인트 간의 거리 혹은 유사도 측정을 기반으로, 같은 군집에 속한...
# 무선 AP (Wireless Access Point) --- ## 개요 무선 AP(Access Point)는 유선 LAN(Local Area Network)에 연결된 장비가 **무선 LAN(WLAN)** 으로 확장될 수 있도록 하는 중계 장치이다. 클라이언트(스마트폰, 노트북, IoT 디바이스 등)는 AP와 IEEE 802.11 계열의 무선 프...
# CNN/Daily Mail ## 개요 **CNN/Daily Mail**(줄여서 **C/D M**)은 자연어 처리(NLP) 분야에서 **추상적 요약(abstractive summarization)** 및 **추출적 요약(extractive summarization)** 모델을 평가하기 위해 널리 사용되는 대규모 벤치마크 데이터셋이다. 2015년 **...
# 질문 응답 시스템 ## 개요 질문 응답 시스템(Question Answering, QA)은 사용자가 자연어로 제시한 질문에 대해 **정확하고 간결한 답변**을 자동으로 생성하는 기술이다. 전통적인 정보 검색(IR) 시스템이 “문서 목록”을 반환한다면, QA 시스템은 “답변 자체”를 제공한다는 점에서 차별화된다. 최근 딥러닝, 특히 **대규모 사전학습 ...
# 손실 함수 ## 개요 머신러닝·딥러닝 모델은 **입력 데이터**와 **정답(라벨)** 사이의 차이를 최소화하도록 학습한다. 이 차이를 수치적으로 표현한 것이 **손실 함수(Loss Function)**이다. 손실 함수는 모델이 현재 얼마나 잘 예측하고 있는지를 정량화하고, 최적화 알고리즘(예: 경사하강법)이 **파라미터를 업데이트**하는 기준이...