Kullback-Leibler Divergence (KL 발산) Kullback-Leibler Divergence(KL 발산)는 두 확률 분포의 차이를 측정하는 비대칭적 지표로, 정보이론 관점에서 하나의 분포가 다른 분포와 얼마나 다른지를 수치화한 척도이다. 1. 개요 KL 발산은 정보이론에서 상대 엔트로피(Relative Entropy)라고도 불리며, 실…
검색 결과
검색어를 입력하세요.
손실 함수 개요 머신러닝·딥러닝 모델은 입력 데이터와 정답(라벨) 사이의 차이를 최소화하도록 학습한다. 이 차이를 수치적으로 표현한 것이 손실 함수(Loss Function)이다. 손실 함수는 모델이 현재 얼마나 잘 예측하고 있는지를 정량화하고, 최적화 알고리즘(예: 경사하강법)이 파라미터를 업데이트하는 기준이 된다. 손실 함수는 문제 유형(회귀·분류·시계…
다중 클래스 분류 개요 다중 클래스 분류(Multiclass Classification)는 머신러닝 및 데이터 과학 분야에서 중요한 분석 기법 중 하나로, 주어진 입력 데이터를 세 개 이상의 서로 독립적인 클래스(카테고리)로 분류하는 작업을 말합니다. 이는 이진 분류(Binary Classification)의 일반화된 형태이며, 현실 세계의 다양한 문제 —…