# 정규 방정식 ## 개요 정규 방정식(Normal Equation)은 **선형 회귀 분석**(Linear Regression)에서 최적의 파라미터(계수)를 직접 계산하는 수학적 방법입니다. 이 방법은 반복적 최적화 알고리즘인 경사 하강법(Gradient Descent)과 달리, 행렬 연산을 통해 해를 한 번에 도출합니다. 주로 **작은 데이터셋** 또는...
검색 결과
"릿지 회귀"에 대한 검색 결과 (총 3개)
# 회귀 계수 ## 개요 회귀 계수는 통계학에서 변수 간 관계를 모델링하고 예측하는 데 사용되는 핵심 개념입니다. 주로 선형 회귀 분석을 통해 독립변수와 종속변수 사이의 수량적 관계를 정량화합니다. 이 문서에서는 회귀 계수의 정의, 종류, 계산 방법, 해석 방식 및 실제 적용 사례에 대해 상세히 설명합니다. --- ## 정의 및 개념 ### 선형 회...
# L2 정규화 ## 개요 L2 정규화(Ridge Regularization)는 머신러닝 모델의 **과적합**(Overfitting)을 방지하기 위해 사용되는 기법입니다. 이는 손실 함수(Loss Function)에 **가중치의 제곱합**을 패널티 항으로 추가하여 모델 복잡도를 제어하는 방식으로 작동합니다. 특히 데이터가 적거나 특성(Feature) 수가...