# BFGS **BFGS**(Broyden–Fletcher–Goldfarb–Shanno 알고리즘은 비선형 최적화 문제에서 널리 사용되는 준뉴턴(Quasi-Newton) 방법 중 하나로, 목적 함수의 최소값을 반복적으로 탐색하는 데 효과적입니다. 특히, 목적 함수의 2차 미분(헤시안 행렬)을 직접 계산하지 않고도 뉴턴 방법과 유사한 수렴 성능을 달성할 수 ...

# NumPy ## 개요 **NumPy**(Numerical Python)는 파이썬에서 과학적 계산 및 수치 해석을 위한 핵심 라이브리 중 하나로, 고성능의 다차원 배열 객체(`ndarray`)와 이를 효율적으로 처리할 수 있는 함수들을 제공합니다. NumPy는 데이터 분석, 기계 학습, 수치 시뮬레이션, 이미지 처리 등 다양한 분야에서 기반이 되는 도...

# 선형 연산 ## 개요 선형 연산(Linear Operation)은 데이터 과학과 분석 분야에서 핵심적인 수학적 도구로, 선형 대수학(Linear Algebra)의 기본 원리를 기반으로 합니다. 이 연산은 행렬, 벡터, 스칼라 등을 활용해 데이터의 구조를 변환하거나 패턴을 추출하는 데 사용되며, 머신러닝, 통계 분석, 최적화 문제 등 다양한 분야에 적용...

# 정규 방정식 ## 개요 정규 방정식(Normal Equation)은 **선형 회귀 분석**(Linear Regression)에서 최적의 파라미터(계수)를 직접 계산하는 수학적 방법입니다. 이 방법은 반복적 최적화 알고리즘인 경사 하강법(Gradient Descent)과 달리, 행렬 연산을 통해 해를 한 번에 도출합니다. 주로 **작은 데이터셋** 또는...