# 뉴턴 방법 ## 개요 **뉴턴 방법**(Newton's Method), 또는 **뉴턴-랩슨 방법**(Newton-Raphson Method)은 비선형 방정식의 근을 수치적으로 근사하는 데 사용되는 대표적인 반복적 최적화 알고리즘 중 하나이다. 이 방법은 주어진 함수 $ f(x) $의 실근(real root)을 빠르게 찾아내기 위해 함수의 접선(tan...

# 수렴 속도 수렴 속도(Convergence Rate) 수치최적화 알고리 최적해에 접근하는 속도를 수학적으로 정의한 개념이다. 최적화 문제를 해결하는 과에서 반복적인 계산을 통해 해를 점진적으로 개선하는데, 이 과정에서 해가 실제 최적해에 얼마나 빠르게 가까워지는지를 평가하는 척도가 바로 수렴 속도이다. 수렴 속도는 알고리즘의 효율성과 실용성을 판단하는...

# 헤시안 행렬 헤시안 행렬(Hessian Matrix)은 다변수 실수값 함수의 **이계도함수**(second-order partial derivatives)를 정사각형 행렬 형태로 배열한 것으로, 함수의 국소적 곡률 정보를 제공하는 중요한 수학적 도구입니다. 선형대수학과 최적화 이론, 머신러닝, 물리학 등 다양한 분야에서 널리 사용되며, 특히 함수의 극...