유사도 분석
# 유사도 분석 개요 유사도 분석(Similarity Analysis)은 두 개 이상의 데이터 객체 간의 유사한 정도를 정량적으로 측정하고 평가하는 데이터 분석 기법입니다.는 데이터 과학, 머신러닝, 검색, 텍스트 마이닝, 추천 시스템 등 다양한 분야에서 핵심적인...
# 유사도 분석 개요 유사도 분석(Similarity Analysis)은 두 개 이상의 데이터 객체 간의 유사한 정도를 정량적으로 측정하고 평가하는 데이터 분석 기법입니다.는 데이터 과학, 머신러닝, 검색, 텍스트 마이닝, 추천 시스템 등 다양한 분야에서 핵심적인...
# 군집 샘플링**군집 샘플링**(Cluster Sampling은 통계학 데이터과학 분야에서리 사용되는 확률표본추출 방법 중 하나로, 전체 모집단을 자연스럽게 형성된 **군집**(Cluster)으로 나누, 이 군집들 중 일부를 무작위로 선택하여 표본으로 추출하는 방식입...
# 단일 활성화 ## 개요 **단일 활성화**(One-Hot Encoding)는 범주형 데이터(categorical data)를 기계학습 모델이 처리할 수 있도록 수치형 형태로 변환하는 대적인 데이터 인코딩 기 중 하나입니다.주형 변수는 특정한 카테고리나 레이블을 ...
# PyData ## 개요 **PyData**는 파이(Python)을반으로 데이터 과학, 머신러닝, 통계 분석, 데이터 엔지니어링 다양한 데이터 관련 작업을 수행하는 데 사용되는 오픈소스 생태계와 커뮤니티를 총칭하는 용어입니다. PyData는 단순한 도구의 집합을 ...
# TF-IDF ## 개 TF-IDF(Term Frequencyverse Document Frequency) 자연어 처리(NLP와 정보 검색Information Retrieval) 분야에서 널 사용되는 **텍스트 데이터의 중요도를 수치화하는 가중치 기**입니다. 이...
# OneHotEncoder ##요 **OneHotEncoder**는 머신러닝 및 데이터 과 분야에서 범주형 데이터(c data)를 모이 처리할 수 있는 수치 형태로 변환 위해 사용되는 전처리 도구입니다. 사이킷런(Scikit-learn 라이브러리에서 제공하는 `s...
# 해싱 트릭## 개요 **해싱 트**(Hashing Trick)은 기 학습 및 데이터 과학 분야 고차원의 범주형 데이터를 효율적으로 처리하기 위한 기술이다. 특히 자연어 처리(NLP)나 대규모 범주형 피처를 다룰 때, 원-핫 인코딩(Oneot Encoding)과 같...
# 샘플링 ## 개요 **샘플링**()은 전체 모집(Population)에서 일부 선택하여 그 특성을 조사함으로써 모단의 성질을 추정하는 통계적 방법이다. 현실 세계 모든 데이터를 수집하거나 분석하는 것은 비용, 시간 자원 등의 제약으로 인해 불능한 경우가 많기 때...
# 모델 해석성 ## 개요 **모델 해석성**(Model Interpretability)은 머신러닝 및 데이터과학 분야에서 모델이 예측을 내놓는 과정을 인간이 이해할 수 있도록 설명하는 능력을 의미합니다. 특히 복잡한 알고리즘(예: 딥러닝, 부스팅 모델 등)이 사용...
# 오버샘플링 ## 개요 오버샘플(Over-sampling은 기계 학습 데이터 과학 분야에서불균형 데이터(imbalanced data)** 문제를 해결하기 위해 사용되는 데이터 전 기법 중 하나. 불균형란 특정 클래스의 샘플 수가 다른에 비해 현히 적은 경우를 말하...
# 평균 절대 오 ## 개요 **평균 절대 오차**(Mean Absolute Error, MAE)는 회귀 분석에서 예 모델의 성능을 평가하는 대표적인 지표 중입니다. MAE는 예측값과 실제 관값 사이의 차이, 즉 **오차**(error)의 절대값을 평균한 값으로, ...
# MSE ## 개요 **MSE**(Mean Squared Error, 평균 제곱 오차)는 회귀 분석에서 예측 모델의 정확도를 평가하는 데 널리 사용되는 지표입니다. 이 값은 예측값과 실제 관측값 사이의 차이(오차)를 제곱한 후, 그 평균을 계산함으로써 모델의 전반...
# ROC 곡선 ## 개요 ROC 곡선(Receiver Operatingistic Curve, 수기 운영 특성 곡선)은 이진류 모델의 성능을각적으로 평가하고 비교하는 데 사용되는 중요한 도입니다. ROC 곡선은 다양한 분류 임계값(threshold)에 **민감도**...
# TN ## 개요 **TN**(True Negative, 참 음성)은 통계학 및 기계학습에서 분류 모델의 성능을 평가하는 데 사용되는 **혼동 행렬**(Confusion Matrix)의 네 가지 기본 요소 중 하나입니다. TN은 모델이 '음성 클래스(Negativ...
FP **FP**(False Positive, 위양성)는 데이터, 특히 머신러닝과 통계 분석에서 중요한 개념 중 하나로, **모델이 실제로는 부정 클래스**(Negative) **인 사례를 잘못되어 양성 클래스**(Positive) **로 예측한 경우**를 의미합니다...
# ACF ## 개요 ACF(Autorrelation Function, 자기관함수)는 시계열 분석에서 중요한 개념 중 하나로, **한 시계열 데이터 내에서 서로 다른 시점의 관측값 사이의 상관관계 측정하는 함수**입니다 시계열 데이터는 시간에 따라 순차적으로 수집된...
# ACF 플롯 ## 개요 ACF 플롯utocorrelation Function Plot), 즉자기상관 함수 플롯**은 시계열 분석에서 핵심적인 시각화 도구 중 하나입니다. 이 플롯은 시계열의 각 시점 간 상관관계를 나타내며, 특히 과거 관측값이 현재 관측값에 어떤...
# 외생 변수 ## 개요 외생 변수(外生變數, exogenous variable)는 통계학, 특히 회귀분석과 계경제학에서 중요한 개념 중 하나로, 모델 외부에서 결정되며 분석 대상인 모델 내부의 변수에 영향을 미치지만, 모델 내부의 다른 변수로부터 영향을 받지 않는...
# 예측 정확도 평가 예측 정확도가는 데이터과학에서 머신러닝 모델이나 통계 모델의 성능을 판단하는 핵심 과정이다. 모델이 학습된 후, 새로운 데이터에 대해 얼마나 정확하게 예측하는지를 평가함으로써 모델의 신뢰성과 실용성을 판단할 수 있다. 특히 분류, 회귀, 시계열 ...
# 시계열 예측 ## 개요 **시계열 예측**(Time Series Forecasting)은 시간에 따라 순차적으로 수집된 데이터를 기반으로 미래의 값을 예하는 데이터 과학의 핵심법 중 하나입니다. 이법은 경제표, 주가,상 데이터, 판매량 웹 트래픽 등 시간의 흐름...