Min-Max 정규화
Min-Max 정규화 개요 Min-Max 정규화(Min-Max Normalization)는 데이터 과학 및 머신러닝 분야에서 널리 사용 데이터 정제(Data Preprocessing) 기법 중 하나로, 수치형 변수의 스케일을 일정한 범위로 조정하는 정규화(Normali…
Min-Max 정규화 개요 Min-Max 정규화(Min-Max Normalization)는 데이터 과학 및 머신러닝 분야에서 널리 사용 데이터 정제(Data Preprocessing) 기법 중 하나로, 수치형 변수의 스케일을 일정한 범위로 조정하는 정규화(Normali…
Min-Max Scaling Min-Max Scaling은 데이터 과학과 기계 학습 분야에서 널리 사용되는 규화(Normalization) 기법 중 하나로,의 범위를 일정한 구간(보통 0에서 1 사이)으로 조정하는 방법입니다. 이 기법은 각 특성(feature)의 스케…
Time Series Cross-ValidationTime Series Cross-Validation(시계 교차 검증은 시계열 데이터 특화된 모 평가 기법, 일반적인 교차 검증(Cross-Validation) 방식이 가정하는의 독립성 동일 분포(i.d.) 조건이 시계열…
학습 데이터 개요 학습 데이터(Training Data)는신러닝(Machine Learning) 인공지능I) 모델을 훈련시키기 위해 사용되는 세트를 의미합니다. 이 데이터는델이 특정 작업(예: 이미지 분류, 자연 이해, 예측 등)을 수행할 수 패턴을 학습하는 데 핵심적…
Topological Data Analysis 개요 Topological Data(TDA, 위상 데이터석)는 데이터의 형상(형태과 구조를 위상수학의 원리를 활용해 분석하는 데이터 과학의 한 분야입니다. 전적인 통계적 방법이나 머신러닝 기법이 주로 데이터의 수치적 관계나…
Unsqueezing Unsqueezing(언스퀴징)은 데이터 과학과 머신러닝, 특히 텐서(Tensor)반 프로그래밍에서 자주 사용되는 데이터 변환 기법 중 하나입니다. 이는 기존의 차원이 축소된 텐서에 새로운 차원을 추가하여 형태를 확장하는 작업을 의미하며, 주로 텐…
고차원 데이터 고차원 데이터(High-dimensional Data는 변수(특징)의가 관측치샘플)의 수보다 훨씬 많은 데이터를 의미합니다. 이러한는 현대 데이터 과학, 특히 생물정보학, 이미지 처리,어 처리, 금융 분석 등 다양한 분야에서 자주 등장하며, 분석의 복잡성…
학술 논문 그래 개요 학술 논문 그래프(Academic Paper Graph)는 학술 논문 간의 관계를 그래프 구조 표현한 데이터 모델이다. 이는 각 논문 노드(Node)로, 인용(Citation), 공저(Co-authorship), 주제 유사성(Thematic Sim…
군집 샘플링군집 샘플링(Cluster Sampling은 통계학 데이터과학 분야에서리 사용되는 확률표본추출 방법 중 하나로, 전체 모집단을 자연스럽게 형성된 군집(Cluster)으로 나누, 이 군집들 중 일부를 무작위로 선택하여 표본으로 추출하는 방식입니다. 이 방법은 …
PyData 개요 PyData는 파이(Python)을반으로 데이터 과학, 머신러닝, 통계 분석, 데이터 엔지니어링 다양한 데이터 관련 작업을 수행하는 데 사용되는 오픈소스 생태계와 커뮤니티를 총칭하는 용어입니다. PyData는 단순한 도구의 집합을 넘어서, 데이터 과학…
TF-IDF 개 TF-IDF(Term Frequencyverse Document Frequency) 자연어 처리(NLP와 정보 검색Information Retrieval) 분야에서 널 사용되는 텍스트 데이터의 중요도를 수치화하는 가중치 기입니다. 이은 특정 단어(ter…
OneHotEncoder 요 OneHotEncoder는 머신러닝 및 데이터 과 분야에서 범주형 데이터(c data)를 모이 처리할 수 있는 수치 형태로 변환 위해 사용되는 전처리 도구입니다. 사이킷런(Scikit-learn 라이브러리에서 제공하는 sklearn.prep…
해싱 트릭 개요 해싱 트(Hashing Trick)은 기 학습 및 데이터 과학 분야 고차원의 범주형 데이터를 효율적으로 처리하기 위한 기술이다. 특히 자연어 처리(NLP)나 대규모 범주형 피처를 다룰 때, 원-핫 인코딩(Oneot Encoding)과 같은 전통적인 인코…
샘플링 개요 샘플링()은 전체 모집(Population)에서 일부 선택하여 그 특성을 조사함으로써 모단의 성질을 추정하는 통계적 방법이다. 현실 세계 모든 데이터를 수집하거나 분석하는 것은 비용, 시간 자원 등의 제약으로 인해 불능한 경우가 많기 때문에, 데이터과학에서…
모델 해석성 개요 모델 해석성(Model Interpretability)은 머신러닝 및 데이터과학 분야에서 모델이 예측을 내놓는 과정을 인간이 이해할 수 있도록 설명하는 능력을 의미합니다. 특히 복잡한 알고리즘(예: 딥러닝, 부스팅 모델 등)이 사용되는 경우, 모델의 …
오버샘플링 개요 오버샘플(Over-sampling은 기계 학습 데이터 과학 분야에서불균형 데이터(imbalanced data) 문제를 해결하기 위해 사용되는 데이터 전 기법 중 하나. 불균형란 특정 클래스의 샘플 수가 다른에 비해 현히 적은 경우를 말하며, 이는 분류 …
평균 절대 오 개요 평균 절대 오차(Mean Absolute Error, MAE)는 회귀 분석에서 예 모델의 성능을 평가하는 대표적인 지표 중입니다. MAE는 예측값과 실제 관값 사이의 차이, 즉 오차(error)의 절대값을 평균한 값으로, 모델이 평균적으로 얼마나 큰…
MSE 개요 MSE(Mean Squared Error, 평균 제곱 오차)는 회귀 분석에서 예측 모델의 정확도를 평가하는 데 널리 사용되는 지표입니다. 이 값은 예측값과 실제 관측값 사이의 차이(오차)를 제곱한 후, 그 평균을 계산함으로써 모델의 전반적인 오차 크기를 수…
ROC 곡선 개요 ROC 곡선(Receiver Operatingistic Curve, 수기 운영 특성 곡선)은 이진류 모델의 성능을각적으로 평가하고 비교하는 데 사용되는 중요한 도입니다. ROC 곡선은 다양한 분류 임계값(threshold)에 민감도(감지율, 재현율)와…
TN 개요 TN(True Negative, 참 음성)은 통계학 및 기계학습에서 분류 모델의 성능을 평가하는 데 사용되는 혼동 행렬(Confusion Matrix)의 네 가지 기본 요소 중 하나입니다. TN은 모델이 '음성 클래스(Negative class)'로 올바르게…