이상치 탐지 개요 이상치지(Outlier Detection)는 데이터학 및 통계 분석에서 중요한 역할을 하는 기법으로, 데이터 세트 내 다른 관측치와显著하게 다른 값을 가지는 데이터 포인트를 식별하는 과정을 의미한다. 이러한 데이터 포인트는 일반적인 패턴이나 분포에서 벗어나며, 때로는 측정 오류, 데이터 입력 실수, 혹은 진정한 특이 현상일 수 있다. 이상…
검색 결과
"이상치"에 대한 검색 결과 (총 183개)
재현성 개요 재현성(Reducibility)은 데이터 과학 및 연구 전반에서 핵심적인 원칙 중 하나로, 동일한 데이터, 코드, 환경, 조건 하에서 수행된 분석이 동일한 결과를 도출 수 있는 능력을합니다. 재현성 과학적 신성과 투명성을 보장하며, 연구 결과의 검증 가능성과 협업 효율성을 높이는 데 기여합니다. 특히 데이터 과학 분야에서는 대량의 데이터 처리,…
산술 평균 개요 술 평균(arithmetic mean)은계학에서 가장 기본적이고 널리 사용되는 평균의 형태 중 하나로, 주어진 데이터 집합의 모든 값을 더 후 그 개수로 나누어 얻는 대표값이다. 일반적으로 '평균'이라고 할 때 대부분 산술 평균을 의미하며, 데이터의 중심 경향(central tendency)을 파악하는 데 핵심적인 역할을 한다. 산술 평균은…
사기 탐지 개요 사기 탐지(Fraud Detection)는 금융 거래, 보험 청구, 전자상거래, 신용카드 사용 등 다양한 영역에서 부정행위를 식별하고 예방하기 위한 데이터과학 기반의 핵심 기술입니다. 특히 딥러닝, 머신러닝, 통계적 이상치 탐지 기법을 활용하여 정상적인 패턴에서 벗어난 비정상적인 행동이나 거래를 자동으로 감지하는 데 초점을 맞춥니다. 사기 …
히트맵 개요 히트맵(Heatmap)은 데이터 시각화 기법 중 하나로, 행렬 형태의 데이터를 색상의 밀도나 강도를 이용해 시각적으로 표현하는 그래프 유형입니다. 일반적으로 두 변수 간의 관계 또는 다차원 데이터의 분포를 한눈에 파악할 수 있도록 도와주며, 색상이 진할수록(또는 밝을수록) 특정 값이 높음을 나타냅니다. 히트맵은 데이터 과학, 통계 분석, 생물정…
Z-score 표준화 Z-score 표준화(Z-score Standardization)란 데이터의 평균을 0, 표준편차를 1이 되도록 변환하는 데이터 전처리 과정입니다. 서로 다른 척도(Scale)를 가진 변수들을 동일한 기준으로 비교하거나, 특정 값이 전체 데이터 분포에서 어느 정도 위치에 있는지 파악하는 것을 목적으로 합니다. 수식 및 원리 Z-scor…
R² 개요 R²(R-squared, 결정계수)는 통계학 및 기계학습에서 회귀 모델의 성능을가하는 대표 지표 중 하나입니다. R² 모델이 종속 변수(dependent variable)의 분산 중 얼마나 많은 부분을 설명할 수 있는지를 나타내는 값으로, 일반적으로 0에서 1 사이의 값을 가집니다. 이 값이 1에 가까울수록 모델이 데이터의 변동성을 잘 설명하고 …
다중 선형 회귀 다중 선형 회귀(Multiple Linear Regression)는 하나의 종속 변수(dependent variable)와 두 개 이상의 독립 변수(independent variables) 간의 선형 관계를 모델링하는 통계적 기법이다. 머신러닝과 통계학에서 널리 사용되며, 특히 수치 예측 문제(regression problems)에서 기본이…
주택 가격 예측 (House Price Prediction) 1. 개요 주택 가격 예측이란 머신러닝 기반의 회귀 분석을 통해 특정 주택의 가치를 예측하는 과정이다. 이 과정의 주된 목적은 과거의 거래 패턴과 주택의 물리적·환경적 특성 사이의 상관관계를 학습하여, 새로운 데이터가 입력되었을 때 정확한 가격을 산출하는 회귀(Regression) 모델을 구축하는…
홍수 위험 예측 1. 개요 홍수 위험 예측이란 기상 데이터, 지형 정보, 수문학적 특성을 분석하여 특정 지역에 홍수가 발생할 가능성과 그 규모를 사전에 추정하는 기술적 과정을 의미한다. 현대 사회에서 홍수 예측은 기후 변화로 인한 극한 강수 현상의 빈도를 높임에 따라, 신속한 대피 체계를 구축하고 인명 및 재산 피해를 최소화하기 위한 재난 관리의 핵심 요소…
데이터 편향 개요 데이터 편향(Data Bias)은 머신러닝 모델 훈련에 사용되는 데이터셋에 시스템적으로 왜곡된 패턴이 존재하는 현상으로, 모델의 예측 결과에 불공정성이나 오류를 유발할 수 있습니다. 이러한 편향은 데이터 수집, 전처리, 모델링 전 단계에서 발생할 수 있으며, 사회적 불평등을 심화시키거나 법적 문제를 야기할 수 있습니다. 예를 들어, 얼굴 …
총 거래 횟수 (Total Transaction Count) 총 거래 횟수(Total Transaction Count)란 특정 기간 동안 비즈니스 플랫폼 내에서 발생한 모든 개별 거래의 총합을 의미하는 정량적 지표이다. 1. 정의 및 개념 총 거래 횟수는 기업이 제공하는 상품이나 서비스가 고객에 의해 구매, 결제 또는 교환된 횟수를 단순 합산한 수치이다. …
실루엣 분석 (Silhouette Analysis) 1. 개요 실루엣 분석(Silhouette Analysis)은 군집 분석(Clustering) 결과가 얼마나 적절하게 이루어졌는지를 정량적으로 평가하는 내부 평가 지표(Internal Evaluation Metric)입니다. 군집 분석은 정답 레이블이 없는 비지도 학습(Unsupervised Learnin…
전역 정규화 (Global Normalization) 1. 개요 전역 정규화(Global Normalization)란 머신러닝 모델 학습 전, 데이터셋 전체의 통계량(평균, 표준편차, 최솟값, 최댓값 등)을 산출하여 모든 개별 데이터를 일정한 범위나 분포로 변환하는 데이터 전처리 기법이다. 이 과정의 주된 목적은 서로 다른 단위(Unit)나 스케일을 가진 …
MAE 개요 MAE(Mean Absolute Error, 평균 절대 오차)는 회귀(regression) 문제에서 예측값과 실제값 사이의 오차를 평가하는 대표적인 지표 중 하나입니다. 인공지능 모델, 특히 회귀 모델의 성능을 측정할 때 널리 사용되며, 오차의 절대값을 평균하여 계산하므로 해석이 직관적이고 이해하기 쉬운 장점이 있습니다. MAE는 예측 오차의 …
데이터 과학 (Data Science) 1. 개요 데이터 과학(Data Science)은 정형 및 비정형 데이터로부터 유의미한 통찰(Insight)과 지식을 추출하기 위해 수학, 통계학, 컴퓨터 과학 및 도메인 지식을 융합하여 활용하는 다학제적 분야이다. 현대 사회에서 데이터 과학은 단순한 통계 분석을 넘어, 방대한 양의 데이터(Big Data)를 처리하고…
다중 계절성 (Multiple Seasonality) 1. 개요 다중 계절성(Multiple Seasonality)이란 하나의 시계열 데이터 내에 서로 다른 주기를 가진 두 개 이상의 계절적 패턴이 동시에 존재하는 현상을 의미한다. 이러한 다중 계절성을 정확히 식별하고 모델링하는 것은 복잡한 시계열 데이터에서 노이즈를 제거하고 정확한 수요 예측과 자원 최적…
PDF 개요 PDF(Probability Density Function, 확률 밀도 함수)는 확론과 통계학 연속 확률 변수의 확률 분포를 설명하는 핵심 개념이다. 이 함수는 특정 값에서 확률 변수가 나타날 상대적 가능도를 나타내며, 확률 변수가 특정 구간에 속할 확률을 그 구간에서의 PDF의 적분을 통해 계산할 수 있다. PDF는 이산 확률 변수의 경우 사…
조화 평균 (Harmonic Mean) 조화 평균은 주어진 수들의 역수의 산술 평균을 구한 뒤, 다시 그 결과의 역수를 취하여 계산하는 평균값으로, 주로 비율이나 속도와 같이 단위당 기준이 변하는 값의 평균을 구할 때 사용됩니다. 정의 및 개념 조화 평균은 데이터 집합의 역수(Reciprocal, 어떤 수 에 대해 가 되는 수)들의 산술 평균의 역수로 정의…
예측 정비 (Predictive Maintenance, PdM) 예측 정비(Predictive Maintenance, PdM)란 [[상태 기반 정비]](CBM, Condition Based Maintenance)의 일종으로, 설비의 상태를 실시간으로 모니터링하고 데이터 분석을 통해 단순한 상태 감시를 넘어 미래의 고장 징후를 사전에 포착하여 최적의 시점에 …