데이터 변동성 개요 데이터 변동성(Data Variability)은 통계학에서 데이터합 내 개별 관측값 평균 또는 중심 경향값에서 얼마나 퍼져 있는지를 나타내는 핵심 개념이다. 변동성은 데이터의 일관성, 안정성, 예측 가능성을 평가하는 데 중요한 역할을 하며, 기술통계(descriptive statistics)의 핵심 요소 중 하나이다. 변동성이 낮다는 것…

Bidirectional Encoder Represent from Transformers 개요 Bid Encoder Representations from Transformers(BERT는 자연어 처리(NLP) 분야 혁신적인 성를 이룬 언어델로, 018년글(Google) 연구에 의해 개발. BERT는 이전의 단방향 언어 모델들(예: GPT)과 달리 양방향 문…

필터 방법 개요필터 방법( Method)은 데이터과학, 특히 머신러닝과 통계 모델링에서 특성 선택(Feature Selection)을 수행하는 대표적인 기법 중 하나입니다. 이은 모델 훈련 과정에 의존하지 않고, 데이터 자체 통계적 특성만을 기반으로 각 특성의 중요도를 평가하여 불필요하거나 중복된 변수를 제거하는 것을 목표로 합니다. 필터 방법은 계산 비용…

WordPiece 개요 WordPiece는 자연어 처리(Natural Language Processing, NLP 분야에서 널리 사용되는 하위 어휘(subword) 토큰화 기법 중 하나로, 특히 BERT(Bidirectional Encoder Representations from Transformers) 모델에서 기본 토큰화 방식으로 채택되면서 그 중요성이…

연속형 개요 연속형(Continuous type은 데이터과학에서의 측정 방식과 값의 성격에 따라 분류하는 데이터 유형 중 하나로, 특정 구간 내에서 무한히 많은 값을 가질 수 있는 수치 데이터를 의미합니다. 연속형 데이터는 이산형 데이터와 대조되며, 주로 물리적 측정값(예: 길이, 무게, 온도, 시간 등)에서 나타납니다. 이 데이터 유형은 통계 분석, 머신…

BERT 요 BERT(Bidirectional Encoder Represent from Transformers)는글(Google)이 018년에 발표한 자연어 처리(N) 분야의 획기적인 언어 모델이다.ERT는 이전의 단방향 언어 모들과 달리 방향 맥락(bidirectional context)을 학습함으로써 단어의 의미를 보다 정확하게 이해할 수 있도록 설계되…

목표 변수 개 목표 변수(Target Variable)는 데이터 과학 및 머신러닝 분야에서 모델이 예측하거나 설명하려는 주요 변수를 의미합니다. 이는 종속 변수(Depend Variable), 응답 변수(Response Variable), 또는 출력 변수(Output Variable)라고도 불리며, 모델 학습의 중심이 되는 요소입니다. 데이터 전처리 과정에…

잔차 제곱합 개요 잔차 제곱합(Sum of Squared Residuals, SSR)은 회귀 분석에서 모델의 예측값과 실제 관측값 간의 차이를 정량적으로 평가하는 지표입니다. 이 값은 잔차(residual)를 제곱한 후 모든 관측치에 대해 합산한 것으로, 모델의 적합도를 판단하는 핵심 요소입니다. 잔차 제곱합이 작을수록 모델이 데이터에 잘 맞는다는 의미이며…