# 확률적 경사 하강법 ## 개요 **확적 경사 하강**(Stochastic Gradientcent, 이하 SGD은 머신러닝 데이터과학 분야에서 널리 사용되는 최적화 알고리즘 중 하나로, 손실(Loss Function)를 최화하기 위해 모델의 파라미터 반복적으로 업데이트하는 방법입니다. 특히 대규모 데이터셋을 처리할 때 전통적인 경사 하강법(Batch ...

# 샘플링 ## 개요 **샘플링**()은 전체 모집(Population)에서 일부 선택하여 그 특성을 조사함으로써 모단의 성질을 추정하는 통계적 방법이다. 현실 세계 모든 데이터를 수집하거나 분석하는 것은 비용, 시간 자원 등의 제약으로 인해 불능한 경우가 많기 때문에, 데이터과학에서는 샘플링을 통해 효율적이고 신뢰성 있는 분석을 수행한다. 샘플링은 사...

# 배열 인덱싱 **배열 인덱싱**(Arraying)은 데이터과학 및 프로그래밍에서 배열(또는 리스트, 벡터, 행렬 등) 내 특정 요소에 접근하기 위해 사용하는 기법입니다. 데이터를 효율적으로 처리하고 분석하기 위해서는 배열의 특정 위치에 있는 값을 정확하게 선택하거나 수정할 수 있어야 하며, 이 과정에서 인덱싱이 핵심적인 역할을 합니다. 본 문서에서는 ...

# Hadoop HDFS ## 개요 **Hadoop HDFSHadoop Distributed File System)는파치 하둡pache Hadoop)로젝트의심 구성 요소 중 하나, 대용량 데이터를 분산 환경에서 안정적이고 효율적으로 저장하기 위한 분산 파일 시스템입니다. HDFS는천 대의 일반적인 상용 하드웨어로 구성된 클러스터에서 페타바이트(PB) 규...

# 데이터 로딩 ## 개요 데이터 로딩은 소프트웨어 개발 및 버전 관리 시스템에서 데이터의 저장, 변경, 복원을 위한 핵심 프로세스입니다. 특히 버전관리(Version Control) 환경에서는 코드와 함께 데이터 파일도 추적해야 하며, 이 과정은 협업 효율성, 재현 가능성(reproducibility), 그리고 시스템 안정성을 보장합니다. 본 문...