ORC (Optimized Row Columnar) 1. 개요 ORC(Optimized Row Columnar)는 Apache Hive를 위해 설계된 고성능 열 지향(Columnar) 저장 형식으로, 대규모 데이터 세트에 대해 효율적인 압축과 빠른 읽기 성능을 제공하는 바이너리 파일 포맷입니다. 빅데이터 환경에서는 수 페타바이트(PB) 이상의 데이터를 처리…
검색 결과
"Presto"에 대한 검색 결과 (총 4개)
GitHub 개요/소개 GitHub는 소프트웨어 개발자들이 협업하고 코드를 관리하는 데 사용되는 웹 기반 플랫폼이다. Git이라는 분산 버전 제어 시스템을 기반으로 하며, 2008년에 Tom Preston-Werner, Chris Wanstrath, P.J. Hyett 세 명의 개발자들에 의해 설립되었다. 2018년에는 마이크로소프트(Microsoft)에 …
빅데이터 (Big Data) 1. 개요 빅데이터란 기존의 데이터베이스 관리 도구로는 수집, 저장, 관리, 분석하기 어려울 정도로 방대한 양과 다양한 형태를 가진 데이터 집합, 그리고 이를 처리하고 분석하여 가치 있는 정보를 추출하는 기술을 의미한다. 전통적인 데이터가 주로 정형화된 수치나 텍스트 중심의 관계형 데이터베이스(RDBMS)에 저장되었다면, 빅데이…
대규모 데이터 처리 (Large-Scale Data Processing) 개요 대규모 데이터 처리(Large-Scale Data Processing)는 방대한 양의 데이터(빅데이터)를 효율적으로 수집, 저장, 분석 및 시각화하기 위한 기술적 접근법과 아키텍처를 포괄하는 개념입니다. 전통적인 단일 서버 기반의 데이터 처리 방식은 데이터의 볼륨(Volume),…