LLM (거대 언어 모델) 1. 개요 LLM(Large Language Model, 거대 언어 모델)은 방대한 양의 텍스트 데이터를 학습하여 인간과 유사한 자연어를 이해하고 생성할 수 있도록 설계된 인공신경망 기반의 딥러닝 모델이다. 여기서 '거대(Large)'함은 크게 두 가지 측면을 의미한다. 첫째는 파라미터(Parameter, 매개변수)의 수로, 모델…
검색 결과
"LLM"에 대한 검색 결과 (총 345개)
패딩 개요 패딩(padding)은 데이터 분석 및 기계 학습에서 입력 데이터의 크기를 조정하거나 특정 처리 과정에 맞게 데이터를 확장하는 기법입니다. 주로 이미지 처리, 시계열 분석, 신경망 모델 구축 등 다양한 영역에서 활용되며, 데이터의 경계 정보 유지, 모델 성능 향상, 차원 일치 등을 목적으로 합니다. 패딩은 단순히 데이터를 확장하는 것이 아니라, …
리팩토링 리팩토링(Refactoring)은 소프트웨어 개발 과정에서 기존 코드의 외부 동작을 변경하지 않으면서 내부 구조를 개선하는 작업을 의미합니다. 이는 코드의 가독성, 유지보수성, 확장성을 높이기 위한 핵심 기술 중 하나로, 현대 소프트웨어 유지보수의 핵심 실천 방법으로 널리 사용되고 있습니다. 리팩토링은 단순한 코드 정리 이상의 의미를 가지며, 시스…
C4 (Colossal Clean Crawled Corpus) 개요 C4 (Colossal Clean Crawled Corpus)는 구글(Google)이 T5(Text-to-Text Transfer Transformer) 모델의 사전 학습(Pre-training)을 위해 구축한 대규모 정제 텍스트 데이터셋이다. 웹상의 방대한 데이터를 수집하는 Common …
스트리밍 오류 LLM 서비스에서 응답을 받을 수 없습니다.
SSH 개요 SSH(Secure Shell)는 네트워크 환경에서 보안 통신을 제공하는 클라이언트-서버 프로토콜입니다. 사용자 인증, 데이터 암호화, 무결성 검증을 통해 안전한 원격 접속 및 명령 실행이 가능하도록 설계되었습니다. Telnet, FTP 등 기존 비보안 프로토콜의 대안으로 개발되었으며, 현재 클라우드 인프라, DevOps, 시스템 관리 등 다양…
클라이언트 인증서 (Client Certificate) 1. 개요 클라이언트 인증서란 SSL/TLS 프로토콜 환경에서 서버가 클라이언트(사용자 또는 기기)의 신원을 확인하기 위해 요구하는 디지털 인증서이다. 일반적인 웹 브라우징에서 사용하는 서버 인증서(Server Certificate)가 "접속한 사이트가 신뢰할 수 있는 곳인가"를 확인하는 용도라면, 클…
어휘 사전 (Vocabulary) 1. 개요 어휘 사전(Vocabulary)이란 자연어 처리(NLP)에서 모델이 처리할 수 있는 모든 고유한 토큰(Token, 텍스트의 최소 의미 단위)의 집합을 의미하며, 텍스트 데이터를 컴퓨터가 이해할 수 있는 수치형 벡터로 변환하기 위한 기초 매핑 테이블 역할을 한다. 2. 어휘 사전 구축 과정 어휘 사전 구축은 원시 …
BERT 개요 BERT(Bidirectional Encoder Represent from Transformers)는어 처리(NLP)야에서 혁신적인과를 이룬러닝 기반 언어 모델로, 구글(Google) 연구팀이 2018년에 발표한 머신러닝 모델이다. BERT는 이전의 단방향 언어 모델들과 달리 양방향 컨텍스트(Bidirectional Context)를 활용하여…
스트리밍 오류 LLM 서비스에서 응답을 받을 수 없습니다.
특성 맵 (Feature Map) 1. 개요 특성 맵(Feature Map)이란 합성곱 신경망(CNN, Convolutional Neural Network)에서 입력 데이터에 필터를 적용하여 특정 시각적 특징(특성)이 활성화된 위치와 강도를 나타낸 텐서(Tensor) 형태의 데이터를 의미한다. CNN의 핵심은 이미지의 공간적 구조를 유지하면서 유의미한 패턴…
스트리밍 오류 LLM 서비스에서 응답을 받을 수 없습니다.
모델 다양성 (Model Diversity) 1. 개요 모델 다양성(Model Diversity)이란 [[앙상블 학습]](Ensemble Learning) 시스템 내에서 결합되는 개별 학습 모델들이 서로 다른 예측 패턴을 가지거나, 서로 다른 종류의 오류를 범하는 정도를 의미한다. 앙상블 학습은 여러 개의 [[약한 학습기]](Weak Learner)를 결합…
프롬프트 기반 인터페이스 (Prompt-based Interface) 1. 개요 프롬프트 기반 인터페이스(Prompt-based Interface, 이하 LUI: Language User Interface)란 사용자가 자연어(Natural Language) 형태의 지시문인 '프롬프트'를 입력하여 시스템의 동작을 제어하고 원하는 결과물을 얻어내는 상호작용 방…
데이터 과학 (Data Science) 1. 개요 데이터 과학(Data Science)은 정형 및 비정형 데이터로부터 유의미한 통찰(Insight)과 지식을 추출하기 위해 수학, 통계학, 컴퓨터 과학 및 도메인 지식을 융합하여 활용하는 다학제적 분야이다. 현대 사회에서 데이터 과학은 단순한 통계 분석을 넘어, 방대한 양의 데이터(Big Data)를 처리하고…
생성 능력 (Generative Capability) 1. 개요 생성 능력(Generative Capability)이란 인공지능이 학습 데이터에 내재된 확률적 패턴과 구조(즉, 데이터 간의 관계를 확률적으로 모델링하거나 통계적 특성을 학습하는 것)를 파악하여, 기존에 존재하지 않았던 새로운 데이터 샘플(텍스트, 이미지, 오디오, 비디오 등)을 만들어내는 능…
스트리밍 오류 LLM 서비스에서 응답을 받을 수 없습니다.
중복 데이터 제 개요데이터 정제(Data Cleaning)는 데이터 분석 및 머신러닝 모델 개발 과정에서 매우 중요한 전처리 단계입니다. 과정에서 데이터의 품질을 높이고, 분석 결과의 신뢰성을 확보하기 위해 다양한 문제를 해결합니다. 그중 중복 데이터 제거(Deduplication)는 동일하거나 매우 유사한 데이터 레코드가 여러 번 존재하는 현상을 식별하고…
AMD EPYC Genoa AMD EPYC Genoa는 AMD(Advanced Micro Devices)가 2022년 11월에 출시한 제3세대 EPYC 서버 프로세서 라인업의 코드명입니다. 이 프로세서는 AMD의 차세대 Zen 4 마이크로아키텍처를 기반으로 하며, AM5 소켓을 사용하여 데스크톱 및 서버 플랫폼 간의 아키텍처 통합을 이루었습니다. Genoa…
중간자 공격(MITM) 중간자 공격(Man-in-the-Middle Attack, 줄여서 MITM)은 네트워크 보안에서 해커가 두 당사자 간의 통신 경로를 가로채어 정보를 도청하거나 데이터를 변조하는 사이버 공격 기법을 의미합니다. 이 공격의 핵심은 통신 중인 양쪽 당사자가 제3자(해커)가 개입되어 있다는 사실을 인지하지 못하도록 하는 것입니다. 마치 두 …