# Vision Transformer ## 개요 **Vision Transformer**(ViT)는 전통적으로 이미지 인 작업에서 지배적인 위치를 차지해온합성곱 신망**(CNN)과는 다른 접근 방식을 제시한 획기적인 인공지능 모델이다. 2020년 Research 팀이 발표한 논문 *"An Image is Worth 16x16 Words: Transfor...
검색 결과
"Transformer"에 대한 검색 결과 (총 99개)
# 인공지능 ## 개요 **인공지능Artificial Intelligence, AI)은 인간의 지능을 모방하거나 이를월하는 기계적 시스템을 설계하고 구현하는 컴퓨터 과학의 한 분입니다. 인공지능은 인간이 보이는 사고, 학습, 추론, 인식, 문제 해결, 의사 결정 등의 능력을 소프트웨어나 하드웨어를 통해 재현하는 것을 목표로 합니다. 최근 수십 년간 컴퓨...
# OOV (Out-Vocabulary) ## 개요 **OOV**(Out-ofocabulary)는 자연어처리(Natural Language Processing, NLP) 분야에서 자 등장하는 핵심 개념으로, 모델이 학습 과정에서 접하지 못한 단어를 의미합니다. 이는 특히 토큰화(tokenization) 단계 이후 모델의 어휘 집합(vocabulary)에...
# RNN ##요 RNN(Recurrent Neural Network 순환 신경)은 **시계 데이터**(time-series) 또는 **순적 데이터**(sequential data를 처리하기 위해계된 딥러 기반의 신경 모델입니다.적인 피드포워 신경망(for neural network)이 데이터 간의 시간적 순서적 관를 고려하지 반면, RNN **과거의를...
# 장기 기억 신경망## 개요 **장기 신경망**(Long Short-T Memory, LSTM)은 순환 신망(Recurrent Neural Network,NN)의 한형으로, 시계열 데이터나 순차적 데이터를 효과적으로 처리하기 위해 설계 인공신경망 구조입니다. 전통적인 RNN은 장기 의존성(long-term dependencies) 문제, 즉 오래된 정보...
# N-그램## 개요 **N-그램**(N-gram)은어처리(Natural Language Processing, NLP) 분야에서 언어 모델(Language Modeling)에리 사용되는 기초적인 통계적 기법이다. N-램은 연속 N개의 아이템(item)으로 구성된 부분열을 의미하며, 언어 처리에서는 주로 연속된 N개 단어(word) 또는 음소(phoneme...
# Sentence-BERT **Sentence-BERT**(SBERT)는 문장 단위의 의미를 효과적으로 인코딩하기 위해 개발된 **문장 임베딩**(sentence embedding)델로, 기존 BERT 모델의계를 보완하여 문장 간 유사도 계산, 의미 비교, 클러스터링, 검색 등 다양한 자연어처리(NLP) 과제에서 뛰어난 성능을 보여줍니다. SBERT는 ...
# 요약 생성 ## 개요 **요약 생성**(Summarization)은 자연어처리(NLP, Natural Language Processing) 분야의 핵심 응용 기술 중 하나로, 긴 텍스트의 핵심 정보를 보존하면서 더 짧고 간결한 형태로 재구성하는 작업을 말합니다. 이 기술은 정보 과잉 시대에 사용자가 방대한 텍스트 자료(예: 뉴스 기사, 학술 논문, ...
시간 영역 정규 **시간 영역 정규**(Time Domain Normalization, T)는 음성식 시스템에서 음성 신호의 시간적 변동성을 보정하기 위한 전처리 기법 중 하나이다. 인간의 발화 속도는 상, 감정, 개인 차이 등에 따라 크게 달라질 수 있으며, 이로 인해 동일한 단어나 문장이라도 길이가 다르게 나타날 수 있다. 시간 영역 정규화는 이러한 ...
# 스케일드 닷 프덕트 어텐션 스케드 닷 프로덕트 어션(Scaled Dot-Product Attention) 자연어처리(NLP) 분야에서 가장 핵심적인 어텐션 메커니즘 중 하나로, 특히 트스포머(Transformer) 아키텍처에서 중심적인 역할을 합니다. 이 메커니즘은 입력 시퀀스 내 각 단어 간의 관련성을 효율적으로 계산하여, 모델이 문장의 의미를 보다...
# Simultaneous Localization and Mapping ## 개요 **Simult Localization and Mapping**(AM, 동시 위치 추 및 맵핑) 로보틱스야에서 자율 내비게이션을 실현하기 핵심 기술 중 하나이다. 로봇이 사전에 알지 못하는 환경을 탐색할 때, 자신이 어디에 있는지를 추정(**자기 위치 추정, Localiz...
챗봇 ## 개요 **챗봇**(Chatbot)은공지능(A) 기술을 기반으로 사용자와 자연어를 통해 대화를 수행하는 소프트웨어 프로그램입니다. '채팅(Chat)'과 '로봇(Robot)'의 합성어로, 사용자의 질문이나 요청에 자동으로 응답하여 고객 서비스, 정보 제공, 업무 자동화 등 다양한 분야에서 활용됩니다. 최근 자연어처리(NLP, Natural Lan...
정규화 개요 **정규화Normalization)는 자연어처리(Natural Language Processing, NLP) 분야에서 원시 텍스트 데이터를 일관된 형식으로 변환하는 과정을 의미합니다. 텍스트 정규화는 언어의 다양한 표현 방식을 통일함으로써, 후속 처리 단계(예: 형태소 분석, 의미 분석, 기계 학습 모델 훈련 등)에서의 정확도와 효율성을 ...
# Vocabulary Augmentation 개요 **Vocabulary Augmentation어휘 증강)은 자연어(Natural Language Processing, N) 분야에서 언어 모델의 성능 향상을 위해 기존 어휘 집합(vocabulary)을 확장하거나 보완하는 기술을 의미합니다. 특히, 기계 번역, 텍스트 생성, 감성 분석, 질의 응답 시...
# 파인튜닝 **파인튜닝**(Fine-tuning)은 사전 훈련된(pre-trained) 머신러닝 모델을 특정 작업이나 도메인에 맞게 추가로 훈련하여 성능을 개선하는 기법입니다. 주로 딥러닝 기반의 대규모 모델, 특히 자연어 처리(NLP), 컴퓨터 비전(CV), 음성 인식 등에서 널리 사용되며, 전이 학습(Transfer Learning)의 한 형태로 간...
# 장기 의존성 연어처리(Natural Language, NLP) 분야에서장기 의존성**(Long-term dependency)은 언어의 구조적 특성 중 하나로, 문장이나 텍스트 내에서 멀리 떨어져 있는 단어나 구절 사이의 의미적, 문법적 관계를 유지하고 이해하는 능력을 의미합니다. 이는 자연어가 가지는 순차적이고 맥락 의존적인 특성에서 비롯되며, 인공지...
# Universal Sentence Encoder **Universal Encoder**(유니버설 문장 인코더, 이하 USE)는 구글이 개발한 자연어 처리(NLP) 모델로 문장을 고정된 차원의 의미 벡터(임베딩)로 변환하는 데 특화된 딥러닝 기반 임베딩 기술이다. 이 모델은 다양한 언어와 문장 구조에 대해 일반화된 의미 표현을 제공하며, 분류, 유사도 ...
단어 임베 ## 개요 **단어 임베딩**(Word Embedding)은 자연어처리(NLP, Natural Language) 분야에서 언어의 의미를 컴퓨터가 이해할 수 있도록 수치화하는 핵심 기술입니다. 전통적인 자연어처리 방식에서는 단어를 단순한 식별자(ID) 또는 원-핫 인코딩(One-hot Encoding)으로 표현하여 단어 간의 의미적 유사성을 반...
# 감정 분석 ## 개요 감정 분석Sentiment Analysis)** 자연어처리(NLP의 핵심 기술 중 하나로,스트 데이터에 내재된 사용자의정, 태도, 의견 등을 자동으로 식별하고 분류하는 과정을 의미합니다. 이 기술은 소셜 미디어 리뷰, 고객 피드백, 뉴스 기사, 설문 조 응답 등 다양한 텍스트 소스에서 긍정, 부정, 중립의 감정 범주를 추출하거나...
AI ## 개요 **AI**(Artificial Intelligence, 인공지능)는 인간의 지능을 모방하거나 확장하기 위해 설계된 컴퓨터 시스템이나 소프웨어 기술을 의미합니다. 인간이 사고, 학습, 문제 해결, 인식, 언어 이해 등의 인지적 능력을 수행하는 방식을 기계가 흉내 내도록 하는 것이 AI의 핵심 목표입니다. 현대의 AI는 단순한 자동화를 넘...