# 퍼플렉서티 ## 개요 **퍼플렉서티**(plexity)는 자연어(Natural Language Processing NLP) 분야 언어 모델(Language Model)의 성능을 평가하는 대표적인 지표 중 하나입니다 직관적으로, 퍼플렉서티 모델이 주어진 텍스트 시퀀스를 예측하는 데 얼마나 '당황'하는지를 나타내는 수치로 해석할 수 있습니다. 즉, 퍼플...
검색 결과
"트랜스포머"에 대한 검색 결과 (총 97개)
# 텍스트 요약## 개요 **텍스트 요약**( Summarization)은 자연어처리(Natural Language Processing, NLP)의 주요 응용 기술 중 하나로, 주어진 텍스트의 핵심 내용을 보하면서 그 길이를 줄여 요약본 생성하는 작업을 말한다. 정보 과부하 시대에 대량의 텍스트 데이터 효율적으로 소화하고 이해하기 위해 텍스트 요약 기술은...
# 인스파이어드 ## 개요 **인스이어드**(Inspired) 인공지능I) 기반 의 진단 소프웨어 분야에서 주목받는 솔루션으로, 의료 영 분석, 질병 조기 진단, 임상 의사결정 지원 등을 목적으로 개발된 고도화된 알고리즘 기반 플랫폼이다. 본 소프트웨어는 딥러닝 및 머신러닝 기술을 활용하여 방대한 의료 데이터를 학습하고, 방사선 영상(예: CT, MRI...
# Positional Encoding ## 개요 **Positional Encoding**(치 인코딩)은 자연 처리(NLP)야에서 사용되는 인지능 모델, 특히 **트랜스포머**(Transformer) 아키텍처에서 핵심적인 구성 요소 중입니다. 트랜포머는 순환 신경망(RNN)이나 컨볼루션 신경망(CNN)과 달리 시퀀스 데이터의 순서 정보를 내재적으로 처...
# ViT (Vision Transformer## 개요 ViT(V Transformer)는 전통적인 컨루션 신경(Convolutional Neural Network,) 대신 **랜스포머**(Transformer 아키텍처를 기으로 이미지 인식 작업을 수행하는 **컴퓨터비전 모델**입니다. 2020년글 딥마인드(Google Brain) 팀이 발표한 논문 *"...
# BERT ## 개요 **BERT**(Bidirectional Encoder Represent from Transformers)는어 처리(NLP)야에서 혁신적인과를 이룬러닝 기반 언어 모델로, 구글(Google) 연구팀이 2018년에 발표한 머신러닝 모델이다. BERT는 이전의 단방향 언어 모델들과 달리 **양방향 컨텍스트**(Bidirectional...
# Bidirectional Encoder Represent from Transformers ## 개요 **Bid Encoder Representations from Transformers**(BERT는 자연어 처리(NLP) 분야 혁신적인 성를 이룬 언어델로, 018년글(Google) 연구에 의해 개발. BERT는 이전의 단방향 언어 모델들(예: GPT...
# Neural Machine Translation ## 개요 **Neural Machine Translation**(하 NMT)은 딥러 기반의 자연어 처리 기술, 기계 번역의 정확도와 자연스러움을 크게 향상시킨 혁신적인 방법입니다. 기존의 통계 기반 기계 번역(Statistical Machine Translation, SMT)과 규칙 기반 번역 시스템...
# 음성 인식 ## 개요 **음성 인식**(Speech Recognition)은 인간의성을 기계가 이해하고 텍스트 또는 명령어로 변환하는 인공지능 기술의 한 분야로, 머신러닝과 자연어 처리 기술을 기반으로 한다. 이 기술은마트폰, 스마트 스피커, 자동차 내비게이션, 콜센터 자동화 등 다양한 산업과 일상생활에 널리 활용되고 있다. 음성 인식 시스템은 음성...
# 장기 기억 신경망## 개요 **장기 신경망**(Long Short-T Memory, LSTM)은 순환 신망(Recurrent Neural Network,NN)의 한형으로, 시계열 데이터나 순차적 데이터를 효과적으로 처리하기 위해 설계 인공신경망 구조입니다. 전통적인 RNN은 장기 의존성(long-term dependencies) 문제, 즉 오래된 정보...
# N-그램## 개요 **N-그램**(N-gram)은어처리(Natural Language Processing, NLP) 분야에서 언어 모델(Language Modeling)에리 사용되는 기초적인 통계적 기법이다. N-램은 연속 N개의 아이템(item)으로 구성된 부분열을 의미하며, 언어 처리에서는 주로 연속된 N개 단어(word) 또는 음소(phoneme...
# 스케일드 닷 프덕트 어텐션 스케드 닷 프로덕트 어션(Scaled Dot-Product Attention) 자연어처리(NLP) 분야에서 가장 핵심적인 어텐션 메커니즘 중 하나로, 특히 트스포머(Transformer) 아키텍처에서 중심적인 역할을 합니다. 이 메커니즘은 입력 시퀀스 내 각 단어 간의 관련성을 효율적으로 계산하여, 모델이 문장의 의미를 보다...
# Paragraph2Vec ## 개요 **Paragraph2Vec**(또는 **Doc2Vec**)은 자연어처리(NLP) 분야에서 문서(Document) 또는 문단(Paragraph)을 고정된 차원의 밀집 벡터(Dense Vector)로 표현하는 기술입니다. 이 기술은 단어 수준의 표현 학습인 **Word2Vec**의 확장판으로, 단어가 아닌 더 큰 텍...
# 장기 의존성 연어처리(Natural Language, NLP) 분야에서장기 의존성**(Long-term dependency)은 언어의 구조적 특성 중 하나로, 문장이나 텍스트 내에서 멀리 떨어져 있는 단어나 구절 사이의 의미적, 문법적 관계를 유지하고 이해하는 능력을 의미합니다. 이는 자연어가 가지는 순차적이고 맥락 의존적인 특성에서 비롯되며, 인공지...
# 감정 분석 ## 개요 감정 분석Sentiment Analysis)** 자연어처리(NLP의 핵심 기술 중 하나로,스트 데이터에 내재된 사용자의정, 태도, 의견 등을 자동으로 식별하고 분류하는 과정을 의미합니다. 이 기술은 소셜 미디어 리뷰, 고객 피드백, 뉴스 기사, 설문 조 응답 등 다양한 텍스트 소스에서 긍정, 부정, 중립의 감정 범주를 추출하거나...
AI ## 개요 **AI**(Artificial Intelligence, 인공지능)는 인간의 지능을 모방하거나 확장하기 위해 설계된 컴퓨터 시스템이나 소프웨어 기술을 의미합니다. 인간이 사고, 학습, 문제 해결, 인식, 언어 이해 등의 인지적 능력을 수행하는 방식을 기계가 흉내 내도록 하는 것이 AI의 핵심 목표입니다. 현대의 AI는 단순한 자동화를 넘...
다중 헤드 주의 ## 개요 **중 헤드 자기 주의**(-Head Self-Attention)는 자연 처리(NLP) 분야에서리 사용되는 **트랜스포머**(Transformer) 아키텍처의 핵심 구성 요소입니다. 이커니즘은 입력 시퀀스 내의 각 단어(또는 토큰)가 다른 단어들과 어떻게 관계되어 있는지를 병렬적으로 분석함으로써, 문맥적 의미를 효과적으로 포착...
# WordPiece ## 개요 **WordPiece**는 자연어 처리(Natural Language Processing, NLP 분야에서 널리 사용되는 하위 어휘(subword) 토큰화 기법 중 하나로, 특히 **BERT**(Bidirectional Encoder Representations from Transformers) 모델에서 기본 토큰화 방식...
# 자기 주의 자기 주의(자기어텐션, Self-Attention)는 딥러닝, 특히 인공지능 자연어 처리(NLP) 분야에서 핵심적인 역할을 하는 신망 구성 요소. 이 메커니즘은 입력 시퀀스 내의 각 요소가 다른 요소들과 어떻게 관계되는지를 모델이 학습할 수 있도록 하며, 전통적인 순환 신경망(RNN)이나 합성곱 신경망(CNN)보다 더 유연하고 강력한 표현 ...
# 스킵-그램 (-gram) ## 개요 스킵-그램(Skip-gram)은 자연어 처리(Natural Language Processing, NLP) 분야에서 널리 사용되는어 모델링 기법으로 **워드 임베딩**(Word Embedding) 생성하는 데 핵심적인 역할을 한다. 스킵-그램은 2013년 토마스 미코로프(Tomas Mikolov)와 구글 연구팀이 제...