# 언어 모델링 ## 개요 **언어 모델링**(Language Modeling)은 자연어처리(NLP, Natural Language Processing)의심 기술 중 하나, 주어진어 시퀀스(문장 또는 문맥)가 자연스러운 언어로 구성될 확률을 계산하는 작업을 말합니다. 즉, 언어 모델은 "어떤 문장이 인간 언어로 얼마나 자연스러운가?"를 수학적으로 평가하...
검색 결과
"arXiv"에 대한 검색 결과 (총 116개)
# AlexNet ## 개요 **AlexNet**은 인공지능, 특히 **컴퓨터비전**(Computer Vision) 분야에서 혁명적인 영향을 미친 심층 신경망Deep Neural Network)** 모이다. 212년에 알스 크리제브스키Alex Krizhev)**, 이오리츠케버**(Ilya Sutskever)**, 그리고 제프리 힌튼**(Geoffrey ...
# Bias Benchmark for QA ## 개 **Bias Benchmark for QA질문-응답 시스의 편향 평가 벤치마크)는 인공지능 기반 질문-응답(Question Answering, QA 모델에서 발생 수 있는 사회적,화적, 성, 인종적 편향을 체계적으로 평가하기 위해 설계된 벤치마크 데이터셋 및 평가 프레임워크입니다. 최근 대규모 언어 모...
# 3D 재성 ## 개요 **3D 재구성**(3D Reconstruction)은 2차원(2D)상 또는 영상 시퀀스로부터 물체나 장면의 3차원 구조 복원하는 기술로, 컴퓨터 비전, 의료 영상, 로봇 공학, 증강 현실(AR), 가상 현실(VR), 자율주행 등 다양한 분야에서 핵심적인 역할을 수행한다. 이 기술은 단일 카메라, 스테레오 카메라, 또는 다중 뷰...
# RLHF ## 개요 **RLHF**(Reinforcement Learning from Human Feedback, 인간의 피드백을 통한 강학습)은 인공지능, 특히 자연어 처리(NLP) 분야에서 모델의 출력 품질을 향상시키기 위해 사용되는 학습 기법입니다. 이은 인간이 모델의 출력 결과에 대해 선호도를 평가하고, 그 피드백을 기반으로 강화학습 알고리즘...
# Positional Encoding ## 개요 **Positional Encoding**(치 인코딩)은 자연 처리(NLP)야에서 사용되는 인지능 모델, 특히 **트랜스포머**(Transformer) 아키텍처에서 핵심적인 구성 요소 중입니다. 트랜포머는 순환 신경망(RNN)이나 컨볼루션 신경망(CNN)과 달리 시퀀스 데이터의 순서 정보를 내재적으로 처...
# ViT (Vision Transformer## 개요 ViT(V Transformer)는 전통적인 컨루션 신경(Convolutional Neural Network,) 대신 **랜스포머**(Transformer 아키텍처를 기으로 이미지 인식 작업을 수행하는 **컴퓨터비전 모델**입니다. 2020년글 딥마인드(Google Brain) 팀이 발표한 논문 *"...
# BERT ## 개요 **BERT**(Bidirectional Encoder Represent from Transformers)는어 처리(NLP)야에서 혁신적인과를 이룬러닝 기반 언어 모델로, 구글(Google) 연구팀이 2018년에 발표한 머신러닝 모델이다. BERT는 이전의 단방향 언어 모델들과 달리 **양방향 컨텍스트**(Bidirectional...
# EfficientNet EfficientNet은 구글(Google) 연구팀이2019년에 발표한 컨볼루션 신경망(Convolutional Neural Network,) 아키텍처, 정확도와산 효율성 사이의 최적 균형을 추하는 것을 목표로 설계되었습니다. 기존의 CNN 모델들이 네트워크의 깊이(depth), 너비(width), 해상도(resolution)를...
# Neural Machine Translation ## 개요 **Neural Machine Translation**(하 NMT)은 딥러 기반의 자연어 처리 기술, 기계 번역의 정확도와 자연스러움을 크게 향상시킨 혁신적인 방법입니다. 기존의 통계 기반 기계 번역(Statistical Machine Translation, SMT)과 규칙 기반 번역 시스템...
# 자동 번역 자동 번역(Automated Translation) 인간의 개입 없이 컴퓨터 시스템을 이용해 한 언어로 작성된 텍스트를 다른 언어로 변환하는 기술을 말합니다. 이는 자연어 처리(Natural Language Processing, NLP)의 핵심 분야 중 하나이며, 데이터과학과 인공지능(AI) 기술의 발전에 힘입어 최근 몇 년 사이 급속도로 ...
블랙박스 ## 개요 **블랙스 문제**(Black Box Problem)는공지능, 특히 딥러닝반 모델에서 자주 언급되는 핵심적인 윤리적·기술적 이슈로, AI 시스템이 특정 결정을 내리는 과정이 투명하지 않고 해석하기 어려운 현상을 의미한다. 이 용어는 시스템의 내부 동작을 관찰할 수 없고, 오직 입력과 출력만을 볼 수 있는 ‘블랙박스’에 비유하여 붙여졌...
희소성 ##요 자연어처리(NLP Natural Language Processing) 분야 **희소성**(sparsity)은 언어 데이터의 중요한 특 중 하나로, 고차원 벡터 공간에서 대부분의 요소가 0인 현상을 의미합니다. 이 특히 단어를 수 형태로 표현하는 **임베딩**(embedding) 기술의 초기 단계인 **희소 표현**(sparse repres...
# OOV (Out-Vocabulary) ## 개요 **OOV**(Out-ofocabulary)는 자연어처리(Natural Language Processing, NLP) 분야에서 자 등장하는 핵심 개념으로, 모델이 학습 과정에서 접하지 못한 단어를 의미합니다. 이는 특히 토큰화(tokenization) 단계 이후 모델의 어휘 집합(vocabulary)에...
# Sentence-BERT **Sentence-BERT**(SBERT)는 문장 단위의 의미를 효과적으로 인코딩하기 위해 개발된 **문장 임베딩**(sentence embedding)델로, 기존 BERT 모델의계를 보완하여 문장 간 유사도 계산, 의미 비교, 클러스터링, 검색 등 다양한 자연어처리(NLP) 과제에서 뛰어난 성능을 보여줍니다. SBERT는 ...
# 의료 진단델 의료 진단 모델(Mical Diagnosis Model)은 인공능 기술을 활용하여 환자의상, 검사 결과 의료 영상 유전자 정보 등의 데이터를 분석해 질병을 진단하거나 진단 보조하는 시스템입니다. 이 모델들은 최근 딥러닝, 머신러닝, 자연어 처리 기술 발전 덕에 의료 분야에서 빠르게 도입되고 있으며, 진단의 정확도 향상과 의료진의 업무 부담...
# 스케일드 닷 프덕트 어텐션 스케드 닷 프로덕트 어션(Scaled Dot-Product Attention) 자연어처리(NLP) 분야에서 가장 핵심적인 어텐션 메커니즘 중 하나로, 특히 트스포머(Transformer) 아키텍처에서 중심적인 역할을 합니다. 이 메커니즘은 입력 시퀀스 내 각 단어 간의 관련성을 효율적으로 계산하여, 모델이 문장의 의미를 보다...
# Paragraph2Vec ## 개요 **Paragraph2Vec**(또는 **Doc2Vec**)은 자연어처리(NLP) 분야에서 문서(Document) 또는 문단(Paragraph)을 고정된 차원의 밀집 벡터(Dense Vector)로 표현하는 기술입니다. 이 기술은 단어 수준의 표현 학습인 **Word2Vec**의 확장판으로, 단어가 아닌 더 큰 텍...
# 그래디언트 부스 회귀 ## 개요 **그래디언트 부스팅 회**(Gradient Boosting Regression)는 머신러닝에서 회귀(regression) 문제를 해결하기 위해 사용되는 강력한 앙상블 학습 기법입니다. 이은 여러 개의 약한 학습기(weak learners), 주로 결정 트리(decision tree)를 순차적으로 결합하여 강한 예측 ...
# Vocabulary Augmentation 개요 **Vocabulary Augmentation어휘 증강)은 자연어(Natural Language Processing, N) 분야에서 언어 모델의 성능 향상을 위해 기존 어휘 집합(vocabulary)을 확장하거나 보완하는 기술을 의미합니다. 특히, 기계 번역, 텍스트 생성, 감성 분석, 질의 응답 시...