다중 모달 분석 (Multimodal Analysis) 1. 개요 다중 모달 분석(Multimodal Analysis)이란 텍스트, 이미지, 오디오, 비디오, 센서 데이터 등 서로 다른 형태의 데이터 양식(Modality, 모달리티)을 통합적으로 처리하여 정보의 의미를 추출하고 분석하는 인공지능 기술이다. 인간이 시각, 청각, 촉각 등 다양한 감각 기관을 …
검색 결과
"ViT-Base"에 대한 검색 결과 (총 4개)
패치 임베딩 (Patch Embedding) 1. 개요 패치 임베딩(Patch Embedding)은 2차원 이미지 데이터를 트랜스포머(Transformer) 모델이 처리할 수 있는 1차원 시퀀스(Sequence) 형태의 벡터로 변환하는 전처리 과정이다. 본래 트랜스포머 아키텍처는 자연어 처리(NLP)를 위해 설계되어 텍스트 토큰의 시퀀스를 입력으로 받는다.…
Zero-Shot 분류 개요 Zero-shot 분류(Zero-Shot Classification, ZSC)는 머신러닝 및 인공지능 분야에서 훈련 데이터에 포함되지 않은 새로운 클래스를 식별하고 범주화하는 기술입니다. 기존 지도 학습이 레이블이 명시된 데이터를 통해 모델을 최적화하는 것과 달리, zero-shot 분류는 모델이 테스트 시점에 처음 접하는 미지…
ViT (Vision Transformer 개요 ViT(V Transformer)는 전통적인 컨루션 신경(Convolutional Neural Network,) 대신 랜스포머(Transformer 아키텍처를 기으로 이미지 인식 작업을 수행하는 컴퓨터비전 모델입니다. 2020년글 딥마인드(Google Brain) 팀이 발표한 논문 "An Image is Wo…