Self-Attention

Self-Attention Self-Attention은 자연어처리(NLP) 분야에서 핵심적인 역할을 하는 자기 주의 메커니즘(Self-Attention Mechanism)으로, 입력 시퀀스 내 각 위치의 단어(또는 토큰)가 다른 위치의 단어들과의 관계를 동적으로 파악하…