딥러닝 기반 언어 모델 (Deep Learning-based Language Model) 1. 개요 딥러닝 기반 언어 모델은 인공신경망을 이용하여 단어 시퀀스의 확률 분포를 학습함으로써, 주어진 텍스트 다음에 올 단어를 예측하거나 문장의 의미를 수치적으로 표현하는 인공지능 모델이다. 과거의 통계적 방식에서 벗어나 대규모 데이터와 심층 신경망을 결합함으로써 …
검색 결과
"Direct Preference Optimization"에 대한 검색 결과 (총 3개)
선호도 학습 (Preference Learning) 1. 개요 선호도 학습(Preference Learning)이란 개별 항목에 대한 절대적인 수치(Score)를 예측하는 대신, 두 개 이상의 항목 간의 상대적인 우선순위나 선호 관계를 학습하는 머신러닝의 한 분야이다. 일반적인 회귀(Regression) 모델이 "이 항목의 점수는 85점이다"라는 절대값을 …
Supervised Fine-tuning (지도 미세 조정) Supervised Fine-tuning(SFT, 지도 미세 조정)은 대규모 언어 모델(Large Language Model, LLM)이나 다른 딥러닝 모델을 특정 작업이나 도메인에 맞게 전문화시키기 위해, 레이블이 지정된 데이터셋을 사용하여 사전 학습된 모델의 가중치를 추가로 학습시키는 과정입니…