Supervised Fine-tuning (지도 미세 조정) Supervised Fine-tuning(SFT, 지도 미세 조정)은 대규모 언어 모델(Large Language Model, LLM)이나 다른 딥러닝 모델을 특정 작업이나 도메인에 맞게 전문화시키기 위해, 레이블이 지정된 데이터셋을 사용하여 사전 학습된 모델의 가중치를 추가로 학습시키는 과정입니…
검색 결과
"Supervised Fine-tuning"에 대한 검색 결과 (총 4개)
편향 완화 (Bias Mitigation) 1. 개요 편향 완화(Bias Mitigation)란 인공지능(AI) 모델이 학습 데이터나 알고리즘 설계 과정에서 습득한 특정 집단에 대한 편향된 판단이나 차별적인 결과를 최소화하여, 모델의 공정성(Fairness)과 신뢰성을 확보하는 기술적·정책적 과정을 의미한다. AI 모델의 편향은 단순히 기술적인 오류를 넘어…
딥러닝 기반 언어 모델 (Deep Learning-based Language Model) 1. 개요 딥러닝 기반 언어 모델은 인공신경망을 이용하여 단어 시퀀스의 확률 분포를 학습함으로써, 주어진 텍스트 다음에 올 단어를 예측하거나 문장의 의미를 수치적으로 표현하는 인공지능 모델이다. 과거의 통계적 방식에서 벗어나 대규모 데이터와 심층 신경망을 결합함으로써 …
RLHF 개요 RLHF(Reinforcement Learning from Human Feedback, 인간의 피드백을 통한 강학습)은 인공지능, 특히 자연어 처리(NLP) 분야에서 모델의 출력 품질을 향상시키기 위해 사용되는 학습 기법입니다. 이은 인간이 모델의 출력 결과에 대해 선호도를 평가하고, 그 피드백을 기반으로 강화학습 알고리즘을 통해 모델을 보정…