Amazon Nova의 선택적 잊기 기능 소개
Teaching models to forget: Selective unlearning with Amazon Nova
Amazon Nova의 Customizable Content Moderation Settings (CCMS)는 고객이 승인된 정책 영역에서 모델의 콘텐츠 모더레이션 안전 장치를 선택적으로 조정할 수 있도록 한다. 이 과정에서 Reverse Direct Preference Optimization (rDPO)라는 새로운 잊기 기법을 사용하여 모델의 과도한 콘텐츠 차단을 줄이고 모델 품질을 유지한다. CCMS는 안전성, 민감한 콘텐츠, 공정성, 보안의 네 가지 책임 있는 AI(RAI) 기둥을 포함하여 고객이 특정 정책을 잊도록 훈련된 LoRA 어댑터를 제공한다.
CCMS는 고객이 승인한 정책 영역에서 콘텐츠 생성의 유연성을 높일 수 있도록 지원한다.
원문 출처
AWS Machine Learning Blog