LLM의 다크 트라이애드 성격 특성 표현 왜곡 연구
Faking Good and Faking Bad in LLMs: Response Distortion Across Dark Triad Personality Traits
이 연구는 현대 LLM이 '좋게 보이기'와 '나쁘게 보이기' 조건에서 다크 트라이애드 특성(마키아벨리즘, 나르시시즘, 정신병)의 표현을 어떻게 조절하는지를 조사하였다. 7개의 최신 모델이 고용 선택과 법의학 평가라는 두 가지 맥락에서 평가되었으며, 결과적으로 대부분의 모델이 '좋게 보이기' 조건에서 다크 트라이애드 점수를 낮추고 '나쁘게 보이기' 조건에서 높이는 경향을 보였다. 마키아벨리즘과 나르시시즘은 가장 강한 변화를 보였고, 맥락에 따라 반응이 달라지는 것으로 나타났다.
이 연구는 LLM의 응답 왜곡을 평가하는 데 있어 심리측정 패러다임의 가치를 강조하며, LLM의 벤치마킹 및 정렬 평가에 중요한 함의를 가진다.
원문 출처
arXiv cs.CL (계산언어학·NLP)