Do language models know the distinctions between men and women? An insight into the relationships between gender and profession Through "Fill-Mask" task

언어모델도 남녀유별을 아는가? - 'Fill-Mask' 태스크로 보는 성별과 직업의 관계

  • Fei Li (Yonsei university, Institute of Language & Information Studies) ;
  • Choi Jaehyeon (Yonsei university, Institute of Language & Information Studies) ;
  • Kim Hansaem (Yonsei university, Institute of Language & Information Studies)
  • 비립 (연세대학교 언어정보연구원) ;
  • 최재현 (연세대학교 언어정보연구원) ;
  • 김한샘 (연세대학교 언어정보연구원)
  • Published : 2022.10.18

Abstract

본연구는 한국어 언어모델 트레이닝 단계에서 자주 사용되는 Fill-Mask 태스크와 직업 관련 키워드로 구성되는 각종 성별 유추 템플릿을 이용해 한국어 언어모델에서 발생하는 성별 편향 현상을 정량적으로 검증하고 해석한다. 결과를 봤을 때 현재 직업 키워드에서 드러나는 성별 편향은 각종 한국어 언어모델에서 이미 학습된 상태이며 이를 해소하거나 차단하는 방법을 마련하는 것이 시급한 과제이다.

Keywords