Lipi-Ghor, 885시간 규모 다화자 벵골어 음성 말뭉치와 구축 파이프라인 공개
Lipi-Ghor: A Large-Scale, Diarized, Multi-Domain Bengali Speech Corpus and a Scalable Pipeline for Building It
벵골어 음성 연구용 공개 자원이 짧은 낭독·크라우드소싱 음성에 머물러 있다는 문제를 다룬 연구로, 998개 YouTube 영상 885시간 분량의 Lipi-Ghor 말뭉치를 소개한다. 이 말뭉치는 화자 분리(diarization)와 장문 오디오 주석을 함께 제공하는 첫 벵골어 음성 자원이라고 밝혔다. Lipi-Ghor는 596개 채널에서 가져온 998개 영상으로 구성되며, 오디오북·드라마·종교 설교·뉴스·지역 방언 등 17개 도메인을 포함한다. 각 녹음은 화자(Speaker), 음성(Speech), 전사(Transcription), 타임스탬프(Timestamp)로 이루어진 SSTT 형식으로 주석이 달렸고, 자동 화자 분리 결과와 벵골어 YouTube 자막 트랙을 결합해 만들었다. 연구진은 자막 기반 정답이 noisy하다는 점을 감안해 17명의 자원봉사 주석자가 30시간 동안 human-in-the-loop 방식으로 교정한 골드 평가 분할도 공개했다. 네 가지 널리 쓰이는 ASR 모델을 zero-shot과 미세조정 조건에서 벤치마크했으며, 네 모델 모두 감정 표현이 강한 음성, 방언, 장문 콘텐츠에서 성능이 일관되게 떨어졌다. 원본 제작물은 CC-BY-4.0으로 배포되고, 자막 파생 전사문은 연구 목적으로만 제공되며 원본 오디오는 재배포하지 않는다.
YouTube 자막이 충분한 다른 언어에도 같은 방식의 파이프라인을 적용할 수 있다고 제시되어, 영상 ID 목록·화자 분리 출력·파이프라인 코드를 활용한 저자원 언어 음성 데이터 구축에 참고가 된다.
원문 출처
arXiv cs.CL (계산언어학·NLP)