arXiv发布Lipi-Ghor:首个大规模标注孟加拉语语音语料库
摘要:arXiv近日发布了一款名为Lipi-Ghor的孟加拉语语音语料库,这是首个涵盖大规模音频数据、说话人分离和长篇语音标注的孟加拉语语料库。该语料库包含885小时的音频数据,来源于998个YouTube视频,跨越17个领域,如有声书、戏剧、宗教布道、新闻和地方方言等。Lipi-Ghor采用SSTT格式(说话人、语音、转录、时间戳)进行标注,结合自动化说话人分离和YouTube字幕轨道,为低资源语言的研究提供了重要资源。
核心突破
Lipi-Ghor是首个大规模标注的孟加拉语语音语料库,填补了现有孟加拉语语音资源在长篇音频和说话人分离标注方面的空白。该语料库包含885小时的音频数据,来源于998个YouTube视频,涵盖17个领域,包括有声书、戏剧、宗教布道、新闻和地方方言等。
技术机制剖析
Lipi-Ghor采用SSTT格式进行标注,结合自动化说话人分离技术和YouTube字幕轨道。这种方法不仅提高了标注效率,还确保了数据的准确性和一致性。此外,语料库构建方法被设计为可复制的流水线,适用于任何有足够YouTube字幕资源支持的语言。
工程权衡与实测表现
尽管Lipi-Ghor在数据规模和标注质量上取得了显著进展,但自动化标注方法在处理情感化、地方口音和长篇内容时仍存在一定局限性。为此,研究团队还发布了一个由人工标注的黄金评估集,经过17名志愿者在30小时内的循环校正,确保了评估的可靠性。
开发者落地与部署建议
Lipi-Ghor的发布为孟加拉语语音识别(ASR)模型的开发和改进提供了宝贵的数据资源。开发者可以利用该语料库进行零样本学习和微调,以提升模型在情感化、地方口音和长篇内容处理上的表现。此外,研究团队建议在应用该语料库时,结合人工校正和领域特定数据,以获得更优的模型性能。
结论
Lipi-Ghor的发布标志着孟加拉语语音研究的重要里程碑,为低资源语言的研究提供了新的工具和方法。其构建方法的可复制性也为其他语言的类似资源开发提供了参考。
—— 完 ——消息来源:ArXiv NLP/LLM (cs.CL) (2026-10-28)
主题标签: #Lipi-Ghor #语音语料库 #孟加拉语 #ASR #低资源语言
编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。
社区整体评论区