ArXiv发布：自动化低资源多语言翻译数据管道与基线复现研究

摘要：ArXiv发布了一项关于低资源多语言翻译系统优化的研究，重点针对西西里语的小型神经机器翻译（NMT）系统进行改进。研究通过自动化数据管道构建、并行文本提取与过滤、基于语言无关编码器的句子对齐等方法，提升了翻译质量。实验表明，使用预训练NLLB模型结合低秩微调与反向训练策略，显著优于从头训练的Transformer模型，尤其在翻译成西西里语的方向上表现更佳。

---

研究背景与动机

近年来，多语言翻译系统在处理低资源语言时面临数据质量与数量不足的挑战。西西里语作为资源匮乏的语言，其翻译质量提升尤为困难。本研究旨在通过优化数据管道和模型训练策略，提升西西里语翻译系统的性能。

技术机制剖析

1. 数据管道自动化与并行文本提取

   • 研究团队重新开发了Wdowiak为西西里语定制的小型NMT系统，并基于维护的软件从双语期刊《Arba Sicula》的PDF中提取并行文本。
   • 通过语言无关的句子编码器进行句子对齐，并针对现有手工对齐结果调整阈值，过滤自动对齐中的典型错误。

2. 模型训练与优化

   • 将原始系统的tokenization和词尾偏向的子词分割移植到无Perl的实现中。
   • 比较了从头训练的Transformer模型与通过低秩微调适配的预训练NLLB模型。
   • 采用反向训练策略，先在网络西西里语的向前评分反向翻译上进行训练，再在精选的文学文本上进行训练。

3. 实验结果与评估

   • 预训练模型在所有方向上均优于从头训练的模型，尤其是在翻译成西西里语的方向上表现更佳。
   • 多语言适配器在未训练的方向上会降低性能，限制了其作为通用多语言模型的应用。

工程权衡与实测表现

• 优势：
  • 通过自动化数据管道和优化训练策略，显著提升了低资源语言的翻译质量。
  • 预训练模型结合反向训练策略，在资源受限环境下表现出色。
• 劣势：
  • 多语言适配器在未训练方向上的性能下降，限制了其通用性。
  • 自动化对齐方法仍存在误差，需要进一步优化。

开发者落地与部署建议

• 建议：
  • 在资源匮乏的语言翻译任务中，建议采用预训练模型结合低秩微调与反向训练策略。
  • 数据管道自动化和并行文本提取方法可推广至其他低资源语言，提升数据质量与数量。
  • 多语言适配器的使用需谨慎，需根据具体任务需求进行评估。

---

消息来源：ArXiv NLP/LLM (cs.CL) (2026-10-24)

—— 完 ——

主题标签： #多语言翻译 关注 #低资源语言 关注 #NMT 关注 #预训练模型 关注 #反向训练 关注