ArXiv发布AraMS-28k:最大公开历史阿拉伯手稿数据集
摘要:ArXiv团队发布了AraMS-28k,这是迄今为止最大的公开历史阿拉伯手稿数据集,包含14本书、3043页和28600条标注文本行。该数据集涵盖三种手写字体,并首次对手稿的非线性阅读顺序进行了行级标注,为阿拉伯手稿识别、排版分析和阅读顺序恢复的研究提供了重要支持。
核心突破
ArXiv团队发布了AraMS-28k,这是目前最大的公开历史阿拉伯手稿数据集,具有以下核心特点:
- 规模庞大:包含14本书、3043页和28600条标注文本行,涵盖三种手写字体(Naskh、Ruq'ah和Maghrebi),并包含一本石版印刷版以增加格式多样性。
- 创新标注:首次对手稿的非线性阅读顺序进行了行级标注,通过插入锚点标注恢复了手稿的真实阅读顺序。
- 多模态数据:提供原始带变音符号的转录和去变音符号的版本,适应不同研究需求。
- 构建流程:利用RefLAM管道,将多模态大语言模型OCR与独立转录的清洁文本对齐,并结合人工审核,确保数据质量。
技术亮点
- 行级非线性阅读顺序标注:这是首次在历史阿拉伯手稿数据集中引入此类标注,为研究手稿的真实阅读逻辑提供了重要基础。
- 多模态数据支持:数据集不仅包含原始手稿图像,还提供详细的文本标注和转录版本,支持多层次的研究需求。
- 高质量构建流程:通过RefLAM管道,结合自动验证和人工审核,确保了标注数据的准确性和一致性。
行业影响
AraMS-28k的发布为阿拉伯手稿识别、排版分析和阅读顺序恢复等领域的研究提供了宝贵资源。其创新性的标注方法和高质量数据将推动相关技术的进步,特别是在文化遗产保护、历史文献研究以及多语言AI模型训练方面具有重要意义。
开发者建议
- 研究应用:建议研究人员利用该数据集开发新的手稿识别算法,并探索非线性阅读顺序的建模方法。
- 模型训练:建议AI开发者使用该数据集训练多语言、多模态模型,以提升对复杂手稿数据的处理能力。
- 跨领域合作:鼓励历史学家、语言学家和计算机科学家合作,利用该数据集开展跨学科研究。
—— 完 ——消息来源:ArXiv cs.CL (2026-08-27)
主题标签: #ArXiv #数据集 #阿拉伯手稿 #OCR #多模态
编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。
社区整体评论区