智客 ZICQ
EN 登录 / 注册
智客前沿 前沿论文 #IntLawNER #NER #国际法 #LLM #数据集

arXiv发布IntLawNER:国际法领域命名实体识别数据集与基准

Mr.Xu 的头像

文 / Mr.Xu 智客前沿编译 · 审校

发布时间: · 6 次阅读

中文阅读 (Chinese) English Version
共读互动 选中正文任意句子即可高亮划线、写下你的技术批注,或一键生成金句引用卡。 直达讨论区 ↓

摘要:国际法文本的命名实体识别(NER)资源一直处于空白状态。arXiv近日发布IntLawNER,这是一个针对国际法典化来源的NER数据集和基准,涵盖2987个黄金标注句子和8094个实体跨度,标注了七种特定机构的实体类型。该数据集通过混合算法-代理管道构建,显著降低了标注成本,并利用LLM进行预审和人工审核,确保标注质量。基准测试显示,现有模型在处理依赖机构功能的实体类型时表现不佳,而Claude Opus 4.6在少样本学习中表现最佳,达到0.873的micro-F1分数。IntLawNER的发布为国际法领域的文本信息提取提供了重要资源。


核心突破

  • 首个国际法领域的NER数据集:IntLawNER填补了国际法文本在命名实体识别资源方面的空白,为该领域的文本信息提取提供了重要支持。
  • 高质量标注与混合构建流程:通过结合算法筛选、LLM预审和人工审核,IntLawNER实现了高效且高质量的标注流程,89.6%的黄金标注跨度直接从中间层保留。
  • 领域特定挑战与模型表现:基准测试揭示,现有模型在处理依赖机构功能的实体类型时表现不佳,而Claude Opus 4.6在少样本学习中表现最佳,达到0.873的micro-F1分数。

技术亮点

  1. 混合构建流程:利用候选检索、LLM预审和人工审核的组合方法,在降低标注成本的同时保证数据质量。
  2. 领域特定实体类型:标注了七种特定机构的实体类型,如国际法院(ICJ)决策、联合国安理会决议等。
  3. 少样本学习优势:Claude Opus 4.6在少样本学习中表现出色,展示了LLM在特定领域任务中的潜力。

行业影响

IntLawNER的发布为国际法研究、法律文本分析以及AI在法律领域的应用提供了新的工具和资源。其高质量的标注数据和基准测试结果将推动相关领域的技术进步,并促进AI模型在处理复杂法律文本时的性能提升。

开发者建议

  • 模型优化:建议开发者针对IntLawNER的标注数据优化现有模型,特别是在处理依赖机构功能的实体类型时。
  • 少样本学习应用:利用Claude Opus 4.6等LLM进行少样本学习,以提升模型在特定领域任务中的表现。
  • 跨领域应用探索:探索IntLawNER在其他领域文本分析中的应用潜力,如政治学、社会学等。

消息来源:ArXiv AI (cs.AI) (2026-09-22)

—— 完 ——

主题标签: #IntLawNER #NER #国际法 #LLM #数据集

编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。

读完这篇,你的第一判断是?
🚀 去【作品】晒出你的相关实践

社区整体评论区

正在加载实时智能评论与划词标注…