ArXiv发布BenthicDINO:基于物理信息的自蒸馏框架革新侧扫声呐图像感知
文 / Mr.Xu 社区投稿
发布时间: · 6 次阅读
摘要:ArXiv团队推出了一种名为BenthicDINO的新框架,旨在解决侧扫声呐(SSS)图像感知中的物理声学伪影问题。该框架基于DINOv3架构,利用ConvNeXt-v2-Tiny骨干网络,通过模拟声学噪声和视角不变性增强数据效率,并在S3Seg数据集上的监督任务中表现出色,仅使用10%的标注数据即可达到96%的峰值性能,最终实现了71.4%的平均交并比(mIoU)和86.5%的整体准确率。
背景与挑战
侧扫声呐(SSS)图像感知在海洋探测和海底测绘等领域具有重要意义。然而,现有的自监督学习(SSL)框架主要针对自然图像设计,难以有效处理声学伪影问题,导致图像表示中混入了瞬时视角几何特征,影响了感知精度。
BenthicDINO框架
ArXiv团队提出的BenthicDINO框架通过以下机制解决了上述问题:
-
物理启发的数据增强:
- 模拟声学噪声(如斑点噪声)和视角依赖的衰减。
- 校正辐射测量失准问题,确保数据的一致性。
-
视角不变性约束:
- 通过Hilbert-Schmidt Independence Criterion (HSIC) 惩罚机制,将学习到的密集特征与物理视角参数解耦。
-
分层特征融合策略:
- 在网络的所有四个阶段进行密集、分层的特征融合,保留细粒度的沉积物细节和深层的语义信息。
实验与结果
在S3Seg数据集上的实验表明,BenthicDINO框架能够将复杂的水下地形自然地分组为稳定、无噪声的语义簇,且无需依赖人工标注。在监督下游任务中,该框架仅使用10%的标注数据即可达到96%的峰值性能,最终实现了71.4%的mIoU和86.5%的整体准确率,展示了其在数据效率和感知精度方面的优势。
行业影响与开发者建议
- 行业影响:BenthicDINO为海洋探测、海洋工程和环境保护等领域提供了更高效的感知工具,能够提升海底测绘的精度和效率。
- 开发者建议:
- 在处理类似声学伪影问题时,可以借鉴BenthicDINO的物理增强和视角不变性机制。
- 开发者可以尝试将BenthicDINO框架应用于其他领域,如医学成像和工业检测,以探索其通用性。
未来研究方向
- 探索BenthicDINO在多模态数据融合中的应用,例如结合光学图像和声呐数据。
- 进一步优化框架以处理更复杂的水下环境,如高动态水体和动态目标。
—— 完 ——消息来源:ArXiv cs.AI (2026-08-24)
主题标签: #ArXiv #BenthicDINO #自监督学习 #声呐图像处理 #物理信息神经网络
编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。
社区整体评论区