智客 ZICQ
EN 登录 / 注册
智客前沿 前沿论文 #零阶优化 #自适应算法 #查询重用 #AI优化 #黑盒攻击

arXiv发布自适应零阶优化方法ZoAQ:显著降低查询成本

Mr.Xu 的头像

文 / Mr.Xu 智客前沿编译 · 审校

发布时间: · 10 次阅读

中文阅读 (Chinese) English Version
共读互动 选中正文任意句子即可高亮划线、写下你的技术批注,或一键生成金句引用卡。 直达讨论区 ↓

摘要:arXiv发布了一种名为ZoAQ的自适应零阶优化(ZOO)方法,通过查询重用机制显著降低了函数评估的查询成本。与传统固定查询策略相比,ZoAQ在多个任务中实现了43%-48%的查询减少,同时在黑盒攻击任务中实现了100%的成功率。实验结果表明,ZoAQ在复杂优化场景中具有显著的性能优势,为AI模型优化和机器人控制等领域提供了新的技术方向。


核心突破

  • 自适应查询分配:ZoAQ通过重用之前的查询结果,避免了额外验证查询的需求,从而实现了自适应查询分配。
  • 显著降低查询成本:在合成目标函数上,ZoAQ相较于固定查询策略减少了43%-48%的查询量。
  • 高效黑盒攻击:在MNIST和CIFAR-10数据集上,ZoAQ分别以320和625次平均查询实现了100%的攻击成功率。
  • 优化性能提升:在OPT模型的四种微调设置中,ZoAQ相较于固定K=4策略节省了43%-46%的正向评估,同时保持了任务内精度变化在-0.018到+0.010之间。

技术亮点

  1. 查询重用机制:ZoAQ通过重用之前的查询结果,避免了传统方法中常见的冗余查询。
  2. 自适应控制器:该方法能够根据查询结果动态调整查询策略,从而在复杂优化任务中表现出色。
  3. 无额外验证查询:通过重用查询结果,ZoAQ无需额外的验证查询,进一步降低了计算成本。

行业影响

ZoAQ的出现为AI模型优化、机器人控制以及强化学习等领域提供了新的优化思路,特别是在资源受限的环境中,其高效查询策略能够显著提升性能。此外,该方法在黑盒攻击任务中的成功应用也展示了其在安全领域的潜力。

开发者建议

  • 优化AI模型训练:开发者可以利用ZoAQ优化AI模型的训练过程,减少查询成本,提高训练效率。
  • 探索新应用场景:ZoAQ的自适应特性使其适用于多种复杂优化任务,开发者可以探索其在不同领域的应用。
  • 关注后续研究:随着ZoAQ的进一步发展,开发者应关注其在更多任务和数据集上的表现,以评估其通用性和适用性。

消息来源:ArXiv Machine Learning (cs.LG) (2026-09-22)

—— 完 ——

主题标签: #零阶优化 #自适应算法 #查询重用 #AI优化 #黑盒攻击

编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。

读完这篇,你的第一判断是?
🚀 去【作品】晒出你的相关实践

社区整体评论区

正在加载实时智能评论与划词标注…