arXiv发布SW-KAN：基于Stieltjes-Wigert正交多项式的Kolmogorov-Arnold网络架构

摘要：arXiv近日发布了一种名为SW-KAN（Stieltjes-Wigert Kolmogorov-Arnold Network）的新型深度学习架构。该架构通过引入Stieltjes-Wigert q-正交多项式，解决了传统多项式基函数在处理无界实值输入时的域不匹配问题。SW-KAN采用平滑的指数-双曲正切映射稳定地桥接域间隙，并利用数值稳定的递推公式在O(N)时间内高效评估多项式展开。该架构在图像分类和连续函数逼近任务中表现出色，尤其在资源受限条件下展现出强大的表示能力和鲁棒性，为高效函数逼近和分类提供了新的可能性。

---

新型深度学习架构：SW-KAN的提出

Kolmogorov-Arnold Networks (KANs) 作为一种新型深度学习架构，通过用可学习的边缘一元函数替代固定节点激活，提供了更高的可解释性和参数效率。然而，现有的基于多项式的KAN变体虽然解决了原始B样条实现的计算开销问题，却引入了无界实值输入与正交多项式基函数有限支持域之间的域不匹配问题。

为了解决这一挑战，arXiv发布了一种名为SW-KAN（Stieltjes-Wigert Kolmogorov-Arnold Network）的新架构，其主要特点包括：

• Stieltjes-Wigert q-正交多项式：该多项式定义在半无限域 (0, 无穷大) 上，解决了传统多项式基函数的域不匹配问题。
• 平滑指数-双曲正切映射：通过引入平滑的指数-双曲正切映射，稳定地桥接了域间隙，同时保持了良好的梯度条件。
• 数值稳定的递推公式：利用数值稳定的递推公式，在O(N)时间内高效评估多项式展开，避免了对特殊函数的调用。

实验结果与性能表现

在图像分类和连续函数逼近任务的综合实验中，SW-KAN在多个基准测试中表现出色：

• 精度与效率的平衡：SW-KAN在保持高精度的同时，显著提升了计算效率，尤其在资源受限条件下展现出强大的表示能力。
• 鲁棒性：log-normal权重结构和可学习的q参数提供了独特的归纳偏差，使模型在特征维度和训练数据有限的情况下仍能保持稳健的性能。

技术亮点与行业影响

1. 域不匹配问题的创新解决：SW-KAN通过引入Stieltjes-Wigert q-正交多项式，为处理无界实值输入提供了新的解决方案。
2. 高效的多项式评估：数值稳定的递推公式使得多项式展开的评估更加高效，适用于大规模数据处理。
3. 资源受限条件下的适用性：该架构在资源受限条件下表现出色，为边缘计算和嵌入式系统中的深度学习应用提供了新的可能性。

开发者建议

• 尝试SW-KAN架构：对于需要处理无界实值输入的任务，建议尝试SW-KAN架构，以利用其高效的域处理能力和鲁棒性。
• 关注资源效率：在资源受限的应用场景中，SW-KAN的效率优势尤为明显，开发者可以重点关注其在这些场景下的表现。
• 探索更多应用领域：除了图像分类和函数逼近，SW-KAN在其他领域的应用潜力也值得探索，例如时间序列预测和自然语言处理。

---

消息来源：ArXiv Machine Learning (cs.LG) (2026-10-02)

—— 完 ——

主题标签： #深度学习 #Kolmogorov-Arnold Networks #Stieltjes-Wigert正交多项式 #资源受限计算 #高效函数逼近