Kolmogorov-Arnold网络架构解析

发生了什么

据Towards Data Science报道，Kolmogorov-Arnold网络（KAN）于2024年提出，其核心架构基于Kolmogorov-Arnold表示定理。与传统神经网络使用标量权重不同，KAN将非线性变换从节点移至连接节点的边上，并以可学习的单变量函数替代标量权重。该架构通过对输入进行重复的组合与求和来构建复杂的多变量关系，其计算成本取决于边的数量及所选函数（如B样条或二次函数）的复杂度。