系列文章目录
第一部分 KAN的理解——数学背景
第二部分 KAN的理解——网络结构
前言
这里记录我对于KAN的探索过程,每次会尝试理解解释一部分问题。欢迎大家和我一起讨论。
KAN tutorial
KAN网络结构:Kolmogorov-Arnold Network
和MLP的区别是,KAN的weight是可学习的:
作者一方面希望其能够学习函数的外部结构,对于离散的,存在维度灾难的数据得以学习,因此存在类MLP的外部构造。另一方面又希望其能够达到尽可能准确的内部精度,因此存在类样条函数的结构。