SW-KAN: Stieltjes-Wigert q-정규 다항식을 활용한 Kolmogorov-Arnold Networks
SW-KAN: Kolmogorov-Arnold Networks with Stieltjes-Wigert q-Orthogonal Polynomials
Kolmogorov-Arnold Networks (KANs)는 고정 노드 활성화를 학습 가능한 단변량 함수로 대체하여 해석 가능성과 파라미터 효율성을 향상시킵니다. Stieltjes-Wigert Kolmogorov-Arnold Network (SW-KAN)은 반무한 영역에서 정의된 Stieltjes-Wigert q-정규 다항식을 사용하여 도메인 불일치를 해결합니다. 이 아키텍처는 매끄러운 지수-탄젠트 맵핑을 도입하여 안정적인 그래디언트를 유지하며, O(N) 연산으로 다항식 확장을 평가하는 수치적으로 안정적인 삼항 재귀를 활용합니다. SW-KAN은 이미지 분류 및 연속 함수 근사에서 우수한 정확도-효율성 균형을 달성하며, 자원 제약 조건 하에서도 강력한 성능을 발휘합니다.
SW-KAN은 자원 제약 조건에서 효율적인 함수 근사 및 분류를 위한 유망한 대안입니다.
원문 출처
arXiv cs.LG (머신러닝)