Item request has been placed! ×
Item request cannot be made. ×
loading  Processing Request

Approximation theorem for hyperspheric neurons ; Théorème d'approximation pour les neurones hypersphériques

Item request has been placed! ×
Item request cannot be made. ×
loading   Processing Request
  • معلومة اضافية
    • Contributors:
      Mathématiques, Image et Applications - EA 3165 (MIA); La Rochelle Université (ULR)
    • بيانات النشر:
      HAL CCSD
    • الموضوع:
      2023
    • Collection:
      HAL - Université de La Rochelle
    • الموضوع:
    • نبذة مختصرة :
      National audience ; This paper establishes an approximation theorem for a hyperspherical single-layer neural network. For this, we depart from the classical proof and use a Schwartz theorem based on a linear combination of translations. This approximation theorem is not universal in the sense that the functions to be approximated, such as activations, must be compactly supported. We also establish the link between a hyperspherical layer network and a network of radial-based functions. Experiments were used to verify the theorem and compare the spherical and dense layer approximations. In addition, these experiments have established experimentally that the compactness conditions on the activation functions are sufficient, but not necessary. This opens the way to a more classical approach to the Universal Approximation Theorem, to lighten the assumptions on the nature of the functions that can be approximated. ; Cet article établit un théorème d'approximation pour un réseau de neurones à une couche hypersphérique. Pour cela, nous écartons de la démonstration classique et utilisons un théorème de Schwartz basé sur une combinaison linéaire de translations. Ce théorème d'approximation n'est pas universel dans le sens où les fonctions à approcher comme les activations doivent être à support compact. Également, nous établissons le lien entre un réseau à couche hypersphérique et un réseau à de fonctions à bases radiales. Des expériences ont permis de vérifier le théorème et de comparer les approximations par couche sphérique et par couche dense. Par ailleurs, celles-ci ont également permises d'établir expérimentalement que les conditions de compacité sur les fonctions d'activations sont suffisantes mais non nécessaire. Ceci ouvre la voie à une approche plus classique du théorème d'approximation universelle pour alléger les hypothèses sur la nature des fonctions que l'on peut approximer.
    • Relation:
      hal-04195820; https://hal.science/hal-04195820; https://hal.science/hal-04195820/document; https://hal.science/hal-04195820/file/2023_desaintangel1398.pdf
    • Rights:
      http://hal.archives-ouvertes.fr/licences/publicDomain/ ; info:eu-repo/semantics/OpenAccess
    • الرقم المعرف:
      edsbas.251A2CE6