Парабола как функция активации искусственных нейронных сетей

Рассматриваются вопросы применения параболы и ее ветвей как нелинейности, расширяющей логические возможности искусственных нейронов. В частности, обусловлена применимость ветвей параболы для построения s-образной функции активации, пригодной для настройки нейронной сети методом обратного распространения ошибки. Продемонстрирована реализация функции XOR на двух и трех нейронах с применением предложенного подхода. Основное преимущество параболы перед сигмоидом - более простая реализация, что ускоряет работу искусственных нейронных сетей.

The use of parabola and its branches as a nonlinearity expanding the logical capabilities of artificial neurons is considered. In particular, the applicability of parabola branches for constructing an s-shaped function suitable for tuning a neural network by reverse error propagation is determined. The implementation of the XOR function on two and three neurons using the proposed approach is demonstrated. The main advantage of the parabola over the sigmoid is a simpler implementation, which speeds up the work of artificial neural networks.

Publisher
Федеральное государственное учреждение "Федеральный исследовательский центр "Информатика и управление" Российской академии наук
Number of issue
2
Language
Russian
Pages
89-97
Status
Published
Year
2023
Organizations
  • 1 Институт программных систем им. А. К. Айламазяна РАН
  • 2 Федеральный исследовательский центр «Информатика и управление» РАН
  • 3 Российский университет дружбы народов
Keywords
sigmoid; parabola; s-shaped activation function; neuron; neural network; XOR problem; Tuning rate; сигмоид; парабола; s-образная функция активации; нейрон; нейронная сеть; xor; скорость настройки
Date of creation
28.12.2023
Date of change
28.12.2023
Short link
https://repository.rudn.ru/en/records/article/record/103166/
Share

Other records

Зуенкова Ю.А.
Современный маркетинг: экосистемные подходы, цифровизация и перспективы развития. Общество с ограниченной ответственностью "Русайнс". 2023. P. 352-358