Лекция №3
Функции активации f(V) могут быть различных видов:
1. Функция единичного скачка или пороговой функции. Функция Хевисайда. Порог смешение или сдвиг.
;
2. Знаковая, сигнатурная функция.
;
3. Линейная функция.
;
4. Полулинейная функция.
;
5.Полулинейная функция с насыщением.
;
6. Треугольная функция
7.Сигмаидальная функция. Функция S-образного вида. Примерами служат логистическая функция, или сигмоидальная.
; где b-параметр наклона сигмаидальной функции, e- выходное значение в промежутке от 0 до 1.
8. Гиперболический тангенс.
9. SOFTМАХ. Для учета особенностей конкретной задачи могут быть выбраны другие функции активации. Например: Гаусова функция
Получив набор чисел на входе, нейрон выдает некоторое число “y” на выходе, т.е. нейрон реализует скалярную функцию некоторого аргумента.