Радиальная нейронная сеть - часть 2

Роль скрытых нейронов в ней играют базисные радиальные функции, отличающиеся своей формой от сигмоидальных функций. Несмотря на отмеченное сходство, сети этих типов принципиально отличаются друг от друга. Радиальная сеть имеет фиксированную структуру с одним скрытым слоем и линейными выходными нейронами, тогда как сигмоидальная сеть может содержать различное количество слоев, а выходные нейроны бывают как линейными, так и нелинейными. У используемых радиальных функций может быть весьма разнообразная структура. Нелинейная радиальная функция каждого скрытого нейрона имеет свои значения параметров

$c_i$

$\sigma_i$

, тогда как в сигмоидальной сети применяются, как правило, стандартные функции активации с одним и тем же для всех нейронов параметром

$\beta$

. Аргументом радиальной функции является эвклидово расстояние образца

$x$

от центра

$c_i$

, а в сигмоидальной сети - это скалярное произведение векторов

$w^Tx$

Содержание Назад Вперед