活性化関数

活性化関数活性化関数とは,ニューロンの出力に何らかの非線形な変数を加える関数である.単純パーセプトロンの出力層ではステップ関数が用いられ,ニューラルネットワークの中間層では,はじめシグモイド関数などの正規化の機能を持つ関数が好まれた.しかし...