勾配消失問題

ニューラルネットワークでは予測値と実際の値との誤差を出力層から入力層へ向かって伝播させて重みの値を調整していました。(このことを逆誤差伝播法と呼びます)アイデアのように隠れ層を増やした場合、誤差が正確に伝播されなくなっていたのです。このこと...