つづき
９．学習率の変更
codExaのテキストでは、０．００００１となっていた。他の値に変えた時の正解率は下記のとおりである。
一般的には、学習率の小さい方が正解率が上がると言われている。しかし、下記の結果は、そうではない。
以降は、正解率が最も高い学習率0.00005を使うことにする。
| 学習率 | 0.000001 | 0.000005 | 0.00001 | 0.00005 | 0.0001 |
| 正解率 | 0.7115 | 0.8333 | 0.8525 | 0.8685 | 0.8493 |
１０．隠れ層のユニット数変更
codExaのテキストでは、全結合層のユニット数が１２８となっていた。他の値に変えた時の正解率は
下記のとおりである。ユニット数に比例している訳ではない。正解率が最も高い６４を使うことにする。
| ユニット数 | ３２ | ６４ | １２８ | ２５６ |
| 正解率 | ０．８５４１ | ０．８８６２ | ０．８６８５ | ０．８５０９ |
１１．入力データの変更
codExaのテキストでは、元データのサイズがバラバラなので６４×６４画素に正規化していた。
これを１２８×１２８画素に正規化して、上記１０までのパラメータで試してみた。
データ量の大きいほうが正解率が下がる・・・。
| 入力データ画素 | ６４×６４ | １２８×１２８ |
| 正解率 | ０．８８６２ | ０．８１４１ |
入力データの画素数を大きくしたら、正解率が下がったのは予想外である。
本来ならば、上がる筈である。たぶん、４項から１０までのパラメータが６４×６４画素に
適していても、１２８×１２８画素には適していないのであろう。
また、学習率を小さくしたら、正解率が下がった事も予想外である。
パラメータの調整は難しい・・・。とにかく試してみないと分からない。