活性化関数

問題

活性化関数をすべて取り除いても、深いネットワークは必ず任意の複雑な非線形関係を表現できる。

正解: ×

解説

活性化関数がない線形層の重ね合わせは、全体として線形変換になります。非線形性を導入することが深いネットワークの表現力に重要です。