ディープラーニングの研究を長くやってきたが，もう見限ろうと思う．ディープラーニングの枠組みでは，ニューロンをいくら増やしても，層をいくら増やしても，発明発見ができるような知能は生まれない．バックプロパゲーションで学習するというのは無理があると思う．本物の脳のメカニズムと違い過ぎる．アミノ酸がどんなにからみあったって，微分するようにはならない．エッジを見つけるような微分もどきはするかもしれないが，ニューロンの結合強度を調整するような微分を生物の脳がするというのはあまりに不自然だ．
たぶん，20年後にはディープラーニングは研究されてないと思うよ．あれって，要するに入力ベクトルをひどく簡単な出力ベクトルに変換するだけの組み合わせ回路じゃない．研究する部分なんかないよ．