2023-02-01から1日間の記事一覧

a

読みました。手応えなし。 ーーー これ、日本語検索はギリ残るかもだけど、英語の検索に関しては圧倒的にボットの方が楽だ。 それはそれとして、ちょっと読んだだけじゃ今の疑問は解決せんな。 逆伝播を全部書き下すのか・・・と、かなり後ろ向き。 死ぬほど…

h

2~3時間調べましたけど ・勾配消失は深い層の学習で、入力に近い所に起こる ・RNNにデカいデータ突っ込むと原理的にそうなる ・LSTMだと大丈夫←は? という感じ。活性化関数に関わらず、シグモイドでもtanhでも消える時は消える。それはそう。 まだ理解して…

読了!!!111 ーーー これ凄ない? 凄いけど合ってるの? 2枚めの3番とか同じ事言ってる様に見えるのだけど。 頭おかしなるで やっぱり英語の方がクオリティ高いね。信用するならf'(0)の値がデカくて凄いって話ですよね。 大体こうだけど、やってみないと分…