andante

昨晩は特に何もしなかったような気がする。少なくとも私的なタスクは何も。資料作成はちょっとした。

お昼から仕事。たいしたことはしていない。夕方に打ち合わせに行ったりした。三度目ともなるとまあまあ慣れてきた感じもあるけど、まだ不安が強くてしんどい。念のために下痢止めを飲んでいったりする。

あとはゆっくり論文を読んだりしました。Layer Normalization、なんでこんなんでうまくゆくんと思うんだけど、まあ要するに対称性があれば正規化の軸をそっちに取っても構わんよねという話なのかな。FCだとうまくゆくけどConvNetだとダメ、というのはそういう直感にも合っている。

あとVAEGANもちゃんと読もうとしてみた。結局$\mathcal{L}^{\mathrm{Dis}_l}_{\mathrm{llike}}$の定義がよくわからないんだけど、ここでGaussianになってるってことは損失自体は普通に二乗誤差でいいのかな。他の実装を見ておきたい。

さて週末。gyazo-lambda計画をなんとかしないといけないんだけど、それよか勉強会の課題解説担当になっているのを忘れていたのでやらなくちゃいけない。seq2seqを実装するらしい。面倒……。

昨晩はgraphicsmagickにGIF画像を生成させたりしていました。imagemagickよりは確かに高速化しているし、小さい画像ならなんとかなるようになったのだけど、大きいとタイムアウトに間に合わないです。うーん、これはどうしたらいいんだろう。同期で返すのを諦めたらいいのかな……。
あと、サイズを取得してメタデータ作ったりするところはあとからやればいいやと思ったのでそこは別にすることにしました。S3のputをトリガーにすれば良さそう。今夜できるかな。

あとAAEをまた試しました。VAEGANの論文でやってたように、reconstruction errorの伝搬をDecoderまでで止めてみたんだけど、そうするとEncoderはDiscriminatorの顔色ばかりうかがうようになってしまってぜんぜん意味のある情報をエンコードしてくれなくなるみたいでした。まああたりまえではあります。
そうなると、Encoderがどっちの言うことを聞けばいいのかという重みパラメータを用意する必要があって、パラメータがあるならチューニングが必要になります。ふーむ。ちょっと考えてみよう。

今日はポケモンGOばかりしていました。家から一歩も出なくても進められるのは都会ゆえという感じがします。でもこれ外でやるのはちょっと抵抗あるな。Ingressのときもそう思った気がする。あと、普通に歩いてると楽しいのでそんなことしてる場合じゃない。

さて、今夜と明日はそろそろ勉強会の課題解説をやらなきゃいけない気がします。うーん、seq2seqか……。