0908
昨晩はAppleの製品発表会を観ていました。Apple Watchの新型が来たのでまたちょっとだけほしくなったけど、腕時計まで二年に一度買い換える暮らしはちょっとなあという躊躇があります。とはいえボーナスでも出たらそのタイミングで買ってもいいのかも。いや他になんかあるでしょうけど。計算機とか(はいはい)。
ところでiPhone7はSuica対応だそうなので、使ってるのはPASMOなんだけど乗り換えかなあと考えています。iPhone7を買うのは確定。小さいほうね。
計算機巫女業はいろいろ試行錯誤するのにも飽きてきたのでちゃんとした評価方法を実装しようとしたのだけど、なかなか難しい。とりあえず対数尤度でいいっぽいのだけど、隠れ変数からの生成の場合それは推定しかできないので、ガウシアンカーネルを使って推定するんだけども、そのパラメータを決定するために交差検定とかやるのがけっこう大変。というか手許のmacでは力不足感がある。明日ももうちょっと試してみるけど。
RNNオートエンコーダは、curriculum learningを試してみた。確かにちょっと良さそうなのでこれで行きますが、具体的にどのへんでレベルを上げるとよいのかとかはまたハイパーパラメータなので困る。
今夜は文字の埋め込みの初期値を文字単位のword2vecでやれないか試してみようと思います。skip-gramって結局どう作ればいいんだっけ。調べなくては。