0416
昨晩はTweetコーパスを分かち書きしてSwivelアルゴリズムに投げるところまでやりました。Python3を最近ようやくたどたどしく書き始めたところなのに、Python2のコードを3に修正するとかなかなか厳しい。でもtensorflowをPy3環境にインストールしてしまったからPy2には戻れない。ふーむ。
お昼過ぎに起きてちょっとだけ会社で作業しました。勾配のクリッピングを入れて再計算。でもやっぱりまだうまく動いていない気配があります。こんどは勾配が小さすぎたり、あとどうもweight decayは省いた方が良かったような気もする。うーん、難しい。
その後三時間ばかり散歩しました。14キロ歩いたらさすがに疲れた。
今夜はDCGANの実装まで進められたらいい、けど期待はしない。