2009-09-26
■ google N-gram
今やってる研究に，google N-gramを使って見ようと思って，試してみる． 研究室には，いろいろな言語資源があって，すぐ使えるのが嬉しい． 個人で使おうと思ったら，4万円ほどかかるので，ありがたい．
インデックス作成にssgncを使わせてもらう． 対象が26GBもある巨大データなので，少し処理に工夫がいったが， プロジェクト費で購入させてもらったPCの性能をフルに利用できる処理ができて嬉しい． やっと64bit，12GメモリPCの恩恵に授かることができた．