2009-05-20から1日間の記事一覧
形態素辞書 ipadic の見出し語を各文字コード(SJIS, EUC, UTF-8)で DAWG に登録しておき,入力テキスト中に各文字コードの見出し語がどのくらい出現するかを求めます.後は,出現回数の多い文字コードを選択するだけです.このとき,DAWG のサイズは約 4MB…
形態素辞書 ipadic の見出し語を各文字コード(SJIS, EUC, UTF-8)で DAWG に登録しておき,入力テキスト中に各文字コードの見出し語がどのくらい出現するかを求めます.後は,出現回数の多い文字コードを選択するだけです.このとき,DAWG のサイズは約 4MB…