• 本文
• リロード
• 差分
• バックアップ
• 名前変更
• リファラ
• 新規ページ
• 編集

NEologd

mecab-ipadic-NEologd

Top / mecab-ipadic-NEologd

多数のWeb上の言語資源から得た新語を追加することでカスタマイズしたMeCab用のシステム辞書です。

https://github.com/neologd/mecab-ipadic-neologd

正規化

• https://github.com/neologd/mecab-ipadic-neologd/wiki/Regexp.ja

ルール

• 全角英数字?は半角英数字?に置換
• 半角カタカナは全角カタカナに置換
• ハイフンマイナス?っぽい文字を置換
• 長音記号?っぽい文字を置換
• 1回以上連続する長音記号?は1回に置換
• チルダ?っぽい文字は削除

• 以下の全角記号?は半角記号?に置換

• 以下の半角記号?は全角記号?に置換

• 全角スペースは半角スペース?に置換
• 1つ以上の半角スペース?は、1つの半角スペース?に置換
• 解析対象テキストの先頭と末尾の半角スペース?は削除
• 「ひらがな?・全角カタカナ・半角カタカナ・漢字・全角記号?」間に含まれる半角スペース?は削除
• 「ひらがな?・全角カタカナ・半角カタカナ・漢字・全角記号?」と「半角英数字?」の間に含まれる半角スペース?は削除

関連

• IPA辞書