Skip to content

Instantly share code, notes, and snippets.

@polm
Last active September 2, 2020 16:24
Show Gist options
  • Save polm/f9ba88f97a04f927779162a463021fb3 to your computer and use it in GitHub Desktop.
Save polm/f9ba88f97a04f927779162a463021fb3 to your computer and use it in GitHub Desktop.
1. Transformersを使う場合
最新版のTransformersはそもそもmecab-python3を使っていません。こちらを実行してください。
pip install transformers[ja]
2. Neologdを使う場合
mecab-python3のバージョンが古いです。まずmecab-python3を更新します。
pip install mecab-python3==1.0.1
あとMeCab.Taggerの引数に`-r /dev/null`を追加してください。
Neologdを使う場合unidic-liteを入れても使われないので、インストールしても意味がないです...
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment