日本形态分析引擎。
项目描述
Janome 是用纯 Python 编写的日本形态分析引擎。
一般文件:
https://mocobeta.github.io/janome/en/(英文)
https://mocobeta.github.io/janome/(日语)
要求
需要 Python 3.7+。
安装
[注意] 这会消耗大约 500 MB 的内存用于构建。
(venv) $ python setup.py install
跑
(env) $ python
>>> from janome.tokenizer import Tokenizer
>>> t = Tokenizer()
>>> for token in t.tokenize('すもももももももものうち'):
... print(token)
...
すもも 名詞,一般,*,*,*,*,すもも,スモモ,スモモ
も 助詞,係助詞,*,*,*,*,も,モ,モ
もも 名詞,一般,*,*,*,*,もも,モモ,モモ
も 助詞,係助詞,*,*,*,*,も,モ,モ
もも 名詞,一般,*,*,*,*,もも,モモ,モモ
の 助詞,連体化,*,*,*,*,の,ノ,ノ
うち 名詞,非自立,副詞可能,*,*,*,うち,ウチ,ウチ
执照
根据 Apache 许可证 2.0 获得许可,并使用 MeCab-IPADIC 字典/统计模型。
有关许可证的详细信息,请参阅 LICENSE.txt 和 NOTICE.txt。
致谢
特别感谢@ikawaha、@takuyaa、@nakagami 和@janome_oekaki。
版权
版权所有(C) 2022,内田智子。版权所有。
项目详情
下载文件
下载适用于您平台的文件。如果您不确定要选择哪个,请了解有关安装包的更多信息。
源分布
Janome-0.4.2.tar.gz
(18.8 MB
查看哈希)
内置分布
Janome-0.4.2-py2.py3-none-any.whl
(19.7 MB
查看哈希)