#tantivy #tokenizer #japanese

tantivy-tokenizer-tiny-segmenter

基于 TinySegmenter 的 Tantivy 日本语分词器

3 个版本 (破坏性更新)

0.3.0 2019年11月7日
0.2.0 2019年3月20日
0.1.0 2019年2月14日

43#tantivy

每月 21 次下载

MIT 许可

15KB
57

tantivy-tokenizer-tiny-segmenter

基于 TantivyTinySegmenter 的日本语分词器。兼容 Tantivy 0.10。

查看 examples/basic.rs 以了解基本用法。

依赖

~19–30MB
~415K SLoC