#operator #transform #tokenizer #string #vector #string-code

code-tokenizer

字符串/代码分词器。将包含操作符的字符串转换成关键词向量。

1 个不稳定版本

0.1.0 2020年2月6日

#122 in #tokenizer

MIT 许可证

5KB
75

代码分词器

字符串/代码分词器。将包含操作符的字符串转换成关键词向量。

无运行时依赖