一种适用于 Python、Go、C++ 和 JavaScript 的贪婪度较低的子词分词器及词汇表训练工具。
Ungreedy subword tokenizer and vocabulary trainer for Python, Go, C++ & Javascript