使用SentencePiece作为命令

Question

我需要使用谷歌的SentencePiece从

SentencePiece Github

我已经通过pip安装了它，我想运行示例命令来训练一个模型，比如

spm_train --input=<input> --model_prefix=<model_name> --vocab_size=8000 --character_coverage=1.0 --model_type=<type>

然而，我得到了spm_train: command not found，这是否意味着我需要从github安装C++版本？

另外，我如何知道pip安装何时允许我使用自述文件中描述的终端命令？

因为当我安装一个非常类似的程序Sennrich BPE时，我只需要通过pip安装，然后在我的终端上运行命令

Answer 1

安装后，subword-nmt会创建一个脚本subword-nmt。Python sentencepiece不安装任何脚本，它只是C++库的Python包装器。

要从sentencepiece执行spm_*脚本，您当然必须安装C++版本。