禁用部分nlp管道

Question

我在装有python3的windows系统上运行spaCy v2.x。我没有管理员权限，因此我必须将管道调用为：

nlp = en_core_web_sm.load()

当我在*nix机器上运行相同的脚本时，我可以像这样加载管道：

nlp = spacy.load('en', disable = ['ner', 'tagger', 'parser', 'textcat'])

我所做的就是标记化，所以我不需要整个管道。在windows机器上，如果我像这样加载管道：

nlp = en_core_web_sm.load(disable = ['ner', 'tagger', 'parser', 'textcat'])

这真的会禁用组件吗？

spaCy information on the nlp pipeline

Answer 1

您可以通过以下方式检查当前的管道组件

print(nlp.pipe_names)

如果您对输出不满意，您可以尝试使用组件进行手动检查，并尝试打印输出。例如，尝试禁用解析器和打印依赖标记。

Answer 2

正如documentation所说，您可以在不加载管道的情况下删除部分管道。默认en_core_web_sm模型具有以下管道：

   import spacy
   nlp = spacy.load('en_core_web_sm')
   print(nlp.pipe_names)
   ['tagger', 'parser', 'ner']

因此，不是：

    nlp = spacy.load('en_core_web_sm', disable = ['ner', 'tagger', 'parser'])
    print(nlp.pipe_names)
    []

您可以执行以下操作：

    nlp = spacy.load('en_core_web_sm')
    nlp.disable_pipes('ner', 'tagger', 'parser')
    print(nlp.pipe_names)
    []

或者，如果您只需要删除一个管道：

    nlp = spacy.load('en_core_web_sm')
    nlp.remove_pipe('ner')
    print(nlp.pipe_names)
    ['tagger', 'parser']