处理后的选区解析树

Question

我使用斯坦福大学的CoreNLP来获取选区解析树。我想知道我应该在预处理之后还是在预处理之前执行此操作。在预处理中，我使字符小写，删除标点符号，删除停用词(例如，you‘’re，...)，删除数字，只保留字母表，等等。

我的任务是通过将每个叶子(即，令牌)视为向量嵌入，来获得每个选区解析树的向量表示。

我想知道如果我得到预处理后的选民解析树会有多大的区别？

Answer 1

我会运行整个流水线而不做你的自定义处理。解析器是针对未应用预处理的数据进行训练的。