文本预处理的最佳工具，包括标记化、柠檬化、停止字删除、特征向量提取？

Question

对于文本处理，有很多工具，比如CoreNLP、SpaCy、NLTK、textblob等等，每个工具都提供不同的预处理功能，人们推荐不同的工具来执行不同的任务，比如NLTK，用于令牌化等等。

您推荐哪种工具来执行所有这些任务？

Answer 1

在这些方面，比较两个库或工具在某种程度上取决于意见。有些人更喜欢NLTK来完成几乎所有的任务。spacy也获得了相当的声誉。但是什么对你更好取决于你想做什么。在我个人的经验中，我发现NLTK和gensim库是我完成所有自然语言处理任务所需要的全部。