文章/答案/技术大牛

发布

社区首页 >问答首页 >无/少标签文本数据的主题分类

问无/少标签文本数据的主题分类
EN

Data Science用户

提问于 2023-02-09 14:06:14

回答 1查看 43关注 0票数 1

我想将文本输入分类为预定义的类别。据我所知，如果我的目标标签在预先培训过的模型中非常罕见，那么无监督的方法是不可行的(我有关于特定工业过程的标签)。这是真的吗？

否则，我可以尝试一种方法，例如，使用所有不同的标签标记1000个输入文本，并使用有监督的方法，很少有标记的数据。这对学习过程有帮助吗？在这种情况下我能用什么方法呢？

回答已采纳

发布于 2023-02-09 14:28:15

一种可行的方法是采用像伯特这样的预先训练过的模型，并在一个小的标记数据集上对其进行微调。

为此，您可以使用Huggingface的Transformers，这使得整个过程中的所有步骤都相对容易(请参阅他们的教程：https://huggingface.co/docs/transformers/training)

票数 3

页面原文内容由Data Science提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://datascience.stackexchange.com/questions/118416

复制

相似问题

问无/少标签文本数据的主题分类EN