回答情况：
提问时间：
问题标签：
我试图在快速文本中获取词汇外单词( OOV )的最近邻居，然而，似乎最近的邻居也是OOV？print(len(nn2) == len(nnsims2)) # False我对此的解释是，如果这个词是OOV但是，OOV单词的邻居是如何生成的呢？我似乎无法从FastText的文档中找到任何解释。
浏览 2修改于2021-12-25得票数 0
简而言之，我有一个单词，它不是OOV (token.is_oov == False)，但没有向量(token.has_vector == False)。更有可能的是，我忽略了一件明显的事情，但我直观地理解OOV缺少一个向量，在本例中，长度为300的向量是0。
简单地说，一个词汇表中的标记怎么可能缺少向量呢？
浏览 18提问于2021-03-01得票数 1
然后，我创建了一个函数，用于打印我的语料库中的所有OOV单词。当我分析结果时，我更加惊讶:超过22k的单词没有被找到(包括'nous'(we)，'être'(to be)等等)。我还尝试了在上为OOV单词提出的方法(结果相同)：
ConceptNet Numberbatch是用一个词汇外策略来评估的，它可以帮助它在不熟悉的单词存在的情况下表现出来。
浏览 8修改于2020-11-21得票数 3
回答已采纳
我正在为NLP任务建立TensorFlow模型，并使用预先训练过的GLOW300d字向量/嵌入数据集。我可以用0的向量替换那些标记，但是我不想把这些信息丢在地板上，我更愿意对它进行编码，并将其包含到我的训练数据中。谢谢。
浏览 5修改于2017-08-04得票数 3
回答已采纳
我的问题是，我们如何计算单词向量，即OOV？我在网上搜索，什么也找不到。当然，要做到这一点，就要删除谷歌word2vec中没有列出单词的所有句子。Drive/Colab Notebooks/GoogleNews-vectors-negative300.bin', binary=True)
model.train(sentences_with_OOV_words
浏览 0提问于2019-09-16得票数 0
回答已采纳
默认情况下，当oov_token=True时，keras是如何推断出词汇量不足的标记的。但是，如果没有显式地指定oov_token=True，则没有太多的细节。
浏览 13修改于2022-04-20得票数 1
当我处理文本时，我有这个问题。你知道怎么修好它吗。我只是用。
浏览 1提问于2022-07-29得票数 0
回答已采纳
我使用的是一些特定于领域的语言，它有大量的OOV单词和一些排字。我注意到Spacy会为这些OOV单词分配一个全零向量，所以我想知道如何正确地处理这个问题。什么是最简单的方法来生成一个新的向量集，其中包括我的OOV词，但仍然包含语言的一般知识？
非常感谢
浏览 8提问于2020-07-28得票数 5
回答已采纳
我核实了OOV的字数-curl -XGET -u "myusername":"mypassword“"”> OOV.txt{ "code"：400，"code
浏览 0提问于2016-11-05得票数 0
这个模型运行得很好，但是现在是用“外部信息”改进模型的时候了，我指的是OOV (词汇外)术语或没有良好上下文的术语。
浏览 0提问于2019-04-11得票数 1
既然FastText总结了一个OOV词的子词的向量(不考虑顺序)，那么两个不同的OOV词是否有可能得到相同的向量呢？如果是，那你能举个例子吗？
浏览 0提问于2019-12-19得票数 4
回答已采纳
有没有一种方法可以使用快速文本而不将所有嵌入内容加载到内存中，来获得OOV (Out Of way )单词的向量？然而，要获得带有快速文本的OOV矢量，您需要使用.bin文件，然后将其加载到内存中。有没有办法避免加载整个.bin文件？
浏览 14修改于2018-08-03得票数 1
我试图使用加载的令牌程序对文本进行编码，但得到了以下错误
我包括了下面的代码
浏览 0修改于2018-04-16得票数 4
回答已采纳
但是，似乎没有词汇外(OOV)标记的重新定义。不存在看不见的文字的矢量。
那么我该怎么处理我遇到的OOV-令牌呢？
浏览 1修改于2018-11-15得票数 4
回答已采纳
tokenizer.texts_to_sequences(X_test)尽管我没有提供oov_token我希望在test_tweets = tokenizer.texts_to_sequences(X_test)中得到一个错误
当您不提供oov_token时，tensorflow如何处理测试期间词汇量不足的单词
浏览 1修改于2022-03-31得票数 1
回答已采纳
按照StackOverflow上的建议，我已经成功地尝试了Openears，并从NSSTRINGS数组生成自定义词汇表。然而，我们还需要从地址簿中识别姓名，而在这里，回退方法不可避免地失败了，这是非常糟糕的，经常是…或者其他一些库，可以将用户语音转换为我可以输入到Openears中的音素字符串？
浏览 6修改于2014-03-02得票数 1
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号