回答情况：
提问时间：
问题标签：
我需要使用谷歌的SentencePiece从 SentencePiece Github 我已经通过pip安装了它，我想运行示例命令来训练一个模型，比如 spm_train --input=<input
浏览 59提问于2019-03-21得票数 1
回答已采纳
我想在Google Colab项目中使用来自https://github.com/google/sentencepiece的句子指示器，在该项目中我正在训练一个OpenNMT模型。当我尝试使用pip install sentencepiece进行安装，并试图在脚本的“转换”中包含句子摘要时，我得到了以下错误 运行此脚本(与OpenNMT翻译教程中的脚本匹配) !warm_up File "/usr&#
浏览 163修改于2021-05-04得票数 0
回答已采纳
为了使用以下，正在尝试导入库tf_sentencepiece。使用macOS，已经通过pip安装库，并得到：Requirement already satisfied: tf_sentencepiece/_sentencepiece_processor_ops.so.1.13.1, 6): Library not loaded: @rpath/libtensorflow_framework.so/_sentencepiece<
浏览 25提问于2019-07-17得票数 1
回答已采纳
火炬文本sentencepiece_numericalizer()输出一个生成器，其索引SentencePiece模型对应于输入句子中的令牌。从发电机，我可以得到身份证。例如>>> list_a = ["sentencepiece encode aslist_a))
浏览 0修改于2022-04-29得票数 0
回答已采纳
ImportError: installation page of its repo: https://github.com/google/sentencepiecepip install sentencepiece
from transformers i
浏览 12提问于2021-01-04得票数 4
回答已采纳
Batch size 1
522 if not is_sentencepiece_available():
--> 523 raise ImportError(SENTENCEPIECE_IMPORT_ERROR.f
浏览 57修改于2020-12-25得票数 4
/tf_sentencepiece/_sentencepiece_processor_ops.so.1.11.0, 3.6/dist-packages/tf_sentencepiece/_sentencepiece_processor_ops.so/tf_sentencepiece/_sentencepiece_processor_ops.so.1.14.0, 3.6/dist-packages/t
浏览 16修改于2021-08-26得票数 2
回答已采纳
我知道现在支持库： 4
---->
浏览 1修改于2019-06-25得票数 5
1回答
我已经用pip安装了tf-sentencepiece，当我运行这行代码时：我得到以下错误：
tensorflow.python.framework.errors_impl.NotFoundError: /home/ubuntu/.local/lib/python2.7/site-packages/tf_sentencepiece/_sentencepiece_processor_o
浏览 1提问于2018-10-11得票数 0
1回答
src\sentencepiece/sentencepiece_model_pb2.py -> build\lib.win-amd64-3.10\sentencepiece
copying/sentencepiece_wrap.cxx /Fobuild\temp.win-amd64-3.10\Release\src/sentencepiece/sentencepiece_wrap.objsrc\sentencep
浏览 69提问于2022-03-22得票数 5
src/sentencepiece/sentencepiece_wrap.cxx(2809): fatal error C1083: Cannot open include file: 'ERROR: Failed building wheel for sentencepieceSuccessfullybuilt fr-dep-news-trf
Failed to build sentencepie
浏览 61提问于2022-04-04得票数 0
因此，我试图编译和安装以下工具：% cd sentencepiece% git clone https://github.com/google/sentencepiece.git
% cd sentencepiece
浏览 0修改于2021-11-19得票数 1
回答已采纳
如果我在cmd行中运行pip install sentencepiece，它将给出以下输出。src/sentencepiece/sentencepiece_wrap.cxx(2809): fatal error C1083: Cannot open include file: 'sentencepiece_processor.h
浏览 233提问于2022-02-23得票数 3
回答已采纳
os-maven-plugin添加了一个分类器 <modelVersion>4.0.0</modelVersion><artifactId>sentencepiece这是因为工件共享一个pom (sentencepiece-0.0.2.pom)，而JAR工件是由os-maven-plugin值(sentencepiece-0.0.2-XYZ.jar)决定的。
浏览 26修改于2021-02-08得票数 2
"This is a second example sentence that shows how 'sentence' in 'sentencepiece' should not be replaced"This is a second example sentence that shows how 'processed_sentence' in 'sentencepiece' should not
浏览 2提问于2020-10-15得票数 3
回答已采纳
我愿意安装Google库SentencePiece (> https://github.com/google/sentencepiece)，这是一个依赖于fairseq脚本来预处理一些语音数据的库。现在，如果我试图从SentencePiece调用一个函数，我会得到一个错误： spm_train: error while loading shared libraries: libsentencepiece_train.so
浏览 29修改于2020-12-22得票数 0
回答已采纳
सामने तू होता नहीं बेचैनी बढ़ जाती है मैं रूठ "错误是：
RuntimeError: Internal: src/sentencepiece_processor.cc
浏览 122修改于2022-02-24得票数 0
我正在尝试从运行示例代码import tensorflow_hub as hubpyasn1-modules==0.2.8requests-oauthlib==1.3.0scipy==1.4.1tensorflow-estimator==1.15.1
tensorflow-hub==0.9.0
浏览 3修改于2020-09-20得票数 1
__setstate__ File "/usr/local/lib/python3.7/dist-packages/sentencepiece.py367, in Load File "/usr/local/lib/python3.7/dist-packages/
浏览 3修改于2021-04-11得票数 8
有一些嵌入模型已经使用了Sentencepiece模型来进行标记化。因此，他们给出了不存在于词汇表中的未知单词的子词向量。但是我想得到每个单词的单词向量，比如Word2vec，fastText。
浏览 2提问于2020-03-17得票数 2
回答已采纳
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号