公司防火墙似乎阻止我只使用
model = AutoModel.from_pretrained("sentence-transformers/bert-base-nli-stsb-mean-tokens")因此,我需要在本地下载此模型,然后将其读取到Python中。找不到直接的AWS链接,似乎通常是这种形式:但不起作用
https://s3.amazonaws.com/models.huggingface.co/bert/bert-base-nli-stsb-mean-tokens-pytorch_model.bin尝试了这些类似的问题/解决方案here,但不起作用,因为我不能运行第一行下载从预先训练的Python语言,我需要一个外部解决方案
发布于 2021-08-08 13:58:03
您可以尝试这样做,例如:
from transformers import AutoTokenizer, TFAutoModel
tokenizer = AutoTokenizer.from_pretrained('bert-base-multilingual-uncased')
bert=TFAutoModel.from_pretrained('bert-base-multilingual-uncased')
tokenizer.save_pretrained("./models/tokenizer/")
bert.save_pretrained("./models/tokenizer/")https://stackoverflow.com/questions/67080085
复制相似问题