关于Allen协引用模型中嵌入的信息

Question

我是一个接近NLP世界的意大利学生。首先，我要感谢您所做的令人惊奇的工作，您所做的论文“高阶协参分辨率与粗到细的推理”。我正在使用allennlp库提供的模型，我有两个问题要问您。

1. in https://demo.allennlp.org/coreference-resolution据说使用的嵌入是SpanBERT。这是一个BERT嵌入训练，不管共同引用的任务？我的意思是，我能不能用这个嵌入作为一个预先训练的模型在英语语言嵌入句子？(如https://huggingface.co/facebook/bart-base )

1. 是否可以修改代码以便返回，以及共同引用预测，以及上述每个句子的嵌入？

我真的希望你能帮我。同时，我提前感谢您的盛情款待。真心诚意，伊曼纽尔·古索

Answer 1

SpanBERT是伯特的一个预先培训的版本，可以在文本跨度上产生有用的嵌入。SpanBERT本身与共同引用解析无关。最初的论文是https://arxiv.org/abs/1907.10529，最初的源代码是https://github.com/facebookresearch/SpanBERT，不过在https://huggingface.co/SpanBERT上使用拥抱面版本可能比较容易。

绝对有可能将嵌入作为输出以及共同引用预测。我建议克隆https://github.com/allenai/allennlp-models，让它在您的环境中运行，然后更改代码，直到它为您提供所需的输出。