IR中的查准率和召回率

Question

一组新闻文章，其中有30处提及地点。提取器提取24个位置实体，其中6个不正确。精确值和召回值是什么？

如果我错了TP=18，FP=6，FN=6，那么回忆和精确都是.75

Answer 1

遵循维基百科定义：

精度=相关文档检索到的0.75 /0.75检索的文档x= 18 / 24 =0.75

回忆=相关文档检索到的财政/财政相关的文件= 18 / ?？

要计算出召回，我们需要知道多少正确的位置是在最初收集的30个地点。

编辑：

考虑到新的问题陈述如下：“考虑一组新闻文章，其中包含30条提及地点的内容。从这个来源，提取器提取24个位置实体，其中6个是不正确的。精确值和回忆值是多少?可能的答案是：

1. P= 0.80，R= 0.50
2. P= 0.75，R= 0.60
3. P= 0.60，R= 0.80
4. P= 0.75，R= 0.50“

没有可能的答案，这四种选择都不可能。

理由如下:精度可以像以前那样容易计算，其值为0.75。

对于回收，我们不知道初始集合中正确位置的总数，但至少我们知道有18个正确的位置(总共30个位置)，因为提取器已经达到这个值。但在收集可能超过18个正确的位置，它可能是19，20，21，22或23。从24到30是不可能的，因为至少我们知道有6个不正确的位置(因为提取器已经达到这个数字)。

然后，通过放弃各种可能性来选择答案。作为P=0.75，我们只有两种可能性: R=0.60或R=0.50。

如果我们测试可能的值，我们就会发现：

R=18/18=1.0，R=18/19=0.94，R=18/20=0.9，R=18/21= 0.85

R=18/22=0.81，R=18/23=0.78。

由于R既不能等于0.5，也不能等于0.6，因此对这个问题没有可能的答案。

此外，在您的问题中提出的解决方案，即R= 0.75，也是不可能的。

希望这会有帮助！