已部署的模型是否具有认知或任意不确定性？

Question

任意不确定性是指实验结果具有随机性的概念，这是由于固有的随机效应造成的。

认知不确定性是指决策者的无知，例如缺乏数据.

任意的不确定性是不可弥补的，而认知可以被减轻(增加更多的数据)。

当我们在生产中部署一个ML模型时。我们能区分认知和任意不确定性吗？

Answer 1

在偏差-方差权衡定理中，任意不确定度用不可约误差(固有和不可约随机)来表示.其余部分表示由于对问题产生的不精确知识而造成的模型不匹配。

量化任意不确定性的一种方法是对同一问题的各种模型的平均不确定性，因为模型失配导致的不确定性往往只剩下不可约的不确定性。