RMSE与平均目标变量

Question

我有一个回归问题，我想使用以下方法来评估我的模型的性能：

• RMSE
• MSE
• MAE
• MAPE
• R2
• I还报告了测试数据

中目标变量的平均值。

以前，我的模型是实现RMSE ~ 40，平均目标变量为112。

为了改进结果，我更改了数据中的一些列和值分布。这一变化对培训和测试数据都产生了影响。尽管如此，测试数据中的平均目标变量是80。

测试数据中的

• RMSE ~30
• 平均目标变量：~ 80

所以，如果RMSE从40减少到30，我真的做得更好吗？或者我在愚弄自己，就像以前一样，我有40 (RMSE)/ 112 (avg )。现在我有30 (RMSE)/ 80 (avg )。(塔雷格)？

换句话说，我们是否真的应该将RMSE与目标变量的平均值进行比较，以便知道我们做得有多好？

Answer 1

平均值并不能告诉您数据是如何传播的，RMSE与平均值的比率不能告诉您模型可以解释多少方差。

因为您的列表中有它，所以可以使用R2，这是解释方差的大致比例，使它与目标的比例不变。