3.0.1.损失函数

交叉熵损失 Cross Entropy Loss

  • 为真实分布,形如 . 为预测分布,形如

  • 独热编码情况下仅看正确标签的输出与 有多接近。每差 2 倍概率,损失 +1

  • batch 下乘以

  • 用于分类问题

  • 也可设计为将错误分类的交叉熵考虑进去

很好理解吧。

均方损失 MSELoss