常用损失函数公式整理

常用损失函数公式整理


基于距离度量的损失函数

  • MSE损失函数

    Loss=1n∑i=1n(yi−y^i)2 Loss = \frac{1}{n}\sum_{i=1}^{n}(y_{i} - \hat{y}_{i})^{2} Loss=n1i=1n(yiy^i)2

  • L2损失函数

    Loss=1n∑i=1n(yi−y^i)2 Loss = \sqrt{\frac{1}{n}\sum_{i=1}^{n}(y_{i} - \hat{y}_{i})^2} Loss=n1i=1n(yiy^i)2

  • L1损失函数

    Loss=1n∑i=1n(∣yi−y^i∣) Loss = \frac{1}{n}\sum_{i=1}^{n}(|y_{i} - \hat{y}_{i}|) Loss=n1i=1n(yiy^i)

  • Smooth L1损失函数

Loss={12(y−y^)2,∣y−y^∣<1∣y−y^∣−12,∣y−y^∣>=1 \begin{equation} Loss = \begin{cases} \frac{1}{2}(y - \hat{y})^2, &|y - \hat{y}| < 1 \\ |y - \hat{y}| - \frac{1}{2}, &|y - \hat{y}| >= 1 \\ \end{cases}%\text是为了在数学公式中处理中文 \end{equation} Loss={21(yy^)2,yy^21,yy^<1yy^>=1

基于概率分布度量的损失函数

  • KL散度函数

Loss=∑i=1n(yi×log⁡(yiyi^)) Loss = \sum_{i=1}^{n}(y_{i} \times \log(\frac{y_{i}}{\hat{y_{i}}})) Loss=i=1n(yi×log(yi^yi))

  • 交叉熵损失

    Loss=−∑i=1nyilog⁡y^i Loss = -\sum_{i=1}^{n}y_{i}\log{\hat{y}_{i}} Loss=i=1nyilogy^i

结尾

原始的Latax文件可以进群拿哦
如果觉得文章对你有用请点赞、关注 ->> 你的点赞对我太有用了
群内交流更多技术
130856474 <-- 在这里

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值