yolov5算法的激活函数
时间: 2023-10-29 16:38:14 浏览: 77
基于Yolov5算法的安全帽识别
Yolov5算法中使用的激活函数是Mish激活函数。Mish激活函数是由Sergey在2019年提出的一种新的激活函数,它在ReLU的基础上进行改进,可以更好地解决ReLU函数在负数部分出现的梯度消失问题。Mish激活函数的公式为:
Mish(x) = x * tanh(softplus(x))
其中,softplus函数定义为softplus(x) = ln(1 + exp(x))。Mish激活函数的导数可以通过以下公式计算:
dMish(x)/dx = tanh(softplus(x)) + x * sech^2(softplus(x)) * exp(x) / (1 + exp(x))^2
其中,sech(x) = 1 / cosh(x)。
阅读全文