silu激活函数改进
时间: 2023-09-13 13:02:39 浏览: 164
关于silu激活函数改进的问题,目前还没有明确的改进版本被广泛接受和应用。然而,一种与silu激活函数相似的激活函数是swish激活函数。Swish激活函数是一种具备无上界有下界、平滑和非单调性的激活函数,其在一些深层网络中表现良好。在YOLOV5 1.0中就使用了Swish激活函数。Silu激活函数和Swish激活函数的主要区别在于它们的形式不同,但在一些实验中显示它们的性能相似。所以,如果你想改进silu激活函数,可以尝试使用Swish激活函数作为替代。<span class="em">1</span><span class="em">2</span><span class="em">3</span>
#### 引用[.reference_title]
- *1* *3* [YOLOv5的Tricks | 【Trick1】关于激活函数Activation的改进汇总](https://blog.csdn.net/weixin_44751294/article/details/125085657)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"]
- *2* [深度神经网络中常用的激活函数的优缺点分析](https://blog.csdn.net/kuweicai/article/details/93926393)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"]
[ .reference_list ]
阅读全文