AlexNet中，使用ReLU激活函数来替代Sigmoid激活函数。
相比较于Sigmoid激活函数而言：
1、ReLU激活函数在大于0的部分梯度为常数，不会出现梯度弥散现象；
2、ReLU激活函数在小于0的部分梯度都为0，可以在一定程度上缓解过拟合现象的发生；
3、ReLU激活函数的导数计算非常简单快速
- 0
用户访问量
- 0
注册用户数
- 0
在线视频观看人次
- 0
在线实验人次
非线性激活函数ReLU
作者：云创智学|发布时间：2022-04-26 13:49:48.0|来源：云创智学
推荐课程
大数据与人工智能就业初级班
¥ 5999
·难
·32
大数据与人工智能就业高级班
¥ 9999
·难
·9
大数据与人工智能就业中级班
¥ 7999
·难
·12
人工智能导论
¥ 199
·易
·34
人工智能图像处理应用
¥ 899
·适中
·16
大数据分析挖掘实训课
¥ 1688
·适中
·203
大数据实战能力提升
¥ 28000
·难
·170
ChatGPT应用教学
¥ 199
·偏易
·3591
大数据实战能力提升+金牌服务
¥ 100000
·难
·174
云计算职业技能竞赛初级课程（视频资源）
¥ 998
·难
·13
大数据平台技术
¥ 1899
·难
·16
大数据应用实训工程实战
¥ 199
·易
·343
云计算职业技能竞赛中级课程（带实验平台实战资源）
¥ 5999
·适中
·37
云计算职业技能竞赛高级资源增强包
¥ 6999
·难
·20
云计算职业技能竞赛中级资源增强包
¥ 5999
·难
·17
云计算职业技能竞赛初级资源增强包
¥ 3999
·难
·19
云计算职业技能竞赛初级课程/（带实验平台实战资源）
¥ 2999
·难
·59
友情链接
周一至周五 9:00-17:30
南京市秦淮区光华路街道
中国云计算创新基地A座
联系我们
服务热线：400-885-5360
高校合作：025-83708922
微信客服： 15366173274
云创智学抖音号
云创智学微信公众号
备案：苏ICP备11060547号-1 许可证编号：苏B2-20200268
©2011-2021 Cstor.cn 版权所有.南京云创大数据科技股份有限公司(股票代码：835305)
联系方式
企业微信