找考题网-背景图
问答题

简答题 激活函数有哪些重要性质?

【参考答案】

为了增强网络的表示能力和学习能力,激活函数需要具备以下几点性质:
(1)连续并可导(允许少数点上不可导)的非线性函数。可导的激活函数可以直接利用数值优化的方法来学习网络参数。
(2)激活函数及其导函数要尽可能的简单,有利于提高网络计算效率。
(3)激活函数的导函数的值域要在一......

(↓↓↓ 点击‘点击查看答案’看完整答案 ↓↓↓)