主页

索引

模块索引

搜索页面

激活函数-Sigmoid

• 特点：将输入的实数映射到 (0, 1) 范围内，主要用于二分类问题中的输出层，也可用于隐藏层。

• 公式：

$$\sigma (x)=\frac{1}{1+e^{-x}}$$

sigmoid 函数的导数由以下等式给出：

$$\begin{array}{r}\frac{d}{dx}\mathrm{sigmoid}(x)=\frac{\exp (-x)}{(1+\exp (-x){)}^2}\\ =\mathrm{sigmoid}(x)(1-\mathrm{sigmoid}(x))\end{array}$$

sigmoid 函数的导数：当输入为 0 时，sigmoid 函数的导数达到最大值 0.25。当输入在任一方向上偏离 0 时，导数接近 0。

主页

索引

模块索引

搜索页面