本系列文章由 @yhl_leo 出品,转载请注明出处。

文章链接: http://blog.csdn.net/yhl_leo/article/details/51734189


Sigmodi 函数是一种数学函数,函数图像具有“S”形状(也称Sigmoid curve)。一般,Sigmoid 函数指的是一种特殊的逻辑函数(logistic function):

函数图像如图 1所示。



图 1 logistic curve

还有一些其他相似的函数,如今多种多样的sigmoid 函数被应用在人工神经网络中,作为激活函数(Activation Function)。

定义: Sigmoid函数是一种有界的可微实函数,函数曲线上的任一点对应的导数值均为正值。

A sigmoid function is a bounded differentiable real function that is defined for all real input values and has a positive derivative at each point.

使用数学语言可以如下描述:

其中R指的是实数集。该函数最重要的性质就是:

从定义就可以看出,只要满足上诉的三条性质的函数,都可以成为Sigmiod函数,例如 arctangent, hyperbolic tangent, Gudermannian function, error function等。

图 2 是一张几种常见的Sigmoid函数图像,图中的函数都进行了归一化,在原点处的曲线斜率都为1.



图 2 Some Sigmoid function compared

最新文章

  1. android 入门-android Studio git 克隆
  2. jQuery实现无缝滚动条
  3. 15.6.8-sql小技巧
  4. VS2012文本编辑器鼠标不能滚动
  5. 【linux】关于TCP三次握手和四次挥手
  6. 【Android】SlidingMenu属性详解(转)
  7. 区间k大数查询
  8. 十六进制字节 & 十六进制转二进制
  9. @property、@synthesize和dynamic的用法
  10. 动态规划求一个序列的最长回文子序列(Longest Palindromic Substring )
  11. python子域名收集器
  12. Luogu P5283 [十二省联考2019]异或粽子
  13. 利用data属性来存json、和取数据还原json
  14. 关于layui中tablle 渲染数据后 sort排序问题
  15. c# 中 利用 CookieContainer 对 Cookie 进行序列化和反序列化校验
  16. js 对象的循环
  17. Eclipse中XML文件自定义格式化配置
  18. grunt的用法一
  19. MyEclipse使用笔记
  20. September 10th 2017 Week 37th Sunday

热门文章

  1. 【weiphp】安装中报错
  2. 【Java】3到5年开发常见的Java面试题
  3. Java多线程(六)守护进程
  4. python 中 str与bytes的转换
  5. 每天学点Linux命令: 管道| 与 xargs的区别
  6. kali中的APT软件包处理工具(apt-get)、Debian软件包管理器(dpkg)、源代码压缩和Nessus安装实用指南
  7. C#模拟百度登录并到指定网站评论回帖(四)
  8. Python :用两个栈实现队列
  9. VMWare虚拟机中Ubuntu 16.04 (linux无桌面)配置静态IP上网
  10. [Windows Server 2012] SQL Server 备份和还原方法