Logistic Function == Sigmoid Function

Logistic function, 逻辑函数，逻辑斯谛函数，这些都是一个意思，指的也都是：

Sigmoid函数。解释如下：

---

Sigmoid函数是一个S型函数. Sigmoid函数的数学公式为

y = f(x) = 1 / (1 + e^(-x))

Sigmoid函数具有如下基本性质：

定义域为
值域为, 为有界函数
函数在定义域内为连续和光滑函数
函数的导数为
不定积分为, 为常数

由于Sigmoid函数所具有的性质, 它常和单位阶跃函数用于构造人工神经网络^[1]; 另外心理学中的学习曲线^[2]的形状也和Sigmoid函数比较类似.

---

没太想明白，Sigmoid函数为什么会重要到这种程度？

逻辑回归分析其实也是一种特殊的线性回归分析，只不过把归一化函数使用sigmoid函数代替（？是这样吧？）

在神经网络ANN中，最基本的单元unit不使用linear unit是因为它只能表现线性函数，无法表现非线性；不使用perceptron（本质是sgn函数）是因为它不连续可导，无法使用梯度下降法，这样一般都选用sigmoid函数。为什么sigmoid函数的效果就会这么好?他有什么性质能表现这样好呢？使用其他函数可以不可以？跟它又差在那里了？

真是还没想明白。

Logistic Function == Sigmoid Function相关推荐

Sigmoid Function
本系列文章由 @yhl_leo 出品,转载请注明出处. 文章链接: http://blog.csdn.net/yhl_leo/article/details/51734189 Sigmodi 函数是一 ...
sigmoid function vs softmax function
DIFFERENCE BETWEEN SOFTMAX FUNCTION AND SIGMOID FUNCTION 二者主要的区别见于, softmax 用于多分类,sigmoid 则主要用于二分类: ...
function java_java.util.function之function
Function类包含四种方法,其中一个抽象方法apply(),两个default方法andThen()和compose(),以及一个静态方法identity(). 实例化Function的时候需要实 ...
( function(){…} )()和( function (){…} () )是两种立即执行函数
函数声明:function fnName () {-}; 函数表达式 var fnName = function () {-}; 匿名函数:function () {}; fnName(); func ...
js立即执行函数: (function ( ){...})( ) 与 (function ( ){...}( ))
( function(){-} )() ( function (){-} () ) 是两种javascript立即执行函数的常见写法,最初我以为是一个括号包裹匿名函数,再在后面加个括号调用函数,最后达 ...
Loss Function , Cost Function and Kernel Function in ML(To be continued)
机器学习中的损失函数.代价函数.核函数 1.Definiton Shark Machine Learning Library–分别有介绍 "objective function, cost ...
window. onload=function(){} 与 $(function(){}) 的区别
页面加载事件:window.οnlοad=function(){} 和 $(function(){}); 1.window.οnlοad=function(){}是js原生的事件: 2.$(funct ...
JavaScript 中，定义函数时用 var foo = function () {} 和 function foo() 有什么区别？
某天写代码突然县道这个问题,顺势总结一波 JavaScript 函数和变量声明的"提前"(hoist)行为简单的说如果我们使用匿名函数 var a = {} 这种方式, 编译 ...
Javacript中(function(){})() 与 (function(){}()) 区别 {转}
这个问题可以从不同的角度来看,但从结果上来说 :他们是一样的. 首先,如果从AST(抽象语法树)的角度来看,两者的AST是一模一样的,最终结果都是一次函数调用.因此,就解析器产生的结果论而言,两者是没 ...

Logistic Function == Sigmoid Function

Logistic Function == Sigmoid Function相关推荐

最新文章

热门文章