2019.2.20
虽然 我实现了 sin(x) ,但是却还是不明白原理,
泰勒公式给出了 将任意一个曲线在某一点邻域的值都可以用多项式替代,
但是这和 y = kx + b有什么关系呢?
讲道理,三层网络还是只能拟合线性函数啊,为什么能拟合 高次曲线呢?
它并没有加入 高次项啊?
2019.2.22
貌似是因为 sigmoid函数 使得他拥有了能够拟合曲线的能力,为什么呢?
因为sigmoid函数是一个曲线映射,经过映射之后,不同于之前的简单相加。
图一是简单的 激活函数是线性函数y = x
图二是 复杂的 激活函数是 y = sigmoid(x)