ng机器学习——神经网络

首先提出问题，如果不是线性的问题问题怎么办？如果是多个分类怎么办？此时就想到了神经网络。神经网络的创意来自于人的脑神经中人的神经元之间的信息的传递是层层递进的。

下面是一个例子，就是为什么用到神经网络的例子，在复杂的分类的时候会用到。










神经网络的cost function怎么表示？

gradient computation：backpropagation algorithm（向后传播算法）

不懂它的delta是怎么算的？初始化的时候不能将theta初始为0，具体原因不明白。

神经网络的具体步奏是：

1，随机的选择weight即parameter

2，执行forward propagation 来计算h

3，计算costfunciton

4，计算偏导数

5，核实方向是否正确

6，用advanced algorithm来将cost最小化