overfitting

1、early termination

2、Regularization

Dropout(jeffery Hinton)

robust

and avoid overfitting

实际和 测试准确率不一致  ，测试准确率一直比实际的差 

机器学习过拟合 的实际问题就是机器学习过于 自负，，

怎样 解决overfitting问题：

1、增加数据量

2、L1，L2 regularization 正规化 

2、Dropout

随机dropout 不确定的神经元  ，，从根本上解决依赖部分W