【笔记】C++ (仅使用一维数组,不用blas)实现 logistic regression代码错误经验总结, 数据集为mnist手写体数字
2015-01-21 15:10
615 查看
如果代码报错,注意检查下列错误
1. 变量的数据类型
尤其是 int 和 double 这种,有小数点和没小数点的区别。
由于预测出来的都是概率,只要中间有哪些变量声明为int, 当概率值赋给这个变量就会被转换类型到零值,造成后边一系列恼人的错误。
2. 数组delete
如果你的数组是new出来的,在该delete的地方,一定要delete。这个地方可能是析构函数,可能是类成员函数,自己好好分析。如果不delete,由于数据量大,
数组空间超大,会造成runtime内存巨大,最终进程被os杀死。
3. 行列数不要搞错
要用以为数组实现矩阵运算,那么一定要注意读数据时,行列有没有写对
4. 更新权重和偏置时,考虑变量是否清零
在每个minibatch和每个epoch前,需要考虑是否将一些中间参数清零再更新。比如a矩阵, y矩阵, y_t矩阵,predict_a矩阵,predict_y矩阵,dw矩阵,db矩阵,等等。
1. 变量的数据类型
尤其是 int 和 double 这种,有小数点和没小数点的区别。
由于预测出来的都是概率,只要中间有哪些变量声明为int, 当概率值赋给这个变量就会被转换类型到零值,造成后边一系列恼人的错误。
2. 数组delete
如果你的数组是new出来的,在该delete的地方,一定要delete。这个地方可能是析构函数,可能是类成员函数,自己好好分析。如果不delete,由于数据量大,
数组空间超大,会造成runtime内存巨大,最终进程被os杀死。
3. 行列数不要搞错
要用以为数组实现矩阵运算,那么一定要注意读数据时,行列有没有写对
4. 更新权重和偏置时,考虑变量是否清零
在每个minibatch和每个epoch前,需要考虑是否将一些中间参数清零再更新。比如a矩阵, y矩阵, y_t矩阵,predict_a矩阵,predict_y矩阵,dw矩阵,db矩阵,等等。
相关文章推荐
- TensorFlow学习笔记(1):使用softmax对手写体数字(MNIST数据集)进行识别
- tensorflow使用RNN分析mnist手写体数字数据集
- tensorflow 学习专栏(五):在mnist数据集上使用tensorflow实现临近算法(Nearest-Neighbor)进行手写数字识别
- 深度学习笔记——TensorFlow学习笔记(三)使用TensorFlow实现的神经网络进行MNIST手写体数字识别
- 神经网络与深度学习 1.6 使用Python实现基于梯度下降算法的神经网络和MNIST数据集的手写数字分类程序
- tensorflow使用CNN分析mnist手写体数字数据集
- 神经网络与深度学习 使用Python实现基于梯度下降算法的神经网络和自制仿MNIST数据集的手写数字分类可视化程序 web版本
- TensorFlow使用C++加载使用训练好的模型,.cc文件代码实现的相关类及方法总结
- c++容器使用经验总结
- C++容器使用经验总结
- 编写代码实现从输入流中分析出数字串(C++)
- WPF and Silverlight 学习笔记(二十二):使用代码实现绑定、绑定数据的验证
- c++指针使用经验总结之悬垂指针
- C++实现RTTI具体操作经验总结
- stackoverflow | C/C++ | 如何不使用循环和判断语句实现“打印从1到100之间的数字”
- c++容器使用经验总结
- 使用WDM驱动实现在NT下读取物理端口,特殊寄存器,物理内存的代码(C++驱动加载代码)
- [经验总结]获取Windows程序出错原因的C++代码
- 编写代码实现从输入流中分析出数字串(C++)
- RGB空间与HSV空间的相互转换(C++实现,修正网上大多数的代码错误)