博客
关于我
Tensorboard使用入门,用于可视化loss,accuracy等数据
阅读量:237 次
发布时间:2019-03-01

本文共 909 字,大约阅读时间需要 3 分钟。

MNIST分类模型代码优化解析

代码概述:本代码基于TensorFlow框架,实现了MNIST数字分类模型,采用梯度下降法进行训练,并通过TensorBoard进行可视化监控。以下为代码详细解析。

数据载入:使用input_data模块读取MNIST数据集,设置one_hot=True参数,返回处理后的训练集、验证集和测试集。

变量摘要:创建了variable_summary函数,用于定义变量摘要,包含均值、标准差、最大值、最小值以及直方图。该函数在TensorBoard中可视化这些统计数据。

输入层:定义了x和y两个placeholder,分别用于输入训练数据和标签。x的尺寸为[None, 784],y的尺寸为[None, 10]。

神经网络结构:在layer命名空间内,定义了权重W和偏置b。W的尺寸为[784, 10],b的尺寸为[10]。使用variable_summary函数对权重和偏置进行了摘要。

输出层:通过矩阵乘法和加法运算实现神经网络输出,使用softmax函数进行归一化。

损失函数:采用二次代价函数,定义为均方误差,用于衡量预测值与实际值的差异。

训练过程:使用梯度下降法优化模型参数,设置学习率为0.2。定义了train_step变量,负责执行一次训练步骤。

准确率计算:计算正确预测的布尔型列表,转换为浮点数后求均值得到准确率。

TensorBoard监控:定义了多个标量摘要,包括权重均值、标准差、最大值、最小值、直方图、损失值和准确率。通过merged变量将所有摘要合并,方便 TensorBoard 采集。

训练过程:初始化变量后,进入训练循环。每个epoch内遍历所有批次,使用next_batch获取训练数据。每批数据执行一次训练步骤,并运行所有摘要和损失函数。

结果记录:使用TensorBoard FileWriter将训练摘要写入日志文件,并同时测试模型准确率。

测试准确率:在每个epoch结束后,使用测试数据集计算模型准确率,输出结果。

通过以上优化,代码结构清晰,注释详尽,便于理解和维护。同时,TensorBoard的使用使得训练过程可视化,便于监控和调试。

转载地址:http://pihv.baihongyu.com/

你可能感兴趣的文章
python | 一文掌握Python的上下文管理器和with语句
查看>>
python | 一文看懂Python闭包机制与变量作用域规则
查看>>
python读取含中文的json
查看>>
python | 如何用Python锁避免并发错误?
查看>>
python | 提升代码迭代速度的Python重载方法
查看>>
python | 深入理解Python并发编程中的GIL限制与解决方案
查看>>
Python | 爬虫实战——亚马逊搜索页监控(附详细源码)
查看>>
python | 高效使用Python工具自动生成模块文档的秘诀
查看>>
python 一个list去除另一个list中的值
查看>>
python 三大框架的 介绍。
查看>>
Python 下载的 11 种姿势,一种比一种高级!
查看>>
python读取一个文件夹下所有图片_初学Python-找出文件夹下的所有图片
查看>>
Python 中 3 个不可思议的返回功能
查看>>
python 中 dict 的另一种用法
查看>>
Python 中 PIL 读取图片出现异常旋转的解决方法
查看>>
python读取word表格内容(1)
查看>>
python 中os.path.join 双斜杠的解决办法
查看>>
python 中PIL.Image和OpenCV图像格式相互转换
查看>>
Python 中Semaphore 信号量对象、Event事件、Condition
查看>>
python 中with的使用及样例
查看>>