博客
关于我
Tensorboard使用入门,用于可视化loss,accuracy等数据
阅读量:237 次
发布时间:2019-03-01

本文共 909 字,大约阅读时间需要 3 分钟。

MNIST分类模型代码优化解析

代码概述:本代码基于TensorFlow框架,实现了MNIST数字分类模型,采用梯度下降法进行训练,并通过TensorBoard进行可视化监控。以下为代码详细解析。

数据载入:使用input_data模块读取MNIST数据集,设置one_hot=True参数,返回处理后的训练集、验证集和测试集。

变量摘要:创建了variable_summary函数,用于定义变量摘要,包含均值、标准差、最大值、最小值以及直方图。该函数在TensorBoard中可视化这些统计数据。

输入层:定义了x和y两个placeholder,分别用于输入训练数据和标签。x的尺寸为[None, 784],y的尺寸为[None, 10]。

神经网络结构:在layer命名空间内,定义了权重W和偏置b。W的尺寸为[784, 10],b的尺寸为[10]。使用variable_summary函数对权重和偏置进行了摘要。

输出层:通过矩阵乘法和加法运算实现神经网络输出,使用softmax函数进行归一化。

损失函数:采用二次代价函数,定义为均方误差,用于衡量预测值与实际值的差异。

训练过程:使用梯度下降法优化模型参数,设置学习率为0.2。定义了train_step变量,负责执行一次训练步骤。

准确率计算:计算正确预测的布尔型列表,转换为浮点数后求均值得到准确率。

TensorBoard监控:定义了多个标量摘要,包括权重均值、标准差、最大值、最小值、直方图、损失值和准确率。通过merged变量将所有摘要合并,方便 TensorBoard 采集。

训练过程:初始化变量后,进入训练循环。每个epoch内遍历所有批次,使用next_batch获取训练数据。每批数据执行一次训练步骤,并运行所有摘要和损失函数。

结果记录:使用TensorBoard FileWriter将训练摘要写入日志文件,并同时测试模型准确率。

测试准确率:在每个epoch结束后,使用测试数据集计算模型准确率,输出结果。

通过以上优化,代码结构清晰,注释详尽,便于理解和维护。同时,TensorBoard的使用使得训练过程可视化,便于监控和调试。

转载地址:http://pihv.baihongyu.com/

你可能感兴趣的文章
Prometheus监控k8s集群使用邮箱和微信告警!
查看>>
Prometheus监控mysq数据库实战
查看>>
prometheus监控nginx实战
查看>>
Prometheus监控redis数据库实战
查看>>
Prometheus监控教程:使用Grafana展示主机基本信息
查看>>
pytorch中如何使用预训练词向量
查看>>
Prometheus监控教程:使用PromQL查询监控数据(上篇)
查看>>
Prometheus监控教程:使用PromQL查询监控数据(下篇)
查看>>
Pytorch中关于forward函数的理解与用法
查看>>
Prometheus监控教程:安装部署
查看>>
Prometheus监控教程:配置介绍
查看>>
Pytorch中tqdm进度条的使用
查看>>
Prometheus(2):SpringBoot 2.X集成Prometheus
查看>>
Promise 原理解析与实现(遵循Promise/A+规范)
查看>>
PyTorch:传递 numpy 数组进行权重初始化
查看>>
PyTorch-Tutorials【pytorch官方教程中英文详解】- 8 Save and Load Model
查看>>
promise.all是并发执行吗_攻破面试灵魂拷问,解读Java并发编程的艺术,本文带你深入l理解...
查看>>
PyTorch-Tutorials【pytorch官方教程中英文详解】- 7 Optimization
查看>>
promise总结
查看>>
Propel项目改为基于TensorFlow.js
查看>>