Keras使用tensorboard显示训练过程的实例


Posted in Python onFebruary 15, 2020

众所周知tensorflow造势虽大却很难用,因此推荐使用Keras,它缺省是基于tensorflow的,但通过修改keras.json也可以用于theano。但是为了能用tensorflow提供的tensorboard,因此建议仍基于tensorflow。

那么问题来了,由于Keras隐藏了tensorflow那令人诟病、可笑至极的graph构建方法,那么如何使用tensorboard呢?一般网站上会告诉你是这样的:

方法一(标准调用方法):

采用keras特有的fit()进行训练,只要在fit的时候指定callbacks函数即可,代码如下

from keras.callbacks import TensorBoard 
from keras.models import Sequential 
…… 
model = Sequential() 
…… 
tbCallBack = keras.callbacks.TensorBoard(log_dir='./Graph', 
histogram_freq=1, 
write_graph=True, 
write_images=True)

model_history = model.fit(X_train_train, 
y_train_train, 
batch_size=batch_size, 
epochs=epochs, 
verbose=1, 
validation_data=(X_train_val, y_train_val), 
callbacks = [EarlyStopping(patience=patience,mode='min',verbose=1), 
history, 
tbCallBack])

虽然这种方法看上去很美,但它只适用于标准训练方法,如果你想用自己的训练方法,就需要调用train_on_batch,而不能直接使用fit(),这时就要采用下面这种方法:

方法二(特殊调用方法):

这种方法可用于调用train_on_batch的情况。

%预先写好writer,定义好model 
writer = tf.summary.FileWriter(…) 
model = … 
%训练时 
loss = model.train_on_batch(…) 
summary = tf.Summary(value=[ 
tf.Summary.Value(tag=”d_loss”, simple_value=d_loss), 
tf.Summary.Value(tag=”g_loss”, simple_value=g_loss), 
]) 
writer.add_summary(summary)

虽然很简单,但这种方法只能显示scalar类型,不能显示image,histgram等,非常不实用。真正实用的是下面的终结方法:

方法三(最实用的方法)

最实用的还是用tensorflow原生的调用方法,虽然相对方法二麻烦一点,但考虑到此方法与tensorflow一样,不需要去记那些额外的花拳绣腿,因此反而是最简单的,也是最有效的。

代码如下:

import tensorflow as tf 
import datetime 
%在训练开始之前,预先定义好可视化的东西,用的是原生的tensorflow方法,这里我们以一个GAN模型为例,让它显示整张模型图,两个标量损失函数,以及5个生成图像。方法是预先用placeholder声明所要显示的那些东西,然后在训练过程中将训练结果来填充它们。你可以自行加入histgram,都和tensorflow一样 
#start tensorboard 
sess=tf.Session() 
logdir = “tensorboard/” + datetime.datetime.now().strftime(“%Y%m%d-%H%M%S”) + “/” 
writer = tf.summary.FileWriter(logdir, sess.graph) 
D_LOSS = tf.placeholder(tf.float32, []) 
G_LOSS = tf.placeholder(tf.float32, []) 
IMAGES = tf.placeholder(tf.float32,shape=[None,28,28,1]) 
tf.summary.scalar(“D_LOSS”, D_LOSS) 
tf.summary.scalar(“G_LOSS”, G_LOSS) 
tf.summary.image(“IMAGES”, IMAGES, 5) 
merged=tf.summary.merge_all() 
#end tensorboard

训练迭代过程中,是这样的

for epoch in range(100): 
% 用keras的train_on_batch方法进行训练 
d_loss = d.train_on_batch(。。。。。。) 
g_loss = d_on_g.train_on_batch(。。。。。。) 
generated_images = g.predict(。。。。。。) 
if index%10==0: #tensorboard 
% 将训练结果填充可视化数据 
summary=sess.run(merged,feed_dict={D_LOSS:d_loss, G_LOSS:g_loss, IMAGES:generated_images}) 
writer.add_summary(summary,index)

以上这篇Keras使用tensorboard显示训练过程的实例就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python 基于TCP协议的套接字编程详解
Jun 29 Python
用python打印1~20的整数实例讲解
Jul 01 Python
基于python实现自动化办公学习笔记(CSV、word、Excel、PPT)
Aug 06 Python
wxPython+Matplotlib绘制折线图表
Nov 19 Python
Python selenium页面加载慢超时的解决方案
Mar 18 Python
python实现梯度下降和逻辑回归
Mar 24 Python
解决pycharm下pyuic工具使用的问题
Apr 08 Python
Django Model中字段(field)的各种选项说明
May 19 Python
keras:model.compile损失函数的用法
Jul 01 Python
python 检测nginx服务邮件报警的脚本
Dec 31 Python
python regex库实例用法总结
Jan 03 Python
python实现简单的三子棋游戏
Apr 28 Python
Python利用逻辑回归分类实现模板
Feb 15 #Python
python发qq消息轰炸虐狗好友思路详解(完整代码)
Feb 15 #Python
利用Tensorboard绘制网络识别准确率和loss曲线实例
Feb 15 #Python
tensorboard显示空白的解决
Feb 15 #Python
解决Tensorboard可视化错误:不显示数据 No scalar data was found
Feb 15 #Python
tensorboard 可以显示graph,却不能显示scalar的解决方式
Feb 15 #Python
解决Tensorboard 不显示计算图graph的问题
Feb 15 #Python
You might like
融入意大利的咖啡文化
2021/03/03 咖啡文化
逆序二维数组插入一元素的php代码
2012/06/08 PHP
php中的观察者模式简单实例
2015/01/20 PHP
Yii框架实现图片上传的方法详解
2017/05/20 PHP
PHP实现类似于C语言的文件读取及解析功能
2017/09/01 PHP
JS判断客服QQ号在线还是离线状态的方法
2015/01/13 Javascript
JavaScript之Object类型介绍
2015/04/01 Javascript
jQuery EasyUI 菜单与按钮之创建简单的菜单和链接按钮
2015/11/18 Javascript
详解JavaScript中|单竖杠运算符的使用方法
2016/05/23 Javascript
基于JS模仿windows文件按名称排序效果
2016/06/29 Javascript
JS新包管理工具yarn和npm的对比与使用入门
2016/12/09 Javascript
Vue实现路由跳转和嵌套
2017/06/20 Javascript
JS实现同一DOM元素上onClick事件与onDblClick事件并存的解决方法
2018/06/07 Javascript
详解angular应用容器化部署
2018/08/14 Javascript
JS co 函数库的含义和用法实例总结
2020/04/08 Javascript
在Vue 中获取下拉框的文本及选项值操作
2020/08/13 Javascript
[01:39:04]DOTA2-DPC中国联赛 正赛 SAG vs CDEC BO3 第二场 2月1日
2021/03/11 DOTA
python实现字典(dict)和字符串(string)的相互转换方法
2017/03/01 Python
python实现ID3决策树算法
2017/12/20 Python
Python minidom模块用法示例【DOM写入和解析XML】
2019/03/25 Python
python全栈知识点总结
2019/07/01 Python
python创建与遍历List二维列表的方法
2019/08/16 Python
python支付宝支付示例详解
2019/08/22 Python
python 一篇文章搞懂装饰器所有用法(建议收藏)
2019/08/23 Python
Python递归及尾递归优化操作实例分析
2020/02/01 Python
matlab灰度图像调整及imadjust函数的用法详解
2020/02/27 Python
keras实现VGG16 CIFAR10数据集方式
2020/07/07 Python
C#笔试题
2015/07/14 面试题
物理系毕业生自荐书范文
2014/02/22 职场文书
《桂花雨》教学反思
2014/04/12 职场文书
大学新生入学教育方案
2014/05/16 职场文书
运动会400米加油稿(8篇)
2014/09/22 职场文书
党的群众路线教育实践活动学习笔记
2014/11/05 职场文书
2019银行员工个人工作自我鉴定
2019/06/27 职场文书
总结一下关于在Java8中使用stream流踩过的一些坑
2021/06/24 Java/Android
golang定时器
2022/04/14 Golang