在Keras中实现保存和加载权重及模型结构


Posted in Python onJune 15, 2020

1. 保存和加载模型结构

(1)保存为JSON字串

json_string = model.to_json()

(2)从JSON字串重构模型

from keras.models import model_from_json
model = model_from_json(json_string)

(3)保存为YAML字串

yaml_string = model.to_yaml()

(4)从YAML字串重构模型

model = model_from_yaml(yaml_string)

2. 保存和加载模型权重(参数)

from keras.models import load_model
 
# 创建HDF5文件'my_model.h5',保存模型参数
model.save('my_model.h5')
 
# 加载模型参数
load_model('my_model.h5')

2.1 处理已保存模型中的自定义层(或其他自定义对象)

如果要加载的模型包含自定义层或其他自定义类或函数,则可以通过 custom_objects 参数将它们传递给加载机制:

from keras.models import load_model
 
# 假设你的模型包含一个 AttentionLayer 类的实例
model = load_model('my_model.h5', custom_objects={'AttentionLayer': AttentionLayer})

或者,你可以使用 自定义对象作用域:

from keras.utils import CustomObjectScope
with CustomObjectScope({'AttentionLayer': AttentionLayer}):
  model = load_model('my_model.h5')

自定义对象的处理与 load_model, model_from_json, model_from_yaml 的工作方式相同:

from keras.models import model_from_json
model = model_from_json(json_string, custom_objects={'AttentionLayer': AttentionLayer})

2019年6月1号更新:

更详细的使用方法:

如何保存Keras模型?

(1)一个HDF5文件即保存模型的结构又保存模型的权重

我们不推荐使用pickle或cPickle来保存Keras模型。

你可以使用model.save(filepath)将Keras模型和权重保存在一个HDF5文件中,该文件将包含:

模型的结构,以便重构该模型

模型的权重

训练配置(损失函数,优化器等)

优化器的状态,以便于从上次训练中断的地方开始

使用keras.models.load_model(filepath)来重新实例化你的模型,如果文件中存储了训练配置的话,该函数还会同时完成模型的编译。

例子:

from keras.models import load_model
 
model.save('my_model.h5') # creates a HDF5 file 'my_model.h5'
del model # deletes the existing model
 
# returns a compiled model
# identical to the previous one
model = load_model('my_model.h5')

(2)只保存模型的结构

如果你只是希望保存模型的结构,而不包含其权重或配置信息,可以使用:

# save as JSON
json_string = model.to_json()
 
# save as YAML
yaml_string = model.to_yaml()

这项操作将把模型序列化为json或yaml文件,这些文件对人而言也是友好的,如果需要的话你甚至可以手动打开这些文件并进行编辑。

当然,你也可以从保存好的json文件或yaml文件中载入模型:

# model reconstruction from JSON:
from keras.models import model_from_json
model = model_from_json(json_string)
 
# model reconstruction from YAML
model = model_from_yaml(yaml_string)

(3)只保存模型的权重

如果需要保存模型的权重,可通过下面的代码利用HDF5进行保存。注意,在使用前需要确保你已安装了HDF5和其Python库h5py。

model.save_weights('my_model_weights.h5')

如果你需要在代码中初始化一个完全相同的模型,请使用:

model.load_weights('my_model_weights.h5')

如果你需要加载权重到不同的网络结构(有些层一样)中,例如fine-tune或transfer-learning,你可以通过层名字来加载模型:

model.load_weights('my_model_weights.h5', by_name=True)

例如:

"""
假如原模型为:
  model = Sequential()
  model.add(Dense(2, input_dim=3, name="dense_1"))
  model.add(Dense(3, name="dense_2"))
  ...
  model.save_weights(fname)
"""
# new model
model = Sequential()
model.add(Dense(2, input_dim=3, name="dense_1")) # will be loaded
model.add(Dense(10, name="new_dense")) # will not be loaded
 
# load weights from first model; will only affect the first layer, dense_1.
model.load_weights(fname, by_name=True)

以上这篇在Keras中实现保存和加载权重及模型结构就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python list语法学习(带例子)
Nov 01 Python
python 回调函数和回调方法的实现分析
Mar 23 Python
使用python遍历指定城市的一周气温
Mar 31 Python
python使用xpath中遇到:到底是什么?
Jan 04 Python
Python实现的本地文件搜索功能示例【测试可用】
May 30 Python
python pandas中对Series数据进行轴向连接的实例
Jun 08 Python
python3 实现验证码图片切割的方法
Dec 07 Python
python3.x提取中文的正则表达式示例代码
Jul 23 Python
Python图像处理库PIL中图像格式转换的实现
Feb 26 Python
在Python中使用K-Means聚类和PCA主成分分析进行图像压缩
Apr 10 Python
基于Python绘制个人足迹地图
Jun 01 Python
python 浮点数四舍五入需要注意的地方
Aug 18 Python
简单了解Python多态与属性运行原理
Jun 15 #Python
Python类super()及私有属性原理解析
Jun 15 #Python
Keras 实现加载预训练模型并冻结网络的层
Jun 15 #Python
Python StringIO及BytesIO包使用方法解析
Jun 15 #Python
Python smtp邮件发送模块用法教程
Jun 15 #Python
pandas数据处理之绘图的实现
Jun 15 #Python
keras中的loss、optimizer、metrics用法
Jun 15 #Python
You might like
PHP开发文件系统实例讲解
2006/10/09 PHP
通过PHP的内置函数,通过DES算法对数据加密和解密
2012/06/21 PHP
PHP递归算法的简单实例
2019/02/28 PHP
js 多浏览器分别判断代码
2010/04/01 Javascript
QUnit jQuery的TDD框架
2010/11/04 Javascript
妙用Jquery的val()方法
2012/06/27 Javascript
首页图片漂浮效果示例代码
2014/06/05 Javascript
兼容主流浏览器的JS复制内容到剪贴板
2014/12/12 Javascript
javascript使用call调用微信API
2014/12/15 Javascript
jquery实现手机号码选号的方法
2015/07/31 Javascript
jquery+json实现数据二级联动的方法
2015/11/28 Javascript
轻松学习jQuery插件EasyUI EasyUI实现拖动基本操作
2015/11/30 Javascript
js实现将选中内容分享到新浪或腾讯微博
2015/12/16 Javascript
Javascript的表单与验证-非空验证
2016/03/18 Javascript
Javascript 6里的4个新语法
2016/08/25 Javascript
JavaScript DOM元素常见操作详解【添加、删除、修改等】
2018/05/09 Javascript
JavaScript中click和onclick本质区别与用法分析
2018/06/07 Javascript
jquery获取select选中值的文本,并赋值给另一个输入框的方法
2018/08/21 jQuery
vue项目中使用tinymce编辑器的步骤详解
2018/09/11 Javascript
解决mui框架中switch开关通过js控制开或者关状态时小圆点不动的问题
2019/09/03 Javascript
Vue 3.0双向绑定原理的实现方法
2019/10/23 Javascript
Vue路由守卫及页面登录权限控制的设置方法(两种)
2020/03/31 Javascript
Python基于Matplotlib库简单绘制折线图的方法示例
2017/08/14 Python
浅谈python中的占位符
2017/11/09 Python
Python插件virtualenv搭建虚拟环境
2017/11/20 Python
Python实现读取机器硬件信息的方法示例
2018/06/09 Python
Python连接Mssql基础教程之Python库pymssql
2018/09/16 Python
python数据库编程 Mysql实现通讯录
2020/03/27 Python
linux mint中搜狗输入法导致pycharm卡死的问题
2020/10/28 Python
Boda Skins皮衣官网:奢侈皮夹克,全球配送
2016/12/15 全球购物
银行自荐信怎么写
2015/03/05 职场文书
用人单位聘用意向书
2015/05/11 职场文书
2015年教师业务工作总结
2015/05/26 职场文书
【海涛DOTA】D-cup邀请赛NV.cn vs DT.Love
2022/04/01 DOTA
springboot读取resources下文件的方式详解
2022/06/21 Java/Android
Python测试框架pytest核心库pluggy详解
2022/08/05 Golang