在Keras中实现保存和加载权重及模型结构


Posted in Python onJune 15, 2020

1. 保存和加载模型结构

(1)保存为JSON字串

json_string = model.to_json()

(2)从JSON字串重构模型

from keras.models import model_from_json
model = model_from_json(json_string)

(3)保存为YAML字串

yaml_string = model.to_yaml()

(4)从YAML字串重构模型

model = model_from_yaml(yaml_string)

2. 保存和加载模型权重(参数)

from keras.models import load_model
 
# 创建HDF5文件'my_model.h5',保存模型参数
model.save('my_model.h5')
 
# 加载模型参数
load_model('my_model.h5')

2.1 处理已保存模型中的自定义层(或其他自定义对象)

如果要加载的模型包含自定义层或其他自定义类或函数,则可以通过 custom_objects 参数将它们传递给加载机制:

from keras.models import load_model
 
# 假设你的模型包含一个 AttentionLayer 类的实例
model = load_model('my_model.h5', custom_objects={'AttentionLayer': AttentionLayer})

或者,你可以使用 自定义对象作用域:

from keras.utils import CustomObjectScope
with CustomObjectScope({'AttentionLayer': AttentionLayer}):
  model = load_model('my_model.h5')

自定义对象的处理与 load_model, model_from_json, model_from_yaml 的工作方式相同:

from keras.models import model_from_json
model = model_from_json(json_string, custom_objects={'AttentionLayer': AttentionLayer})

2019年6月1号更新:

更详细的使用方法:

如何保存Keras模型?

(1)一个HDF5文件即保存模型的结构又保存模型的权重

我们不推荐使用pickle或cPickle来保存Keras模型。

你可以使用model.save(filepath)将Keras模型和权重保存在一个HDF5文件中,该文件将包含:

模型的结构,以便重构该模型

模型的权重

训练配置(损失函数,优化器等)

优化器的状态,以便于从上次训练中断的地方开始

使用keras.models.load_model(filepath)来重新实例化你的模型,如果文件中存储了训练配置的话,该函数还会同时完成模型的编译。

例子:

from keras.models import load_model
 
model.save('my_model.h5') # creates a HDF5 file 'my_model.h5'
del model # deletes the existing model
 
# returns a compiled model
# identical to the previous one
model = load_model('my_model.h5')

(2)只保存模型的结构

如果你只是希望保存模型的结构,而不包含其权重或配置信息,可以使用:

# save as JSON
json_string = model.to_json()
 
# save as YAML
yaml_string = model.to_yaml()

这项操作将把模型序列化为json或yaml文件,这些文件对人而言也是友好的,如果需要的话你甚至可以手动打开这些文件并进行编辑。

当然,你也可以从保存好的json文件或yaml文件中载入模型:

# model reconstruction from JSON:
from keras.models import model_from_json
model = model_from_json(json_string)
 
# model reconstruction from YAML
model = model_from_yaml(yaml_string)

(3)只保存模型的权重

如果需要保存模型的权重,可通过下面的代码利用HDF5进行保存。注意,在使用前需要确保你已安装了HDF5和其Python库h5py。

model.save_weights('my_model_weights.h5')

如果你需要在代码中初始化一个完全相同的模型,请使用:

model.load_weights('my_model_weights.h5')

如果你需要加载权重到不同的网络结构(有些层一样)中,例如fine-tune或transfer-learning,你可以通过层名字来加载模型:

model.load_weights('my_model_weights.h5', by_name=True)

例如:

"""
假如原模型为:
  model = Sequential()
  model.add(Dense(2, input_dim=3, name="dense_1"))
  model.add(Dense(3, name="dense_2"))
  ...
  model.save_weights(fname)
"""
# new model
model = Sequential()
model.add(Dense(2, input_dim=3, name="dense_1")) # will be loaded
model.add(Dense(10, name="new_dense")) # will not be loaded
 
# load weights from first model; will only affect the first layer, dense_1.
model.load_weights(fname, by_name=True)

以上这篇在Keras中实现保存和加载权重及模型结构就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
pygame加载中文名mp3文件出现error
Mar 31 Python
Python环境搭建之OpenCV的步骤方法
Oct 20 Python
教你用 Python 实现微信跳一跳(Mac+iOS版)
Jan 04 Python
Python获取当前函数名称方法实例分享
Jan 18 Python
python 基本数据类型占用内存空间大小的实例
Jun 12 Python
python3爬虫之设计签名小程序
Jun 19 Python
Python使用一行代码获取上个月是几月
Aug 30 Python
Django中celery执行任务结果的保存方法
Jul 12 Python
树莓派使用python-librtmp实现rtmp推流h264的方法
Jul 22 Python
Python使用eval函数执行动态标表达式过程详解
Oct 17 Python
pandas数值排序的实现实例
Jul 25 Python
Python List remove()实例用法详解
Aug 02 Python
简单了解Python多态与属性运行原理
Jun 15 #Python
Python类super()及私有属性原理解析
Jun 15 #Python
Keras 实现加载预训练模型并冻结网络的层
Jun 15 #Python
Python StringIO及BytesIO包使用方法解析
Jun 15 #Python
Python smtp邮件发送模块用法教程
Jun 15 #Python
pandas数据处理之绘图的实现
Jun 15 #Python
keras中的loss、optimizer、metrics用法
Jun 15 #Python
You might like
php中的登陆login
2007/01/18 PHP
使用PHPMYADMIN操作mysql数据库添加新用户和数据库的方法
2010/04/02 PHP
thinkphp文件处理类Dir.class.php的用法分析
2014/12/08 PHP
学习php设计模式 php实现桥梁模式(bridge)
2015/12/07 PHP
谈谈 PHP7新增功能
2015/12/16 PHP
php微信公众平台示例代码分析(二)
2016/12/06 PHP
PHP实现数组的笛卡尔积运算示例
2017/12/15 PHP
区分JS中的undefined,null,"",0和false
2007/03/08 Javascript
关于document.cookie的使用javascript
2010/10/29 Javascript
js arguments,jcallee caller用法总结
2013/11/30 Javascript
浅析基于WEB前端页面的页面内容搜索的实现思路
2014/06/10 Javascript
jQuery简单实现页面元素置顶时悬浮效果示例
2016/08/01 Javascript
微信小程序 开发之全局配置
2017/05/05 Javascript
vue loadmore 组件滑动加载更多源码解析
2017/07/19 Javascript
React-native桥接Android原生开发详解
2018/01/17 Javascript
jQuery实现数字自动增加或者减少的动画效果示例
2018/12/11 jQuery
Angular8路由守卫原理和使用方法
2019/08/29 Javascript
Python中的赋值、浅拷贝、深拷贝介绍
2015/03/09 Python
Django中更新多个对象数据与删除对象的方法
2015/07/17 Python
Python安装使用命令行交互模块pexpect的基础教程
2016/05/12 Python
使用Python读取二进制文件的实例讲解
2018/07/09 Python
用Python逐行分析文件方法
2019/01/28 Python
python Matplotlib底图中鼠标滑过显示隐藏内容的实例代码
2019/07/31 Python
在Python中使用MySQL--PyMySQL的基本使用方法
2019/11/19 Python
Python获取对象属性的几种方式小结
2020/03/12 Python
使用python实现名片管理系统
2020/06/18 Python
Python extract及contains方法代码实例
2020/09/11 Python
html5超简单的localStorage实现记住密码的功能实现
2017/09/07 HTML / CSS
澳大利亚和新西兰最大的在线旅行社之一:Aunt Betty
2019/08/07 全球购物
4s客服专员岗位职责
2013/12/01 职场文书
酒店销售主管岗位职责
2014/01/04 职场文书
区优秀教师事迹材料
2014/02/10 职场文书
道德之星事迹材料
2014/05/03 职场文书
公司大门门卫岗位职责
2014/06/11 职场文书
SQL SERVER触发器详解
2022/02/24 SQL Server
Redis主从复制操作和配置详情
2022/09/23 Redis