【问题标题】:How to continue training for a saved and then loaded Keras model?如何继续训练已保存然后加载的 Keras 模型?
【发布时间】:2018-01-07 13:04:51
【问题描述】:

official keras documentation 之后,我能够保存和加载模型。 Keras 使用 tensorflow 作为后端。

但是,是否可以对此类保存和加载的模型进行更多训练。

以下是从Link 借来的代码。然后编辑。

在以下代码中,模型被训练了 75 个 epoch 并保存然后再次加载。

但是,当我尝试用更多 75 个 epoch 进一步训练它时,似乎模型没有经过训练,我没有任何修改就得到了相同的结果。

# -*- coding: utf-8 -*-

from keras.models import Sequential
from keras.layers import Dense
from keras.models import model_from_json
import numpy
import os
# fix random seed for reproducibility
numpy.random.seed(7)
# load pima indians dataset
dataset = numpy.loadtxt("pima-indians-diabetes.txt", delimiter=",")
# split into input (X) and output (Y) variables
X = dataset[:,0:8]
Y = dataset[:,8]
# create model
model = Sequential()
model.add(Dense(12, input_dim=8, kernel_initializer='uniform', activation='relu'))
model.add(Dense(8, kernel_initializer='uniform', activation='relu'))
model.add(Dense(1, kernel_initializer='uniform', activation='sigmoid'))
# Compile model
model.compile(loss='binary_crossentropy', optimizer='adam', metrics=['accuracy'])
# Fit the model
model.fit(X, Y, epochs=75, batch_size=10, verbose=0)
# evaluate the model
scores = model.evaluate(X, Y, verbose=0)
print("%s: %.2f%%" % (model.metrics_names[1], scores[1]*100))

# serialize model to JSON
model_json = model.to_json()
with open("model.json", "w") as json_file: json_file.write(model_json)

# serialize weights to HDF5
model.save_weights("model.h5")
print("Saved model to disk")

# later...

# load json and create model
json_file = open('model.json', 'r')
loaded_model_json = json_file.read()
json_file.close()
loaded_model = model_from_json(loaded_model_json)
# load weights into new model
loaded_model.load_weights("model.h5")
print("Loaded model from disk")

# evaluate loaded model on test data
loaded_model.compile(loss='binary_crossentropy', optimizer='rmsprop', metrics=['accuracy'])
score = loaded_model.evaluate(X, Y, verbose=0)
print("%s: %.2f%%" % (loaded_model.metrics_names[1], score[1]*100))


model.fit(X, Y, epochs=75, batch_size=10, verbose=0)
score = loaded_model.evaluate(X, Y, verbose=0)
print("%s: %.2f%%" % (loaded_model.metrics_names[1], score[1]*100))

【问题讨论】:

  • 不要将save_weights()load_weights()Adam 一起使用。这些函数只保存模型权重,但不保存优化器。请改用model.save()load_model()

标签: deep-learning keras


【解决方案1】:

从该代码看来,您对loaded_model 进行了两次评估,但您的额外培训仅在model 上完成。您可以尝试这样的操作,而不是复制和粘贴不同的变量名……我发现跟踪起来更容易一些。此外,在 cmets 之间的代码中添加一些空格,这将有助于保持清晰和有条理。

# Save a model you have trained
model.save('trained_model.h5')

# Delete the model
del model

# Load the model
model = load_model('trained_model.h5')

# Train more on the loaded model
model.fit(data, labels, epochs, batch_size)

【讨论】:

  • 那个,加上model.save的使用,额外保存了训练配置和优化器的状态。
猜你喜欢
  • 2018-01-05
  • 2021-03-30
  • 1970-01-01
  • 1970-01-01
  • 2019-12-05
  • 2017-07-28
  • 1970-01-01
  • 2018-08-28
  • 2018-10-16
相关资源
最近更新 更多