ModelCheckpoint, EarlyStopping

`ModelCheckpoint` 和 `EarlyStopping` 是 Keras 提供的两个回调函数，用于在训练神经网络时进行模型保存和早期停止训练的操作。

`ModelCheckpoint` 回调函数用于定期保存训练过程中的模型权重，以便在训练过程中出现中断或意外情况时，可以继续训练或者恢复最佳模型。该回调函数可以设置保存模型的路径、保存的文件名、保存的频率、是否只保存最佳模型等参数。例如：

from keras.callbacks import ModelCheckpoint

checkpoint = ModelCheckpoint('model.h5', monitor='val_loss', verbose=1, save_best_only=True, mode='min')

其中，`model.h5` 是保存模型的路径和文件名，`monitor` 是监控的指标，例如 validation loss，`verbose` 是输出保存模型的信息，`save_best_only` 表示只保存最佳模型，`mode` 表示监控指标的模式，例如最小化指标。

`EarlyStopping` 回调函数用于在训练过程中检测验证集的性能是否有提升，如果连续若干个 epoch 验证集的指标没有提升，则停止训练。该回调函数可以设置检测的监控指标、检测的循环周期、最大等待轮数等参数。例如：

from keras.callbacks import EarlyStopping

earlystop = EarlyStopping(monitor='val_loss', min_delta=0, patience=10, verbose=1, mode='min')

其中，`monitor` 是监控的指标，例如 validation loss，`min_delta` 是最小变化量，即当指标变化小于该值时认为没有提升，`patience` 是最大等待轮数，即当连续多少个 epoch 没有提升时停止训练，`verbose` 是输出停止训练的信息，`mode` 表示监控指标的模式，例如最小化指标。

在训练过程中，可以将这两个回调函数传递给 `fit` 函数，例如：

model.fit(X_train, y_train, validation_data=(X_val, y_val), epochs=100, batch_size=32, callbacks=[checkpoint, earlystop])

这样就可以在训练过程中自动保存模型和早期停止训练。