Keras-Tuner：是否可以在目标/度量函数中使用测试/验证集？

如何解决Keras-Tuner：是否可以在目标/度量函数中使用测试/验证集？

是否可以基于测试集而不是训练集使用 keras-tuner 对模型性能进行评分/评估？我问这个，因为到目前为止，我的理解是在 tuner.search() 中用作目标的度量函数仅使用 y_true 和 y_pred 作为输入参数，它们都引用到训练集（如果我错了，请纠正我）。
那么如何在我的度量函数中使用测试数据？

解决方法

简短回答：您不能，也不应该在超参数调整期间使用测试数据指标。 KerasTuner 允许您使用验证数据指标作为目标，我鼓励这样做。但是，最终测试应始终在所有调优和训练完成后进行，并且不应使用任何训练或验证数据。

要使用验证指标，只需告诉 KT 其目标是名称中以 val 开头的内容。