Trains 会自动记录 Tensorboard HParams 吗？

Question

我知道可以将超参数作为字典发送到火车。

但是它也可以自动记录使用 TF2 HParams 模块记录的超参数吗？

编辑：这是在HParams 教程中使用hp.hparams(hparams) 。

Answer 1

免责声明：我是 allegro.ai Trains 团队的一员

从屏幕抓取来看，似乎是多次运行具有不同的超参数，以及用于显示的平行坐标图。 这相当于使用不同的超参数多次运行相同的基础实验并将结果与​​ Trains Web UI 进行比较，到目前为止一切顺利:)

基于HParam 接口，必须使用 TensorFlow 才能从 HP 采样，通常在代码中。 您如何将这种方法扩展到多个实验？ （这不仅仅是自动记录 hparams 而是您需要创建多个实验，每个参数集一个）

使用外部优化器进行优化不是更有意义吗？ 这样你就可以扩展到多台机器，并且有更复杂的优化策略（比如 Optuna），你可以在 train examples/optimization 中找到一些例子。