SageMaker超调节的AUC客观指标

问题描述

我已经使用带有SageMaker的AWS内置算法训练了二进制分类模型,并希望使用AUC和混淆矩阵评估模型。但是,我看到SageMaker的Training and HyperTuner工作只是接受“准确性”指标。

  1. SageMaker中是否可以为内置图像分类算法添加自定义指标?
  2. 据我了解,AUC / Confusion Matrix / Precision / Recall / F1是二进制分类器的良好指标,那么为什么AWS内置图像分类算法缺少这些指标?
  3. 有没有一种方法可以批量转换测试数据并获得这些指标以评估模型,因为仅准确性就无法评估?

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)