如何在Evaluator中计算其他统计信息?

问题描述

在TFX评估器中,除了以TFMA格式描述的指标外,我还想计算与我的数据集上模型的性能相关的统计信息。当然,我还希望获得一种访问这些统计信息的方法:通过组件的输出,或者让组件将统计信息上载到某个地方。

我猜想将需要一些定制代码(用于计算和返回统计信息),但是我真的不知道多少,什么是编写它的最佳方法。关于这个主题有什么想法吗?

谢谢

解决方法

有两种方法可以实现此目标,具体取决于您如何看待功能在TFX流中的位置。

  1. 编写自定义TFX组件-这需要很多工作,并且您需要定义很多东西。
  2. 重用现有组件-我们可以从头继承现有组件并通过覆盖执行程序功能对其进行自定义,而不是完全从头开始为TFX编写组件。

我建议以下博客始于:
Anatomy of TFX Component
Creating custom Components