如何理解 Google Cloud Datastream UNSUPPORTED_EVENTS_DISCARDED

问题描述

有没有办法获得有关谷歌云数据流中不受支持的事件的更多详细信息?

我正在运行来自 MysqL 的数据流并且有一些 UNSUPPORTED_EVENTS_disCARDED,我想了解这些事件是什么。

在日志资源管理器中,详细信息仅限于以下内容

消息:“丢弃 1 个不受支持的事件,原因代码为:MysqL_UNKNowN_ERROR。最新丢弃的事件详细信息:获取日志时发生意外错误MysqL-bin.013919,log_pos:91832523。” event_code: "UNSUPPORTED_EVENTS_disCARDED"

解决方法

Here 是关于 datastream/mysql 的一些限制:

  • 事件的大小限制为 3 MB
  • 超过 1 亿行的表
  • 并非所有对源架构的更改都可以自动检测

我怀疑您获取的某些数据达到了限制并返回了错误。我建议查看有限制的文档并确保可以获取所有数据。