问题描述
我正在使用Apache Beam将我的Kafka事件写入数据库。我正在使用下面的代码编写事件。当数据格式正确时,会将数据写入数据库。但是,如果数据中缺少任何必需的列,则管道将失败。
我可以将错误作为单独的集合吗?然后,我可以分别处理这些错误。
PCollection<Row> transformToRow = // kafkaRead events and then transformed to Row
PDone expand = JdbcIO.<Row>write()
.withDataSourceConfiguration(JdbcIO.DataSourceConfiguration.create("driverClass","connectionString")
.withUsername("username")
.withPassword("password"))
.withTable("table_name")
.expand(transformToRow);
解决方法
暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!
如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。
小编邮箱:dio#foxmail.com (将#修改为@)