使用Wrangler将Avro文件转换为Cloud Datafusion中的JSON

问题描述

我尝试读取Avro文件,使用Wrangler进行基本转换(删除名称为Ben的记录),然后将结果作为JSON文件写入Google云存储。 Avro文件具有以下架构:

{ “ type”:“记录”, “ name”:“ etlSchemaBody”, “字段”:[ { “ type”:“ string”, “ name”:“名称” } ] }

牧马人的转变如下: transformation

以下是JSON文件的输出架构: output schema

当我运行管道时,它成功运行,并且在云存储中创建了JSON文件。但是JSON输出为空。 尝试预览运行时,出现以下消息: warning message

为什么gcloud存储中的JSON输出文件为空?

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)