S3源配置SCDF

问题描述

尝试使用Stream S3源将远程文件从AWS S3存储桶下载到GCF容器中的共享NFS文件夹。 以下是流配置,其中cloud.aws.credentials.instanceProfile配置为'false',但具有有效的访问密钥和密钥。似乎没有用。除下面的配置外,还需要进行其他任何配置。

S3Get:s3 --management.metrics.export.prometheus.enabled = true --s3.remote-dir = / mybucket --cloud.aws.credentials.accessKey =' ' --trigger.fixed-delay = 60 --cloud.aws.region.static =美国西部2 --cloud.aws.credentials.secretKey =' '- cloud.aws.credentials.instanceProfile ='******'--s3.local-dir = / disk1 --management.metrics.export.prometheus.rsocket.port = 7001 --management.metrics.export.prometheus .rsocket.enabled = true --file.consumer.mode = ref --management.metrics.export.prometheus.rsocket.host = prometheus-proxy --cloud.aws.stack.auto = false | log --management.metrics.export.prometheus.enabled = true --management.metrics.export.prometheus.rsocket.port = 7001 --management.metrics.export.prometheus.rsocket.enabled = true --management.metrics。 export.prometheus.rsocket.host = prometheus-proxy


我明白了,因为instanceProfile设置为false,所以可以忽略它。 2020-11-02 20:25:07.905警告1 --- [main] com.amazonaws.util.EC2MetadataUtils:无法检索请求的元数据(/ latest / Meta-data / instance-id)。在http://169.254.169.254/latest/meta-data/instance-id

找不到请求的元数据

com.amazonaws.SdkClientException:在http://169.254.169.254/latest/meta-data/instance-id上找不到请求的元数据 在com.amazonaws.internal.EC2CredentialsUtils.readResource(EC2CredentialsUtils.java:122)〜[aws-java-sdk-core-1.11.415.jar!/:na]

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)