如何从德鲁伊日志中隐藏/屏蔽S3凭据

问题描述

我们已经在如下所述的druid提取脚本的job.properties中填充了S3凭证。

"jobProperties" : {
  "fs.s3a.impl" : "org.apache.hadoop.fs.s3a.S3AFileSystem","fs.AbstractFileSystem.s3a.impl" : "org.apache.hadoop.fs.s3a.S3A","fs.s3a.access.key" : "YOUR_ACCESS_KEY","fs.s3a.secret.key" : "YOUR_SECRET_KEY"
}

但是，此秘密和访问密钥被打印在日志中，并引起隐私/安全问题。您能否让我知道如何隐藏/隐藏凭据。

我也尝试了以下方法...但是没有用。

export AWS_ACCESS_KEY_ID=YOUR_ACCESS_KEY
export AWS_SECRET_ACCESS_KEY=YOUR_SECRET_KEY
export AWS_DEFAULT_REGION=

  "jobProperties" : {
  "fs.s3a.impl" : "org.apache.hadoop.fs.s3a.S3AFileSystem","fs.s3.awsAccessKeyId": {
               "type": "environment","variable": "AWS_ACCESS_KEY_ID"
              },"fs.s3.awsSecretAccessKey": {
              "type": "environment","variable": "AWS_SECRET_ACCESS_KEY"
             },"fs.s3.impl": "org.apache.hadoop.fs.s3native.NativeS3FileSystem","fs.s3n.awsAccessKeyId":{
               "type": "environment","fs.s3n.awsSecretAccessKey": {
              "type": "environment","variable": "AWS_SECRET_ACCESS_KEY"
             }
}

谢谢

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）