如何解决如何从德鲁伊日志中隐藏/屏蔽S3凭据
我们已经在如下所述的druid提取脚本的job.properties中填充了S3凭证。
"jobProperties" : {
"fs.s3a.impl" : "org.apache.hadoop.fs.s3a.S3AFileSystem","fs.AbstractFileSystem.s3a.impl" : "org.apache.hadoop.fs.s3a.S3A","fs.s3a.access.key" : "YOUR_ACCESS_KEY","fs.s3a.secret.key" : "YOUR_SECRET_KEY"
}
但是,此秘密和访问密钥被打印在日志中,并引起隐私/安全问题。您能否让我知道如何隐藏/隐藏凭据。
我也尝试了以下方法...但是没有用。
export AWS_ACCESS_KEY_ID=YOUR_ACCESS_KEY
export AWS_SECRET_ACCESS_KEY=YOUR_SECRET_KEY
export AWS_DEFAULT_REGION=
"jobProperties" : {
"fs.s3a.impl" : "org.apache.hadoop.fs.s3a.S3AFileSystem","fs.s3.awsAccessKeyId": {
"type": "environment","variable": "AWS_ACCESS_KEY_ID"
},"fs.s3.awsSecretAccessKey": {
"type": "environment","variable": "AWS_SECRET_ACCESS_KEY"
},"fs.s3.impl": "org.apache.hadoop.fs.s3native.NativeS3FileSystem","fs.s3n.awsAccessKeyId":{
"type": "environment","fs.s3n.awsSecretAccessKey": {
"type": "environment","variable": "AWS_SECRET_ACCESS_KEY"
}
}
谢谢
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。