微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

来自 S3 的 CSV 文件的数据屏蔽

如何解决来自 S3 的 CSV 文件的数据屏蔽

我的公司在德国工作,我们有一些处理数据的规则。

我的存储桶中有 CSV 文件。这些文件也有一些 PII(公共可识别信息)和非 PII 数据。我想屏蔽 PII 数据并将其保存在同一个存储桶中。我想在做最终报告时揭开它的面纱。

解决方法

通常,在 AWS 中在存储桶内的文件夹级别设置权限比在存储桶级别设置权限要困难得多。由于存储桶基本上是免费的,因此我建议为 PII 和掩码 PII 数据设置单独的存储桶。

更好的解决方案可能是使用 Athena 视图公开屏蔽的 PII 数据。使用屏蔽 PII 数据的 SQL 构建视图并将该屏蔽视图公开给您的用户。这样您就不需要维护数据的两个副本、用于屏蔽数据的 ETL 作业或存储桶权限。

https://docs.aws.amazon.com/athena/latest/ug/views.html

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。