【问题标题】:Data masking of CSV files from S3来自 S3 的 CSV 文件的数据屏蔽
【发布时间】:2021-07-04 13:28:45
【问题描述】:

我的公司在德国工作,我们有一些处理数据的规则。

我的存储桶中有 CSV 文件。这些文件也有一些 PII(公共身份信息)和非 PII 数据。我想屏蔽 PII 数据并将其保存在同一个存储桶中。而且我想在进行最终报告时揭开它的面纱。

【问题讨论】:

标签: amazon-web-services amazon-s3 airflow masking


【解决方案1】:

通常,在 AWS 中,在存储桶内的文件夹级别设置权限比在存储桶级别设置权限要困难得多。由于存储桶基本上是免费的,因此我建议为 PII 和掩码 PII 数据设置单独的存储桶。

更好的解决方案可能是使用 Athena 视图公开屏蔽的 PII 数据。使用屏蔽 PII 数据的 SQL 构建视图,并向用户公开该屏蔽视图。这样您就无需维护数据的两个副本、用于屏蔽数据的 ETL 作业或存储桶权限。

https://docs.aws.amazon.com/athena/latest/ug/views.html

【讨论】:

  • 您能否就我应该遵循什么以及应该注意的事项提供更多见解..
  • 一般?加密一切。启用“阻止所有公共访问”。定期检查架构良好的框架并审核安全性。
猜你喜欢
  • 2021-01-30
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2022-01-03
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多