将文件安全传输到 Google Cloud Storage

问题描述

我正在尝试为数据湖创建架构,我已经在本地机器中生成了我的 CSV、txt 和 Avro 文件,我想将它们上传到 Google Cloud Storage,但我看到了我必须通过公共互联网,我不想那样做。

为了尽可能安全,我必须做哪些选择?

我试图创建一个 Compute Engine 环境,通过 SFTP 将文件上传到此处,然后将它们移动到 Cloud Storage,但这会增加我的成本。

解决方法

我认为这是 Google VPC 的用例。产品说明中提供的主要好处是:

对于本地,您可以与单个 VPC 中的所有区域共享 VPC 和本地资源之间的连接

如果您更深入地查看文档,您可能会发现文档 Configuring Private Google Access for on-premises hosts。也可能会找到一些信息here。这对您来说可能是一个不错的选择。