在 aws 胶水工作中建立联系是否必不可少?

问题描述

我在 glue 元数据目录中有我的数据表。我需要在我的胶水作业的 python shell 脚本中使用这些数据。当我创建粘合作业时,它最后让我可以选择连接类型。添加连接是否必不可少?如果表在胶目录中,连接类型是什么?

解决方法

如果表在 Glue Catalog 中,则不需要任何连接。只要您的数据源/数据接收器是 Glue/S3,除了 VPC S3 端点之外,您不需要连接。

如果您想连接到 Redshift 或 MySQL 数据库,您需要一个连接。