Teradata Vantage 連線 - AWS Glue
設定 Teradata從 Teradata 中讀取寫入 TeradataTeradata 連線選項參考

本文為英文版的機器翻譯版本，如內容有任何歧義或不一致之處，概以英文版為準。

Teradata Vantage 連線

您可以使用 AWS Glue for Spark 從 AWS Glue 4.0 及更新版本中的 Teradata Vantage 讀取和寫入現有的資料表。您可以使用 SQL 查詢定義要從 Teradata 讀取的內容。您可以使用透過 AWS Glue 連線儲存於 AWS Secrets Manager 的使用者名稱和密碼憑證來連線至 Teradata。

如需有關 Teradata 的詳細資訊，請參閱 Teradata 文件。

設定 Teradata 連線

若要從 AWS Glue 連線至 Teradata，您將需要在 AWS Secrets Manager 密碼中建立並儲存 Teradata 憑證，然後將該密碼與 AWS Glue Teradata 連線建立關聯。如果 Teradata 執行個體位於 Amazon VPC 中，您也需要向 AWS Glue Teradata 連線提供網路選項。

若要從 AWS Glue 連線至 Teradata，您可能需要部分先決條件：

  • 如果您要透過 Amazon VPC 存取 Teradata 環境，請設定 Amazon VPC 以允許 AWS Glue 任務與 Teradata 環境進行通訊。我們不建議透過公有網際網路存取 Teradata 環境。

    在 Amazon VPC 中，識別或建立 AWS Glue 將在執行任務時使用的 VPC、子網路及安全群組。此外，您也需要確保 Amazon VPC 已完成設定，以允許 Teradata 執行個體與此位置之間的網路流量。您的任務將需要與 Teradata 用戶端連接埠建立 TCP 連線。如需有關 Teradata 連接埠的詳細資訊，請參閱 Teradata 文件。

    根據您的網路配置，安全 VPC 連線可能需要變更 Amazon VPC 和其他網路服務。如需有關 AWS 連線的詳細資訊，請參閱《Teradata 文件》中的 AWS 連線選項。

設定 AWS Glue Teradata 連線：

  1. 在 Teradata 組態中，識別或建立 AWS Glue 將連線的使用者和密碼 teradataUser 和 teradataPassword。如需詳細資訊，請參閱《Teradata 文件》中的 Vantage 安全概觀。

  2. 在 AWS Secrets Manager 中，使用 Teradata 憑證建立密碼。若要在 Secrets Manager 中建立機密，請遵循 AWS Secrets Manager 文件中建立 AWS Secrets Manager 機密中提供的教學課程。建立機密之後，請保留機密名稱 secretName，以便進行下一個步驟。

    • 在選取鍵/值組時，請使用 teradataUsername 值來建立 user 金鑰對。

    • 在選取鍵/值組時，請使用 teradataPassword 值來建立 password 金鑰對。

  3. 在 AWS Glue 主控台中，依照 新增 AWS Glue 連線 中的步驟建立連線。建立連線之後，請保留連線名稱 connectionName，以便進行下一個步驟。

    • 選取連線類型時，請選取 Teradata。

    • 提供 JDBC URL 時，請提供執行個體的 URL。您也可在 JDBC URL 中，針對特定逗號分隔的連線參數進行硬編碼。URL 必須符合下列格式：jdbc:teradata://teradataHostname/ParameterName=ParameterValue,ParameterName=ParameterValue

      支援的 URL 參數包括：

      • DATABASE：依預設要存取之主機的資料庫名稱。

      • DBS_PORT：在非標準連接埠上執行時所使用的資料庫連接埠。

    • 選取憑證類型時，請選取 AWS Secrets Manager，然後將 AWS 密碼 設定為 secretName。

  4. 在下列情況中，您可能需要其他組態：

    • Amazon VPC 中託管於 AWS 的 Teradata 執行個體

      • 您將需要向定義 Teradata 安全憑證的 AWS Glue 連線提供 Amazon VPC 連線資訊。建立或更新連線時，請在網路選項中設定 VPC、子網路及安全群組。

建立 AWS Glue Teradata 連線後，您將需要執行下列步驟，才能呼叫連線方法。

  • 授予與您 AWS Glue 任務許可相關聯的 IAM 角色，以讀取 secretName。

  • 在您的 AWS Glue 任務組態中，提供 connectionName 作為其他網路連線。

從 Teradata 中讀取

先決條件：

  • 您想要讀取的 Teradata 資料表。您將需要資料表名稱 tableName。

  • 完成設定的 AWS Glue Teradata 連線，可提供驗證資訊。完成步驟設定連至 Teradata 的連線，以設定身份驗證資訊。您將會需要 AWS Glue 連線的名稱，connectionName。

例如：

teradata_read_table = glueContext.create_dynamic_frame.from_options(
    connection_type="teradata",
    connection_options={
        "connectionName": "connectionName",
        "dbtable": "tableName"
    }
)

您也可提供 SELECT SQL 查詢，以篩選傳回 DynamicFrame 的結果。您將需要設定 query。

例如：

teradata_read_query = glueContext.create_dynamic_frame.from_options(
    connection_type="teradata",
    connection_options={
        "connectionName": "connectionName",
        "query": "query"
    }
)

寫入 Teradata 資料表

先決條件：您想要寫入的 Teradata 資料表 tableName。您必須先建立資料表，再呼叫連線方法。

例如：

teradata_write = glueContext.write_dynamic_frame.from_options(
    connection_type="teradata",
    connection_options={
        "connectionName": "connectionName", 
        "dbtable": "tableName"
    }
)

Teradata 連線選項參考

  • connectionName – 必要。用於讀取/寫入。完成設定之 AWS Glue Teradata 連線的名稱，可向連線方法提供驗證和網路資訊。

  • dbtable：除非已提供 query，否則為寫入和讀取的必要項目。用於讀取/寫入。您的連線方法將會互動的資料表名稱。

  • query – 用於讀取。定義從 Teradata 讀取時應擷取之內容的 SELECT SQL 查詢。