AWS Glue を使用した SSIS の への変換 AWS SCT

AWS Glue を使用して SSIS パッケージを に変換するには AWS SCT

1. で新しいプロジェクトを作成する AWS SCT か、既存のプロジェクトを開きます。詳細については、「でのプロジェクトの開始と管理 AWS SCT」を参照してください。

2. メニューから [ソースを追加] を選択し、新しいソース SSIS パッケージをプロジェクトに追加します。

3. [SQL Server 統合サービス] を選択し、以下を完了します。

   • [接続名] — 接続の名前を入力します。 AWS SCT はこの名前をメタデータツリーに表示します。

   • [SSIS パッケージフォルダ] — パッケージを含む SSIS プロジェクトフォルダーのパスを選択します。

   AWS SCT は、ローカルフォルダからプロジェクトファイル (拡張子 .dtsx、.conmgrまたは のファイル.params) を読み取り、解析します。次に、それらをカテゴリの AWS SCT ツリーに整理します。

4. メニューから [ターゲットを追加] を選択し、ソース SSIS パッケージを変換する新しいターゲットプラットフォームを追加します。

5. [AWS Glue] を選択して、以下の手順を完了します。

   • [接続名] — 接続の名前を入力します。 AWS SCT は、この名前をメタデータツリーに表示します。

   • AWS プロファイルからコピー – 使用するプロファイルを選択します。

   • AWS アクセスキー – AWS アクセスキーを入力します。

   • AWS シークレットキー – AWS シークレットキーを入力します。

   • リージョン – リストから AWS リージョン 使用する を選択します。

   • [Amazon S3 バケットフォルダ] — 使用する予定の Amazon S3 バケットのフォルダパスを入力します。

   仮想 AWS Glue ターゲットを使用できます。この場合、接続認証情報を指定する必要はありません。詳細については、「AWS Schema Conversion Tool の仮想ターゲットへのマッピング」を参照してください。

6. ソース SSIS パッケージと AWS Glue ターゲットを含む新しいマッピングルールを作成します。詳細については、「AWS Schema Conversion Tool での新しいデータ型のマッピング」を参照してください。

7. [ビュー] メニューで、[メインビュー] を選択します。

8. SSIS ツリービューで、[Connection managers] (接続マネージャ) コンテキスト (右クリック) メニューを開き、[Configure connections] (接続の設定) を選択します。

9. プロジェクト接続マネージャを設定します。

   SSIS 接続マネージャーの接続マッピングを設定するには、 AWS Glue 対応する SSIS 接続マネージャーの接続を指定します。 AWS Glue 接続が既に作成されていることを確認します。

   1. [Connections] (接続) で、[Project connection] (プロジェクト接続) を選択します。

   2. Glue カタログ接続では、適切な AWS Glue 接続を選択します。

10. パッケージ接続マネージャを設定します。

    1. [接続] で、パッケージを選択します。

    2. Glue カタログ接続で、適切な AWS Glue 接続を選択します。

    3. パッケージで使用可能なすべての接続について、これらのアクションを繰り返します。

11. [Apply] (適用) を選択します。

12. パッケージを変換します。ソースツリービューで、[パッケージ] を探します。パッケージのコンテキスト (右クリック) メニューを開き、[パッケージの変換] を選択します。

13. 変換されたスクリプトを Amazon S3 に保存します。ターゲットのツリービューで、[パッケージスクリプト] を見つけます。変換されたスクリプトのコンテキスト (右クリック) メニューを開き、[S3 に保存] を選択します。

14. AWS Glue ジョブを設定します。ターゲットのツリービューで、[Package スクリプト] を見つけます。変換したスクリプトのコンテキスト (右クリック) メニューを開き、 AWS Glue ジョブの設定を選択します。

15. 次に示す、3 つの設定セクションを完了します。

    1. [デザインデータフロー] セクションに入力します。

       • [実行戦略] — ジョブで ETL スクリプトを実行する方法を選択します。[シーケンシャル] を選択すると、ウィザードで指定した順序でスクリプトが実行されます。[並行] を選択すると、ウィザードで指定された順序を無視してスクリプトが並行して実行されます。

       • [スクリプト] — 変換したスクリプトの名前を選択します。

       • [次へ] をクリックします。

    2. [Job プロパティ]セクションに入力します。

       • 名前 – AWS Glue ジョブの名前を入力します。

       • [IAM ロール] – ジョブの実行とデータストアへのアクセスに使用されるリソースの認可に使用する IAM ロールを選択します。

       • [スクリプトファイル名] — 変換したスクリプトの名前を入力します。

       • [スクリプトファイル S3 パス] — 変換されたスクリプトへの Amazon S3 パスを入力します。

       • [SSE-S3 を使用してスクリプトを暗号化] — Amazon S3 が管理する暗号化キー (SSE-S3) によるサーバー側の暗号化を使用してデータを保護するには、このオプションを選択します。

       • 一時ディレクトリ – 中間結果の一時ディレクトリへの Amazon S3 パスを入力します。 AWS Glue AWS Glue 組み込み変換はこのディレクトリを使用して Amazon Redshift に読み書きします。

       • AWS SCT は Python ライブラリのパスを自動的に生成します。このパスは [生成された Python ライブラリパス] で確認できます。この自動生成されたパスは編集できません。追加の Python ライブラリを使用するには、[ユーザ Python ライブラリパス] にパスを入力します。

       • [ユーザ Python ライブラリパス] — 追加のユーザ Python ライブラリのパスを入力します。Amazon S3 のパスはカンマで区切ります。

       • [依存 jars ファイルのパス] – 依存 .jars ファイルのパスを入力します。Amazon S3 のパスはカンマで区切ります。

       • [参照ファイルパス] — 設定ファイルなど、スクリプトに必要な追加ファイルのパスを入力します。Amazon S3 のパスはカンマで区切ります。

       • [最大キャパシティー] – 最大キャパシティーは、このジョブの実行時に割り当てることができる AWS Glue データ処理ユニット (DPU) の数です。2 から 100 の任意の整数を入力できます。デフォルトは 2 です。

       • [同時実行の最大数] – このジョブで許可される同時実行の最大数を設定します。デフォルトは 1 です。このしきい値に達するとエラー AWS Glue が返されます。

       • [Job タイムアウト (分)] — ジョブの暴走を防ぐため、ETL ジョブのタイムアウト値を入力します。バッチジョブのデフォルト値は 2880 分 (48 時間) です。ジョブがこの制限を超えると、ジョブの実行状態は TIMEOUT に変わります。

       • 遅延通知しきい値 (分) - が遅延通知 AWS SCT を送信するまでにしきい値を分単位で入力します。

       • 再試行回数 – ジョブが失敗した場合に が自動的に再起動 AWS Glue する回数 (0～10) を入力します。タイムアウト制限に達したジョブは再起動されません。デフォルトは 0 です。

       • [次へ] を選択します。

    3. 必要な接続を設定します。

       1. すべての接続から、必要な AWS Glue 接続を選択し、選択した接続のリストに追加します。

       2. [Finish] を選択してください。

16. 設定済みの AWS Glue ジョブを作成します。ターゲットのツリービューで、[ETL ジョブ] を見つけて展開します。設定した ETL ジョブのコンテキスト (右クリック) メニューを開き、 AWS Glue ジョブの作成を選択します。

17. AWS Glue ジョブを実行します。

    1. https://console.aws.amazon.com/glue/ で AWS Glue コンソールを開きます。

    2. ナビゲーションペインで ジョブを選択します。

    3. [ジョブの追加] タブで、実行するジョブを選択します。

    4. [Action] (アクション) タブで、[Run job] (ジョブの実行) を選択します。