Database Migration Service (DMS) | 创建复制任务 - AMS 高级更改类型参考

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

Database Migration Service (DMS) | 创建复制任务

用于创建数据库迁移服务 (DMS) 复制任务。

完整分类:部署 | 高级堆栈组件 | Database Migration Service (DMS) | 创建复制任务

更改类型详情

更改类型 ID

ct-1d2fml15b9eth

当前版本

1.0

预期执行时长

60 分钟

AWS 批准

必需

客户批准

可选

执行模式

自动

附加信息

创建 AWS DMS 复制任务

AMS 控制台中此更改类型的屏幕截图:

Create DMS replication task interface showing ID, version, and execution mode details.

它是如何运作的:

  1. 导航到 “创建 RFC” 页面:在 AMS 控制台的左侧导航窗格中,单击RFCs打开 RFCs 列表页面,然后单击 “创建 R FC”。

  2. 在默认的 “浏览更改类型” 视图中选择常用更改类型 (CT),或者在 “按类别选择” 视图中选择 CT。

    • 按更改类型浏览:您可以单击 “快速创建” 区域中的常用 CT,立即打开 “运行 RFC” 页面。请注意,您不能使用快速创建来选择较旧的 CT 版本。

      要进行排序 CTs,请使用卡片视图或表格视图中的所有更改类型区域。在任一视图中,选择一个 CT,然后单击 “创建 RFC” 打开 “运行 RFC” 页面。如果适用,“创建 RFC” 按钮旁边会出现 “使用旧版本创建” 选项。

    • 按类别选择:选择类别、子类别、项目和操作,CT 详细信息框将打开,并显示 “使用旧版本创建” 选项(如果适用)。单击 “创建 RFC” 打开 “运行 RFC” 页面。

  3. 在 “运行 RFC” 页面上,打开 CT 名称区域以查看 CT 详细信息框。必须填写主题(如果您在 “浏览更改类型” 视图中选择 CT,则会为您填写此主题)。打开其他配置区域以添加有关 RFC 的信息。

    执行配置区域中,使用可用的下拉列表或输入所需参数的值。要配置可选的执行参数,请打开其他配置区域。

  4. 完成后,单击 “运行”。如果没有错误,则会显示成功创建的 RFC 页面,其中包含已提交的 RFC 详细信息和初始运行输出。

  5. 打开运行参数区域以查看您提交的配置。刷新页面以更新 RFC 的执行状态。(可选)取消 RFC 或使用页面顶部的选项创建一个 RFC 的副本。

它是如何运作的:

  1. 使用 Inline Create(您发出包含所有 RFC 和执行参数的create-rfc命令)或模板创建(创建两个 JSON 文件,一个用于 RFC 参数,一个用于执行参数),然后以这两个文件作为输入发出create-rfc命令。这里描述了这两种方法。

  2. 提交带有返回的 RFC ID 的 RFC: aws amscm submit-rfc --rfc-id ID 命令。

    监控 RFC: aws amscm get-rfc --rfc-id ID 命令。

要检查更改类型版本,请使用以下命令:

aws amscm list-change-type-version-summaries --filter Attribute=ChangeTypeId,Value=CT_ID
注意

您可以将任何CreateRfc参数与任何 RFC 一起使用,无论它们是否属于变更类型的架构的一部分。例如,要在 RFC 状态更改时收到通知,请将此行添加到请求的 RFC 参数部分(不是执行参数)。--notification "{\"Email\": {\"EmailRecipients\" : [\"email@example.com\"]}}"有关所有 CreateRfc 参数的列表,请参阅《AMS 变更管理 API 参考》。

内联创建

使用内联提供的执行参数(内联提供执行参数时使用转义引号)发出 create RFC 命令,然后提交返回的 RFC ID。例如,你可以用这样的东西替换内容:

aws --profile saml --region us-east-1 amscm create-rfc --change-type-id "ct-1d2fml15b9eth" --change-type-version "1.0" --title "TestDMSRepTask" --execution-parameters "{\"Description\":\"TestRepTask\",\"VpcId\":\"VPC-ID\",\"Name\":\"DMSRepTask\",\"Parameters\":{\"CdcStartTime\":\1533776569\"MigrationType\":\"full-load\",\"ReplicationInstanceArn\":\"REP_INSTANCE_ARN\",\"SourceEndpointArn\":\"SOURCE_ENDPOINT_ARN\",\"TableMappings\":\"{\\\"rules\\\": [{\\\"rule-type\\\": \\\"selection\\\",\\\"rule-id\\\": \\\"1\\\",\\\"rule-name\\\": \\\"1\\\",\\\"object-locator\\\": {\\\"schema-name\\\": \\\"Test\\\",\\\"table-name\\\": \\\"%\\\"}, \\\"rule-action\\\": \\\"include\\\"}] }\",\"TargetEndpointArn\":\"TARGET_ENDPOINT_ARN\"},\"StackTemplateId\":\"stm-eos7uq0usnmeggdet\",\"TimeoutInMinutes\":60}"

模板创建

  1. 将此更改类型的执行参数输出到 JSON 文件;此示例将其命名为 CreateDmsRtParams .json:

    aws amscm get-change-type-version --change-type-id "ct-1d2fml15b9eth" --query "ChangeTypeVersion.ExecutionInputSchema" --output text > CreateDmsRtParams.json
  2. 修改并保存执行参数 JSON 文件。例如,你可以用这样的东西替换内容:

    { "Description": "DMSTestRepTask", "VpcId": "VPC_ID", "StackTemplateId": "stm-eos7uq0usnmeggdet", "Name": "Test DMS RT", "TimeoutInMinutes": 60, "Parameters": { "CdcStartTime": "1533776569", "MigrationType": "full-load", "ReplicationInstanceArn": "REP_INSTANCE_ARN", "SourceEndpointArn": "SOURCE_ENDPOINT_ARN", "TargetEndpointArn": "TARGET_ENDPOINT_ARN" "TableMappings": {"rules": [{"rule-type": "selection","rule-id": "1","rule-name": "1","object-locator": {"schema-name": "Test","table-name": "%"}, "rule-action": "include"}] }", } }
  3. 将 JSON 模板输出到当前文件夹中的一个文件中;此示例将其命名为 CreateDmsRtRfc .json:

    aws amscm create-rfc --generate-cli-skeleton > CreateDmsRtRfc.json
  4. 修改并保存 CreateDmsRtRfc .json 文件。例如,你可以用这样的东西替换内容:

    { "ChangeTypeVersion": "1.0", "ChangeTypeId": "ct-1d2fml15b9eth", "Title": "DMS-RI-Create-RFC" }
  5. 创建 RFC,指定执行参数文件和 CreateDmsRtRfc 文件:

    aws amscm create-rfc --cli-input-json file://CreateDmsRtRfc.json --execution-parameters file://CreateDmsRtParams.json

    您在响应中收到新 RFC 的 ID,并可以使用它来提交和监控 RFC。在您提交之前,RFC 仍处于编辑状态且无法启动。

您可以创建捕获三种不同类型的更改或数据的 AWS DMS 任务。有关更多信息,请参阅使用 AWS DMS 任务创建任务和使用 A WS DMS 创建用于持续复制的任务

执行输入参数

有关执行输入参数的详细信息,请参见变更架构类型 ct-1d2fml15b9eth

示例:必填参数

{ "Description": "Test Description", "VpcId": "vpc-1234567890abcdef0", "Name": "dmstask01", "StackTemplateId": "stm-eos7uq0usnmeggdet", "TimeoutInMinutes": 60, "Parameters": { "MigrationType": "full-load", "ReplicationInstanceArn": "arn:aws:dms:us-east-1:123456789123:rep:6LDPDHOHCSDDSWHJP0UQJPAZLW", "SourceEndpointArn": "arn:aws:dms:us-east-1:123456789123:endpoint:GLYHN8SUXLO5DS4PU4ODJ7KP0O", "TableMappings": "{ \"rules\": [ { \"rule-type\": \"selection\", \"rule-id\": \"1\", \"rule-name\": \"1\", \"object-locator\": { \"schema-name\": \"Test\", \"table-name\": \"%\" }, \"rule-action\": \"include\" } ] }", "TargetEndpointArn": "arn:aws:dms:us-east-1:123456789123:endpoint:6PLJC4V60JGPKXN6OUOFWNJIUE" } }

示例:所有参数

{ "Description": "Test Description", "VpcId": "vpc-317a9856", "Name": "dmstask01", "StackTemplateId": "stm-eos7uq0usnmeggdet", "TimeoutInMinutes": 60, "Parameters": { "CdcStartTime": "1533776569", "MigrationType": "full-load", "ReplicationInstanceArn": "arn:aws:dms:us-east-1:123456789123:rep:6LDPDHOHCSDDSWHJP0UQJPAZLWTHISISVERYLONGANDIAMOKWITHIT", "ReplicationTaskIdentifier": "mydmstask01", "ReplicationTaskSettings": " { \"TargetMetadata\": { \"TargetSchema\": \"\", \"SupportLobs\": true, \"FullLobMode\": false, \"LobChunkSize\": 64, \"LimitedSizeLobMode\": true, \"LobMaxSize\": 32, \"BatchApplyEnabled\": true }, \"FullLoadSettings\": { \"TargetTablePrepMode\": \"DO_NOTHING\", \"CreatePkAfterFullLoad\": false, \"StopTaskCachedChangesApplied\": false, \"StopTaskCachedChangesNotApplied\": false, \"MaxFullLoadSubTasks\": 8, \"TransactionConsistencyTimeout\": 600, \"CommitRate\": 10000 }, \"Logging\": { \"EnableLogging\": false }, \"ControlTablesSettings\": { \"ControlSchema\":\"\", \"HistoryTimeslotInMinutes\":5, \"HistoryTableEnabled\": false, \"SuspendedTablesTableEnabled\": false, \"StatusTableEnabled\": false }, \"StreamBufferSettings\": { \"StreamBufferCount\": 3, \"StreamBufferSizeInMB\": 8 }, \"ChangeProcessingTuning\": { \"BatchApplyPreserveTransaction\": true, \"BatchApplyTimeoutMin\": 1, \"BatchApplyTimeoutMax\": 30, \"BatchApplyMemoryLimit\": 500, \"BatchSplitSize\": 0, \"MinTransactionSize\": 1000, \"CommitTimeout\": 1, \"MemoryLimitTotal\": 1024, \"MemoryKeepTime\": 60, \"StatementCacheSize\": 50 }, \"ChangeProcessingDdlHandlingPolicy\": { \"HandleSourceTableDropped\": true, \"HandleSourceTableTruncated\": true, \"HandleSourceTableAltered\": true }, \"ValidationSettings\": { \"EnableValidation\": false, \"ThreadCount\": 5 }, \"ErrorBehavior\": { \"DataErrorPolicy\": \"LOG_ERROR\", \"DataTruncationErrorPolicy\":\"LOG_ERROR\", \"DataErrorEscalationPolicy\":\"SUSPEND_TABLE\", \"DataErrorEscalationCount\": 50, \"TableErrorPolicy\":\"SUSPEND_TABLE\", \"TableErrorEscalationPolicy\":\"STOP_TASK\", \"TableErrorEscalationCount\": 50, \"RecoverableErrorCount\": 0, \"RecoverableErrorInterval\": 5, \"RecoverableErrorThrottling\": true, \"RecoverableErrorThrottlingMax\": 1800, \"ApplyErrorDeletePolicy\":\"IGNORE_RECORD\", \"ApplyErrorInsertPolicy\":\"LOG_ERROR\", \"ApplyErrorUpdatePolicy\":\"LOG_ERROR\", \"ApplyErrorEscalationPolicy\":\"LOG_ERROR\", \"ApplyErrorEscalationCount\": 0, \"FullLoadIgnoreConflicts\": true } }", "SourceEndpointArn": "arn:aws:dms:us-east-1:123456789123:endpoint:GLYHN8SUXLO5DS4PU4ODJ7KP0OLONGSTRINGBUTITSOK", "TableMappings": "{ \"rules\": [ { \"rule-type\": \"selection\", \"rule-id\": \"1\", \"rule-name\": \"1\", \"object-locator\": { \"schema-name\": \"Test\", \"table-name\": \"%\" }, \"rule-action\": \"include\" } ] }", "TargetEndpointArn": "arn:aws:dms:us-east-1:123456789123:endpoint:6PLJC4V60JGPKXN6OUOFWNJIUEYOUSTILLDONTBELIEVEICANHANDLEVERYLONGSTRINGS" } }