-
Ekspor ke Amazon S3

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

  • Amazon S3

  • Alur

penting

Untuk informasi selengkapnya, lihat Menggunakan Tag Alokasi Biaya.

Ekspor ke Amazon S3

Destination Node

catatan

  2. Pilih Tambahkan tujuan.

  3. Pilih Amazon S3.

      • gzip

  5. Pilih Tambahkan tujuan.

catatan

  1. Pilih Buat tugas.

    catatan

    • Tanda

    • Parameter

  8. Pilih Jalankan.

Export to

penting


config = json.dumps({
    "Classification": "spark-defaults",
    "Properties": {
        "spark.driver.memory": f"{driver_memory_in_mb}m",
    }
})
                    


# data_sources.append(ProcessingInput(
#     source=config_s3_uri,
#     destination="/opt/ml/processing/input/conf",
#     input_name="spark-config",
#     s3_data_type="S3Prefix",
#     s3_input_mode="File",
#     s3_data_distribution_type="FullyReplicated"
# ))
Export data

 

pipeline = Pipeline(
    name=pipeline_name,
    parameters=[instance_type, instance_count],
    steps=[step_process], #Add more steps to this list to run in your Pipeline
)

penting

  • Join

    
abc,0.0,"Doe, John",12345\ndef,1.1,"Doe, Jane",67890                    
                

    {
    "instances": [
        {
            "features": ["abc", 0.0, "Doe, John", 12345]
        },
        {
            "features": ["def", 1.1, "Doe, Jane", 67890]
        }
    ]
}

penting

Destination Node

catatan

  5. Pilih Berikutnya.

  7. Pilih Buat.

  12. Pilih Lanjutkan.

  13. PilihJSON.

  16. Pilih Lanjutkan.

  19. Pilih Lanjutkan.

  21. Pilih Lanjutkan.

catatan

  1. Pilih Buat tugas.

    • Tanda

    • Parameter

  8. Pilih Jalankan.

Jupyter notebook

penting

# Online Store Configuration
online_store_config = {
    "EnableOnlineStore": False
}

column_schema = [
    {
        "name": "Height",
        "type": "long"
    },
    {
        "name": "Input",
        "type": "string"
    },
    {
        "name": "Output",
        "type": "string"
    },
    {
        "name": "Sum",
        "type": "string"
    },
    {
        "name": "Time",
        "type": "string"
    }
]

Untuk informasi selengkapnya, lihat .

  • 
arn:aws:iam::aws:policy/AmazonEventBridgeFullAccess

  • JSON
    {
    "Version":"2012-10-17",		 	 	 
    "Statement": [
        {
            "Effect": "Allow",
            "Action": "sagemaker:StartPipelineExecution",
            "Resource": "arn:aws:sagemaker:us-east-1:111122223333:pipeline/data-wrangler-*"
        }
    ]
}


    
{
    "Effect": "Allow",
    "Principal": {
        "Service": "events.amazonaws.com"
    },
    "Action": "sts:AssumeRole"
}
penting

  • catatan

CRON

  2. Pilih Buat tugas.

  10. Pilih Buat.

  11. catatan

  12. Pilih salah satu cara berikut:

RATE

  2. Pilih Buat tugas.

  11. Pilih Buat.

  12. catatan

  13. Pilih salah satu cara berikut:

Recurring

  2. Pilih Buat tugas.

    catatan

  11. Pilih Buat.

  12. catatan

  13. Pilih salah satu cara berikut:

Specific time

  2. Pilih Buat tugas.

  8. Pilih Buat.

  9. catatan

  10. Pilih salah satu cara berikut: