Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.
SageMaker Catatan rilis pustaka paralelisme data AI
Lihat catatan rilis berikut untuk melacak pembaruan terbaru untuk pustaka paralelisme data terdistribusi SageMaker AI (SMDDP).
Pust SageMaker aka paralelisme data terdistribusi AI v2.5.0
Tanggal: 17 Oktober 2024
Fitur baru
-
Menambahkan dukungan untuk PyTorch v2.4.1 dengan CUDA v12.1.
Integrasi ke dalam wadah Docker yang didistribusikan oleh perpustakaan model paralelisme (SMP) SageMaker AI
Versi pustaka SMDDP ini dimigrasikan ke. Pust SageMaker aka paralelisme model v2.6.0
658645717510.dkr.ecr.<us-west-2>.amazonaws.com/smdistributed-modelparallel:2.4.1-gpu-py311-cu121
Untuk Wilayah di mana gambar SMP Docker tersedia, lihat. Wilayah AWS
File biner dari rilis ini
Anda dapat mengunduh atau menginstal pustaka menggunakan URL berikut.
https://smdataparallel.s3.amazonaws.com/binary/pytorch/2.4.1/cu121/2024-10-09/smdistributed_dataparallel-2.5.0-cp311-cp311-linux_x86_64.whl
Pust SageMaker aka paralelisme data terdistribusi AI v2.3.0
Tanggal: 11 Juni 2024
Fitur baru
-
Menambahkan dukungan untuk PyTorch v2.3.0 dengan CUDA v12.1 dan Python v3.11.
-
Menambahkan dukungan untuk PyTorch Lightning v2.2.5. Ini diintegrasikan ke dalam wadah kerangka kerja SageMaker AI untuk PyTorch v2.3.0.
-
Menambahkan validasi tipe instance selama impor untuk mencegah pemuatan pustaka SMDDP pada jenis instance yang tidak didukung. Untuk daftar jenis instance yang kompatibel dengan pustaka SMDDP, lihat. Kerangka kerja yang didukung, Wilayah AWS, dan jenis instance
Integrasi ke dalam SageMaker AI Framework Container
Versi pustaka SMDDP ini dimigrasikan ke SageMaker AI Framework Container berikut.
-
PyTorch v2.3.0
763104351884.dkr.ecr.<region>.amazonaws.com/pytorch-training:2.3.0-gpu-py311-cu121-ubuntu20.04-sagemaker
Untuk daftar lengkap versi pustaka SMDDP dan wadah pra-bangun, lihat. Kerangka kerja yang didukung, Wilayah AWS, dan jenis instance
File biner dari rilis ini
Anda dapat mengunduh atau menginstal pustaka menggunakan URL berikut.
https://smdataparallel.s3.amazonaws.com/binary/pytorch/2.3.0/cu121/2024-05-23/smdistributed_dataparallel-2.3.0-cp311-cp311-linux_x86_64.whl
Perubahan lainnya
-
Pustaka SMDDP v2.2.0 diintegrasikan ke dalam wadah kerangka SageMaker AI untuk v2.2.0. PyTorch
Pust SageMaker aka paralelisme data terdistribusi AI v2.2.0
Tanggal: 4 Maret 2024
Fitur baru
-
Menambahkan dukungan untuk PyTorch v2.2.0 dengan CUDA v12.1.
Integrasi ke dalam wadah Docker yang didistribusikan oleh perpustakaan model paralelisme (SMP) SageMaker AI
Versi pustaka SMDDP ini dimigrasikan ke. Pust SageMaker aka paralelisme model v2.2.0
658645717510.dkr.ecr.<region>.amazonaws.com/smdistributed-modelparallel:2.2.0-gpu-py310-cu121
Untuk Wilayah di mana gambar SMP Docker tersedia, lihat. Wilayah AWS
File biner dari rilis ini
Anda dapat mengunduh atau menginstal pustaka menggunakan URL berikut.
https://smdataparallel.s3.amazonaws.com/binary/pytorch/2.2.0/cu121/2024-03-04/smdistributed_dataparallel-2.2.0-cp310-cp310-linux_x86_64.whl
Pust SageMaker aka paralelisme data terdistribusi AI v2.1.0
Tanggal: 1 Maret 2024
Fitur baru
-
Menambahkan dukungan untuk PyTorch v2.1.0 dengan CUDA v12.1.
Perbaikan bug
-
Memperbaiki masalah kebocoran memori CPU diSMDDP v2.0.1.
Integrasi ke dalam SageMaker AI Framework Container
Versi pustaka SMDDP ini lulus pengujian benchmark dan dimigrasikan ke SageMaker AI Framework Container berikut.
-
PyTorch v2.1.0
763104351884.dkr.ecr.<region>.amazonaws.com/pytorch-training:2.1.0-gpu-py310-cu121-ubuntu20.04-sagemaker
Integrasi ke dalam wadah Docker yang didistribusikan oleh perpustakaan model paralelisme (SMP) SageMaker AI
Versi pustaka SMDDP ini dimigrasikan ke. Pust SageMaker aka paralelisme model v2.1.0
658645717510.dkr.ecr.<region>.amazonaws.com/smdistributed-modelparallel:2.1.2-gpu-py310-cu121
Untuk Wilayah di mana gambar SMP Docker tersedia, lihat. Wilayah AWS
File biner dari rilis ini
Anda dapat mengunduh atau menginstal pustaka menggunakan URL berikut.
https://smdataparallel.s3.amazonaws.com/binary/pytorch/2.1.0/cu121/2024-02-04/smdistributed_dataparallel-2.1.0-cp310-cp310-linux_x86_64.whl
Pust SageMaker aka paralelisme data terdistribusi AI v2.0.1
Tanggal: 7 Desember 2023
Fitur baru
-
Menambahkan operasi
AllGatherkolek SMDDP-implementation tif baru yang dioptimalkan untuk sumber daya AWS komputasi dan infrastruktur jaringan. Untuk mempelajari selengkapnya, lihat Operasi kolektif SMDDP AllGather. -
Operasi
AllGatherkolektif SMDDP kompatibel dengan PyTorch FSDP dan. DeepSpeed Untuk mempelajari selengkapnya, lihat Gunakan pustaka SMDDP dalam skrip pelatihan Anda PyTorch. -
Ditambahkan dukungan untuk PyTorch v2.0.1
Masalah yang diketahui
-
Ada masalah kebocoran memori CPU dari peningkatan memori CPU bertahap saat berlatih dengan SMDDP
AllReducedalam mode DDP.
Integrasi ke dalam SageMaker AI Framework Container
Versi pustaka SMDDP ini lulus pengujian benchmark dan dimigrasikan ke SageMaker AI Framework Container berikut.
-
PyTorch v2.0.1
763104351884.dkr.ecr.<region>.amazonaws.com/pytorch-training:2.0.1-gpu-py310-cu118-ubuntu20.04-sagemaker
File biner dari rilis ini
Anda dapat mengunduh atau menginstal pustaka menggunakan URL berikut.
https://smdataparallel.s3.amazonaws.com/binary/pytorch/2.0.1/cu118/2023-12-07/smdistributed_dataparallel-2.0.2-cp310-cp310-linux_x86_64.whl
Perubahan lainnya
-
Mulai dari rilis ini, dokumentasi untuk pustaka SMDDP sepenuhnya tersedia di Panduan Pengembang SageMaker AI Amazon ini. Mendukung panduan pengembang lengkap untuk SMDDP v2 yang terdapat di Panduan Pengembang SageMaker AI Amazon, dokumentasi untuk referensi tambahan untuk SMDDP v1.x
dalam dokumentasi SageMaker AI Python SDK tidak lagi didukung. Jika Anda masih memerlukan dokumentasi SMP v1.x, lihat snapshot dokumentasi berikut di dokumentasi SageMaker Python SDK v2.212.0.
