Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.
Mengontrol aliran objek data yang dikirim ke pekerja
catatan
Amazon SageMaker Ground Truth tidak lagi terbuka untuk pelanggan baru. Pelanggan yang sudah ada dapat terus menggunakan layanan seperti biasa. AWS terus berinvestasi dalam peningkatan keamanan dan ketersediaan untuk Ground Truth, tetapi kami tidak berencana untuk memperkenalkan fitur baru.
Bergantung pada jenis pekerjaan pelabelan yang Anda buat, Amazon G SageMaker round Truth mengirimkan objek data ke pekerja secara batch atau dalam mode streaming. Anda dapat mengontrol aliran objek data ke pekerja dengan cara berikut:
-
Untuk kedua jenis pekerjaan pelabelan, Anda dapat menggunakannya
MaxConcurrentTaskCountuntuk mengontrol jumlah total objek data yang tersedia untuk semua pekerja pada titik waktu tertentu saat pekerjaan pelabelan sedang berjalan. -
Untuk pekerjaan pelabelan streaming, Anda dapat mengontrol aliran objek data ke pekerja dengan memantau dan mengontrol jumlah objek data yang dikirim ke Amazon SQS yang terkait dengan pekerjaan pelabelan Anda.
Gunakan bagian berikut untuk mempelajari lebih lanjut tentang opsi ini.
Topik
Gunakan MaxConcurrentTaskCount untuk mengontrol aliran objek data
MaxConcurrentTaskCountmendefinisikan jumlah maksimum objek data yang tersedia pada satu waktu dalam antrian tugas portal-pekerja. Jika Anda menggunakan konsol, parameter ini diatur ke 1.000. Jika Anda menggunakanCreateLabelingJob, Anda dapat mengatur parameter ini ke bilangan bulat antara 1 dan 5.000, termasuk.
Gunakan contoh berikut untuk lebih memahami bagaimana jumlah entri dalam file manifes AndaNumberOfHumanWorkersPerDataObject, dan MaxConcurrentTaskCount menentukan tugas apa yang dilihat pekerja dalam antrian tugas mereka di UI portal pekerja.
-
Anda memiliki file manifes input dengan 600 entri.
-
Untuk setiap entri dalam file manifes input Anda, Anda dapat menggunakan
NumberOfHumanWorkersPerDataObjectuntuk menentukan jumlah pekerja manusia yang akan memberi label entri dari file manifes input Anda. Dalam contoh ini, Anda menetapkanNumberOfHumanWorkersPerDataObjectsama dengan 3. Ini akan membuat 3 tugas berbeda untuk setiap entri dalam file manifes input Anda. Juga, untuk ditandai sebagai berhasil diberi label, setidaknya 3 pekerja yang berbeda harus memberi label objek. Ini menciptakan total 1.800 tugas (600 x 3) untuk diselesaikan oleh pekerja. -
Anda ingin pekerja hanya melihat 100 tugas sekaligus dalam antrian mereka di UI portal pekerja. Untuk melakukan ini, Anda menetapkan
MaxConcurrentTaskCountsama dengan 100. Ground Truth kemudian akan mengisi antrian tugas portal pekerja dengan 100 tugas per pekerja. -
Apa yang terjadi selanjutnya tergantung pada jenis pekerjaan pelabelan yang Anda buat, dan apakah itu pekerjaan pelabelan streaming.
-
Pekerjaan pelabelan streaming: Selama jumlah total objek yang tersedia untuk pekerja sama dengan
MaxConcurrentTaskCount, semua objek dataset yang tersisa di file manifes input Anda dan yang Anda kirim secara real time menggunakan Amazon SNS ditempatkan pada antrian Amazon SQS. Ketika jumlah total objek yang tersedia untuk pekerja turun di bawahMaxConcurrentTaskCountminusNumberOfHumanWorkersPerDataObject, objek data baru dari antrian digunakan untuk membuatNumberOfHumanWorkersPerDataObjecttugas, yang dikirim ke pekerja secara real time. -
Non-streaming pekerjaan pelabelan: Saat pekerja selesai memberi label pada satu set objek, hingga
MaxConcurrentTaskCountberNumberOfHumanWorkersPerDataObjectkali-kali jumlah tugas baru akan dikirim ke pekerja. Proses ini diulang sampai semua objek data dalam file manifes input diberi label.
-
Gunakan Amazon SQS untuk mengontrol aliran objek data ke pekerjaan pelabelan streaming
Saat Anda membuat pekerjaan pelabelan streaming, antrian Amazon SQS secara otomatis dibuat di akun Anda. Objek data hanya ditambahkan ke antrian Amazon SQS jika jumlah total objek yang dikirim ke pekerja di atasMaxConcurrentTaskCount. Jika tidak, objek dikirim langsung ke pekerja.
Anda dapat menggunakan antrian ini untuk mengelola aliran objek data ke pekerjaan pelabelan Anda. Untuk mempelajari selengkapnya, lihat Mengelola permintaan pelabelan dengan antrian Amazon SQS.
