Bekerja dengan tabel Apache Iceberg dengan menggunakan Amazon Data Firehose - AWS Bimbingan Preskriptif

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Bekerja dengan tabel Apache Iceberg dengan menggunakan Amazon Data Firehose

Amazon Data Firehose adalah layanan tanpa server, tanpa kode untuk mengirimkan aliran data dari lebih dari 20 sumber seperti log, Log Amazon,, Amazon Kinesis AWS IoT Data Streams AWS WAF , dan Amazon CloudWatch Managed Streaming untuk Apache Kafka (Amazon MSK) ke tujuan seperti Amazon S3, Amazon Redshift, Snowflake, dan Split Unk.

Anda dapat menggunakan Firehose untuk langsung mengirimkan data streaming ke tabel Apache Iceberg di Amazon S3. Menggunakan Firehose, Anda dapat merutekan catatan dari satu aliran ke tabel Apache Iceberg yang berbeda, dan secara otomatis menerapkan operasi penyisipan, pembaruan, dan penghapusan ke catatan dalam tabel. Firehose menjamin pengiriman tepat sekali ke tabel Iceberg. Fitur ini membutuhkan penggunaan AWS Glue Data Catalog.

Firehose juga dapat langsung mengirimkan data streaming ke tabel Amazon S3. Tabel ini menyediakan penyimpanan yang dioptimalkan untuk beban kerja analitik skala besar, dan menyertakan fitur yang terus meningkatkan kinerja kueri dan mengurangi biaya penyimpanan untuk data tabular.

Untuk informasi tentang cara mengatur aliran Firehose untuk mengirimkan data ke tabel Apache Iceberg, lihat Mengatur aliran Firehose di dokumentasi Firehose.