View a markdown version of this page

Membangun AWS Glue pekerjaan dengan sesi interaktif - AWS Glue

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Membangun AWS Glue pekerjaan dengan sesi interaktif

Insinyur data dapat membuat AWS Glue pekerjaan lebih cepat dan lebih mudah daripada sebelum menggunakan sesi interaktifAWS Glue.

Ikhtisar AWS Glue sesi interaktif

Dengan sesi AWS Glue interaktif, Anda dapat dengan cepat membangun, menguji, dan menjalankan persiapan data dan aplikasi analitik. Sesi interaktif menyediakan antarmuka terprogram dan visual untuk membangun dan menguji skrip ekstrak, transformasi, dan beban (ETL) untuk persiapan data. Sesi interaktif menjalankan aplikasi analitik Apache Spark dan menyediakan akses sesuai permintaan ke lingkungan runtime Spark jarak jauh. AWS Gluemengelola Spark tanpa server secara transparan untuk sesi interaktif ini.

Sesi interaktif fleksibel, sehingga Anda membangun dan menguji aplikasi Anda dari lingkungan pilihan Anda. Anda dapat membuat dan bekerja dengan sesi interaktif melalui AWS Command Line Interface dan API. Anda dapat menggunakan Jupyter-compatible buku catatan untuk menulis secara visual dan menguji skrip buku catatan Anda. Sesi interaktif menyediakan kernel Jupyter open-source yang terintegrasi hampir di mana saja yang dilakukan Jupyter, termasuk mengintegrasikan dengan IDE seperti, IntelliJ, PyCharm dan VS Code. Ini memungkinkan Anda untuk membuat kode di lingkungan lokal Anda dan menjalankannya dengan mulus di backend sesi interaktif.

Dengan menggunakan API sesi interaktif, pelanggan dapat menjalankan aplikasi secara terprogram yang menggunakan analitik Apache Spark tanpa harus mengelola infrastruktur Spark. Anda dapat menjalankan satu atau lebih pernyataan Spark dalam satu sesi interaktif.

Sesi interaktif mendukung dua jenis sesi: Livy dan Spark Connect. Sesi hidup menggunakan API REST-based Pernyataan, sementara sesi Spark Connect menyediakan koneksi gRPC langsung ke cluster Spark menggunakan API. PySpark remote() Spark Connect tersedia dalam AWS Glue versi 5.1 dan yang lebih baru.

Oleh karena itu, sesi interaktif menyediakan cara yang lebih cepat, lebih murah, dan lebih fleksibel untuk membangun dan menjalankan persiapan data dan aplikasi analitik. Untuk mempelajari cara menggunakan sesi interaktif, lihat dokumentasi di bagian ini. Sihir didukung oleh AWS Glue

Batasan

  • Bookmark Job tidak didukung dalam sesi interaktif.

  • Membuat pekerjaan notebook menggunakan AWS Command Line Interface tidak didukung.

  • AWS Glue Studio notebook tidak mendukung Scala.