Preparazione dei dati utilizzando AWS Glue sessioni interattive

Le sessioni interattive di AWS Glue sono un servizio serverless che puoi utilizzare per raccogliere, trasformare, pulire e preparare i dati per l’archiviazione nei data lake e nelle pipeline dei dati. Le sessioni interattive di AWS Glue forniscono un ambiente di runtime Apache Spark serverless e on demand, che puoi inizializzare in pochi secondi su un’unità di elaborazione dati (DPU) dedicata, senza dover allocare e gestire complesse infrastrutture dei cluster di calcolo. Dopo l'inizializzazione, puoi sfogliare il catalogo AWS Glue dei dati, eseguire query di grandi dimensioni, accedere ai dati gestiti da AWS Lake Formation e analizzare e preparare i dati in modo interattivo utilizzando Spark, direttamente nei tuoi notebook Studio o Studio Classic. È quindi possibile utilizzare i dati preparati per addestrare, ottimizzare e distribuire i modelli utilizzando gli strumenti ML appositamente creati all'interno di Studio o Studio Classic. SageMaker Dovresti prendere in considerazione AWS Glue Interactive Sessions per i tuoi carichi di lavoro di preparazione dei dati quando desideri un servizio Spark serverless con un controllo moderato della configurabilità e della flessibilità.

Puoi avviare una sessione AWS Glue interattiva avviando un JupyterLab notebook in Studio o Studio Classic. Quando avvii il notebook, scegli il kernel integrato Glue PySpark and Ray o Glue Spark. Questo avvia automaticamente una sessione Spark interattiva e senza server. Non è necessario fornire o gestire alcun cluster o infrastruttura di elaborazione. Dopo l’inizializzazione, puoi esplorare e interagire con i dati direttamente dai notebook Studio o Studio Classic.

Prima di iniziare la sessione AWS Glue interattiva in Studio o Studio Classic, è necessario impostare i ruoli e le politiche appropriati. Inoltre, potrebbe dover fornire l’accesso a risorse aggiuntive, ad esempio a un bucket di archiviazione Amazon S3. Per ulteriori informazioni sulle policy IAM richieste, consulta Autorizzazioni per AWS Glue sessioni interattive in Studio o Studio Classic.

Studio e Studio Classic forniscono una configurazione predefinita per la sessione AWS Glue interattiva, tuttavia, puoi utilizzare AWS Glue il catalogo completo dei comandi magici di Jupyter per personalizzare ulteriormente il tuo ambiente. Per informazioni sulle magie Jupyter predefinite e aggiuntive che puoi usare nella tua sessione interattiva, consulta. AWS Glue Configura il tuo AWS Glue sessione interattiva in Studio o Studio Classic