As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Inicialização de uma aplicação do Spark com a integração do Amazon Redshift para Apache Spark
Para usar a integração com o EMR Serverless 6.9.0, transmita as dependências necessárias do Spark-Redshift com sua tarefa do Spark. Use --jars para incluir as bibliotecas relacionadas ao conector do Redshift. Para acessar outros locais de arquivos compatíveis com a --jars opção, consulte a seção Gerenciamento avançado de dependências
-
spark-redshift.jar -
spark-avro.jar -
RedshiftJDBC.jar -
minimal-json.jar
As versões 6.10.0 e superiores do Amazon EMR não exigem a dependência minimal-json.jar e, por padrão, instalam automaticamente as outras dependências em cada cluster. Os exemplos a seguir demonstram como iniciar um aplicativo Spark com a integração do Amazon Redshift para o Apache Spark.