Apache HCatalog
HCatalog é uma ferramenta que permite acessar tabelas metastore Hive no Pig, Spark SQL e/ou aplicativos MapReduce personalizados. HCatalog tem uma interface REST e um cliente de linha de comando que permite que você crie tabelas ou faça outras operações. Depois, você cria seus aplicativos para acessar as tabelas, usando as bibliotecas HCatalog. Para obter mais informações, consulte Uso do HCatalog
O HCatalog no Amazon EMR versão 5.8.0 e versões posteriores é compatível com o uso do Catálogo de Dados do AWS Glue como o Hive Metastore. Para obter mais informações, consulte Using AWS Glue Data Catalog as the metastore for Hive.
A tabela a seguir lista a versão do HCatalog incluída na versão mais recente da série 6.x do Amazon EMR, além dos componentes que o Amazon EMR instala com o HCatalog.
Para obter a versão dos componentes instalados com o HCatalog nessa versão, consulte Release 6.15.0 Component Versions.
| Rótulo de versão do Amazon EMR | Versão do HCatalog | Componentes instalados com o HCatalog |
|---|---|---|
emr-6.15.0 |
HCatalog 3.1.3-amzn-8 |
emrfs, emr-ddb, emr-goodies, emr-kinesis, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hcatalog-client, hcatalog-server, hcatalog-webhcat-server, hive-client, mariadb-server |
A tabela a seguir lista a versão do HCatalog incluída na versão mais recente da série 5.x do Amazon EMR, além dos componentes que o Amazon EMR instala com o HCatalog.
Para obter a versão dos componentes instalados com o HCatalog nesse lançamento, consulte Release 5.36.2 Component Versions.
| Rótulo de versão do Amazon EMR | Versão do HCatalog | Componentes instalados com o HCatalog |
|---|---|---|
emr-5.36.2 |
HCatalog 2.3.9-amzn-2 |
emrfs, emr-ddb, emr-goodies, emr-kinesis, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hcatalog-client, hcatalog-server, hcatalog-webhcat-server, hive-client, mariadb-server |
Tópicos
