翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。
Amazon EMR リリース 7.12.0
7.12.0 でサポートされているライフサイクル
次の表は、Amazon EMR リリース 7.12.0 でサポートされているライフサイクルの日付を示しています。
| サポートフェーズ | Date |
|---|---|
| 初回リリース日 | 2025 年 11 月 21 日 |
| 標準サポートの終了日 | 2027 年 11 月 21 日 |
| サポートの終了 | 2027 年 11 月 22 日 |
| ライフサイクル終了 | 2028 年 11 月 21 日 |
7.12.0 アプリケーションバージョン
このリリースには次のアプリケーションが含まれます: AmazonCloudWatchAgent、Delta
以下の表は、Amazon EMR のこのリリースで利用可能なアプリケーションバージョンと、前の 3 つの Amazon EMR リリース (該当する場合) で利用可能なアプリケーションバージョンを示しています。
Amazon EMR の各リリースのアプリケーションバージョンの包括的な履歴については、以下のトピックを参照してください。
| emr-7.12.0 | emr-7.11.0 | emr-7.10.0 | emr-7.9.0 | |
|---|---|---|---|---|
| AWS SDK for Java | 2.35.5、1.12.792 | 2.35.5、1.12.792 | 2.31.48、1.12.782 | 2.31.16、1.12.782 |
| Python | 3.9、3.11 | 3.9、3.11 | 3.9、3.11 | 3.9、3.11 |
| Scala | 2.12.18 | 2.12.18 | 2.12.18 | 2.12.18 |
| AmazonCloudWatchAgent | 1.300032.2-amzn-0 | 1.300032.2-amzn-0 | 1.300032.2-amzn-0 | 1.300032.2-amzn-0 |
| Delta | 3.3.2-amzn-1 | 3.3.2-amzn-0 | 3.3.0-amzn-2 | 3.3.0-amzn-1 |
| Flink | 1.20.0-amzn-6 | 1.20.0-amzn-5 | 1.20.0-amzn-4 | 1.20.0-amzn-3 |
| Ganglia | - | - | - | - |
| HBase | 2.6.2-amzn-3 | 2.6.2-amzn-2 | 2.6.2-amzn-1 | 2.6.2-amzn-0 |
| HCatalog | 3.1.3-amzn-21 | 3.1.3-amzn-20 | 3.1.3-amzn-19 | 3.1.3-amzn-18 |
| Hadoop | 3.4.1-amzn-4 | 3.4.1-amzn-3 | 3.4.1-amzn-2 | 3.4.1-amzn-1 |
| Hive | 3.1.3-amzn-21 | 3.1.3-amzn-20 | 3.1.3-amzn-19 | 3.1.3-amzn-18 |
| Hudi | 1.0.2-amzn-1 | 1.0.2-amzn-0 | 0.15.0-amzn-7 | 0.15.0-amzn-6 |
| Hue | 4.11.0 | 4.11.0 | 4.11.0 | 4.11.0 |
| Iceberg | 1.10.0-amzn-0 | 1.9.1-amzn-0 | 1.8.1-amzn-0 | 1.7.1-amzn-2 |
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 |
| JupyterHub | 1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 |
| Livy | 0.8.0-incubating | 0.8.0-incubating | 0.8.0-incubating | 0.8.0-incubating |
| MXNet | - | - | - | - |
| Mahout | - | - | - | - |
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 |
| Phoenix | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 |
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 |
| Presto | 0.287-amzn-6 | 0.287-amzn-5 | 0.287-amzn-4 | 0.287-amzn-3 |
| Spark | 3.5.6-amzn-1 | 3.5.6-amzn-0 | 3.5.5-amzn-1 | 3.5.5-amzn-0 |
| Sqoop | - | - | - | - |
| TensorFlow | 2.19.0 | 2.19.0 | 2.18.0 | 2.16.1 |
| Tez | 0.10.2-amzn-19 | 0.10.2-amzn-18 | 0.10.2-amzn-17 | 0.10.2-amzn-16 |
| Trino (PrestoSQL) | 476-amzn-1 | 475-amzn-0 | 470-amzn-0 | 467-amzn-2 |
| Zeppelin | 0.11.1 | 0.11.1 | 0.11.1 | 0.11.1 |
| ZooKeeper | 3.9.3-amzn-4 | 3.9.3-amzn-3 | 3.9.3-amzn-2 | 3.9.3-amzn-1 |
7.12.0 リリースノート
次のリリースノートには、Amazon EMR リリース 7.12.0 に関する情報が含まれています。
-
新しい特徴
-
EMR Serverless 用のサーバーレスストレージ – Amazon EMR Serverless は、EMR リリース 7.12 以降でサーバーレスストレージを導入し、Apache Spark ワークロードのローカルディスクプロビジョニングを排除します。EMR Serverless は、ストレージ料金なしでシャッフルなどの中間データオペレーションを自動的に処理します。サーバーレスストレージはストレージとコンピューティングを分離するため、Spark はワーカーをアクティブのままにして一時データを保持するのではなく、アイドル状態のときにすぐにワーカーを解放できます。詳細についてはaws.amazon.com/serverless-storage-for-emr-serverlessを参照してください。
-
アプリケーションアップグレード – Amazon EMR 7.12.0 アプリケーションアップグレードには、Delta 3.3.2-amzn-1、Flink 1.20.0-amzn-6、HBase 2.6.2-amzn-3、HCatalog 3.1.3-amzn-21、Hadoop 3.4.1-amzn-4、Hive 3.1.3-amzn-21、Hudi 1.0.2-amzn-1、Iceberg 1.10.0-amzn-0、Presto 0.287-amzn-6、Spark 3.5.6-amzn-1、Tez 0.10.2-amzn-19、Tinozn-4 ZooKeeper 7
-
Iceberg マテリアライズドビュー - Amazon EMR 7.12.0 以降、Amazon EMR Spark は Iceberg マテリアライズドビュー (MV) の作成と管理をサポートしています。
-
Hudi フルテーブルアクセス - Amazon EMR 7.12.0 以降、Amazon EMR は Lake Formation で定義されたポリシーに基づいて、Apache Spark で Apache Hudi のフルテーブルアクセス (FTA) コントロールをサポートするようになりました。この機能を使用すると、ジョブロールが完全なテーブルアクセス権を持っているときに、Lake Formation 登録済みテーブルに対する Amazon EMR Spark ジョブからの読み取りおよび書き込みオペレーションが有効になります。
-
Iceberg バージョンアップグレード - Amazon EMR 7.12.0 が Apache Iceberg バージョン 1.10 をサポート
-
Lake Formation を使用した Spark ネイティブ FGAC サポート - Lake Formation に登録されている Apache Hive、Apache Iceberg、Delta Lake テーブルのきめ細かなアクセスコントロールを使用して、DDL/DML オペレーション (CREATE、ALTER、DELETE、DROP など) を実行できます。
-
Spark ジョブの監査コンテキスト - Amazon EMR 7.12.0 以降、Lake Formation が有効なクラスターを持つ Amazon EMR Spark ジョブの監査コンテキストは、CloudTrail ログの AWS Glue および Lake Formation API コールで使用できます。
-
Amazon EMR 7.12.0 は GetClusterSessionCredentials セッション認証情報認証プロセスを改善し、以前の Amazon EMR リリースと比較して、Livy インタラクティブセッションのレイテンシーと IAM Identity Center 対応クラスターでのクラスター上の UI アクセスを大幅に削減します。
-
Amazon EMR 7.12.0 以降、S3 の Amazon EMR HBase には、Amazon EMR バージョンのアップグレードを簡素化するリードレプリカプリウォーム機能が追加されました。この機能は、Amazon EMR バージョン 7.12 以降との間で既存の HBase クラスターをアップグレードするために使用できます。
-
-
既知の問題と制限事項
-
Athena SQL の互換性
-
Athena SQL は、次のエラーが原因で Amazon EMR Spark によって作成された Iceberg テーブルタイプ V3 を読み取ることができません: GENERIC_INTERNAL_ERROR: Can read unsupported version 3。
-
Amazon EMR Spark を使用して Athena を使用して作成された iceberg テーブルにデータを書き込むと、プロパティ「write.object-storage.path」が廃止され、2.0 で削除されます。代わりに「write.data.path」を使用します。
-
-
Iceberg マテリアライズドビュー (MV) - Amazon EMR 7.12.0 では、マテリアライズドビューの作成、クエリの書き換え、増分更新のためのビュー SQL 句のサポートが制限されています。詳細については、Iceberg マテリアライズドビュー機能のドキュメントページを参照してください。
-
Hudi FTA 書き込みでは、ジョブ実行中の認証情報供給に HoodieCredentialedHadoopStorage を使用する必要があります。Hudi ジョブを実行するときは、次の設定を行います。
-
hoodie.storage.class=org.apache.spark.sql.hudi.storage.HoodieCredentialedHadoopStorage
-
-
Hudi FTA 書き込みサポートは、デフォルトの Hudi 設定でのみ機能します。カスタムまたはデフォルト以外の Hudi 設定が完全にサポートされていない可能性があり、予期しない動作が発生する可能性があります。Hudi Merge-On-Read (MOR) テーブルのクラスタリングは、FTA 書き込みモードではサポートされていません。
-
-
変更、機能強化、解決された問題
-
EMR 7.12.0 以降、EMR は永続スパーク履歴サーバーを介したサービスホスト型スパークログの KMS キー ARN をサポートしています。以前の EMR バージョンは KeyID のみをサポートしていました。
-
EMR 7.12.0 以降、EMR は、EMR クラスターで Hue をホストするときに SSL 証明書を使用できなくなる Hue の問題に対処しました。
-
7.12.0 デフォルト Java バージョン
Amazon EMR リリース 7.12.0 には、Apache Livy を除く Corretto 17 (OpenJDK) をサポートするアプリケーション用に、デフォルトで Amazon Corretto 17 (OpenJDK 上に構築) が付属しています。
次の表は、Amazon EMR 7.12.0 のアプリケーションのデフォルトの Java バージョンを示しています。
7.12.0 コンポーネントバージョン
このリリースで Amazon EMR がインストールするコンポーネントを以下に示します。そのうちいくつかは、ビッグデータアプリケーションパッケージの一部としてインストールされます。その他は Amazon EMR に固有であり、システムプロセスと機能に対してインストールされます。これらは通常、emr または aws で開始されます。通常、最新の Amazon EMR リリースのビッグデータアプリケーションパッケージは、コミュニティにある最新バージョンです。コミュニティリリースは、できるだけ早く Amazon EMR で入手可能になるようにしています。
Amazon EMR の一部のコンポーネントは、コミュニティバージョンとは異なります。これらのコンポーネントには、 の形式のバージョンラベルがあります。CommunityVersion-amzn-EmrVersion は 0 から始まります。例えば、バージョン 2.2 の EmrVersionmyapp-component というオープンソースコミュニティコンポーネントが、異なる Amazon EMR リリースに組み込むために 3 回変更された場合、そのリリースバージョンは 2.2-amzn-2 として表示されます。
| コンポーネント | バージョン | 説明 |
|---|---|---|
| adot-java-agent | 1.31.0 | アプリケーションデーモンからメトリクスを収集する Java エージェント。 |
| delta | 3.3.2-amzn-1 | Delta Lake は、膨大な分析データセット用のオープンテーブル形式です。 |
| emr-amazon-cloudwatch-agent | 1.300032.2-amzn-0 | Amazon EC2 インスタンスから内部システムレベルのメトリクスとカスタムアプリケーションメトリクスを収集するアプリケーション。 |
| emr-ddb | 5.7.0 | Hadoop エコシステムアプリケーション用の Amazon DynamoDB コネクター。 |
| emr-goodies | 3.21.0 | Hadoop エコシステムに役立つ追加のライブラリ。 |
| emr-kinesis | 3.25.0 | Hadoop エコシステムアプリケーション用の Amazon Kinesis コネクター。 |
| emr-notebook-env | 1.18.0 | Jupyter エンタープライズゲートウェイを含む emr ノートブック用 Conda env |
| emr-s3-dist-cp | 2.42.0 | Amazon S3 に最適化された分散コピーアプリケーション。 |
| emr-s3-select | 2.21.0 | EMR S3Select コネクター |
| emr-wal-cli | 1.3.6 | emrwal のリスト/削除に使用される CLI。 |
| emrfs | 2.73.0 | Hadoop エコシステムアプリケーション用の Amazon S3 コネクタ。 |
| flink-client | 1.20.0-amzn-6 | Apache Flink のコマンドラインクライアント スクリプトとアプリケーション。 |
| flink-jobmanager-config | 1.20.0-amzn-6 | Apache Flink JobManager 用の EMR ノード上のリソースの管理。 |
| hadoop-client | 3.4.1-amzn-4 | 'hdfs'、'hadoop'、'yarn' などの Hadoop コマンドラインクライアント。 |
| hadoop-hdfs-datanode | 3.4.1-amzn-4 | ブロックを保存する HDFS ノードレベルのサービス。 |
| hadoop-hdfs-library | 3.4.1-amzn-4 | HDFS コマンドラインクライアントとライブラリ |
| hadoop-hdfs-namenode | 3.4.1-amzn-4 | ファイル名を追跡し、場所をブロックする HDFS サービス。 |
| hadoop-hdfs-zkfc | 3.4.1-amzn-4 | HA モードの namenodes を追跡するための ZKFC サービス。 |
| hadoop-hdfs-journalnode | 3.4.1-amzn-4 | HA クラスター上の Hadoop ファイルシステムジャーナルを管理するための HDFS サービス。 |
| hadoop-httpfs-server | 3.4.1-amzn-4 | HDFS オペレーションの HTTP エンドポイント。 |
| hadoop-kms-server | 3.4.1-amzn-4 | Hadoop の KeyProvider API に基づく暗号キー管理サーバー。 |
| hadoop-mapred | 3.4.1-amzn-4 | MapReduce アプリケーションを実行する MapReduce 実行エンジンライブラリ。 |
| hadoop-yarn-nodemanager | 3.4.1-amzn-4 | 個別のノードでコンテナを管理する YARN サービス。 |
| hadoop-yarn-resourcemanager | 3.4.1-amzn-4 | クラスターリソースおよび分散アプリケーションを割り当て、管理する YARN サービス。 |
| hadoop-yarn-timeline-server | 3.4.1-amzn-4 | YARN アプリケーションの現在の情報と履歴情報を取得するためのサービス。 |
| hbase-hmaster | 2.6.2-amzn-3 | リージョンの調整および管理コマンドの実行を行う HBase クラスター用のサービス。 |
| hbase-region-server | 2.6.2-amzn-3 | 1 つ以上の HBase リージョンに対応するサービス。 |
| hbase-client | 2.6.2-amzn-3 | HBase コマンドラインクライアント。 |
| hbase-rest-server | 2.6.2-amzn-3 | HBase の RESTful HTTP エンドポイントを提供するサービス。 |
| hbase-thrift-server | 2.6.2-amzn-3 | HBase に Thrift エンドポイントを提供するサービス。 |
| hbase-operator-tools | 2.6.2-amzn-3 | Apache HBase クラスター用の修復ツール。 |
| hcatalog-client | 3.1.3-amzn-21 | hcatalog-server を操作するための 'hcat' コマンドラインクライアント。 |
| hcatalog-server | 3.1.3-amzn-21 | 分散アプリケーション用のテーブルおよびストレージ管理レイヤーである HCatalog を提供するサービス。 |
| hcatalog-webhcat-server | 3.1.3-amzn-21 | HCatalog に REST インターフェイスを提供する HTTP エンドポイント。 |
| hive-client | 3.1.3-amzn-21 | Hive コマンドラインクライアント。 |
| hive-hbase | 3.1.3-amzn-21 | Hive-hbase クライアント。 |
| hive-metastore-server | 3.1.3-amzn-21 | Hadoop オペレーションの SQL 用のメタデータを保存するセマンティックレポジトリである Hive メタストアにアクセスするためのサービス。 |
| hive-server2 | 3.1.3-amzn-21 | Hive クエリをウェブリクエストとして受け入れるサービス。 |
| hudi | 1.0.2-amzn-1 | データパイプラインを強化する低レイテンシーかつ高効率な増分処理フレームワーク。 |
| hudi-presto | 1.0.2-amzn-1 | Presto を Hudi で実行するためのバンドルライブラリ。 |
| hudi-trino | 1.0.2-amzn-1 | Trino を Hudi で実行するためのバンドルライブラリ。 |
| hudi-spark | 1.0.2-amzn-1 | Spark を Hudi で実行するためのバンドルライブラリ。 |
| hue-server | 4.11.0 | Hadoop エコシステムアプリケーションを使用してデータを分析するウェブアプリケーション |
| iceberg | 1.10.0-amzn-0 | Apache Iceberg は、膨大な分析データセット用のオープンテーブル形式です。 |
| jupyterhub | 1.5.0 | Jupyter Notebook のマルチユーザーサーバー |
| livy-server | 0.8.0-incubating | Apache Spark を操作するための REST インターフェイス |
| nginx | 1.12.1 | nginx [engine x] は HTTP およびリバースプロキシサーバー |
| mariadb-server | 5.5.68+ | MariaDB データベースサーバー。 |
| nvidia-cuda | 12.5.0 | Nvidia ドライバーと Cuda ツールキット |
| oozie-client | 5.2.1 | Oozie コマンドラインクライアント。 |
| oozie-server | 5.2.1 | Oozie ワークフローリクエストを受け入れるサービス。 |
| opencv | 4.7.0 | オープンソースのコンピュータビジョンライブラリ。 |
| phoenix-library | 5.2.1 | サーバーとクライアントの Phoenix ライブラリ |
| phoenix-connectors | 6.0.0 | Spark-3 用 Apache Phoenix-Connectors |
| phoenix-query-server | 6.0.0 | JDBC のアクセス、プロトコルのバッファ、および Avatica API への JSON 形式のアクセスを提供するし軽量サーバー |
| presto-coordinator | 0.287-amzn-6 | presto-worker 間でクエリを受け入れ、クエリの実行を管理するサービス。 |
| presto-worker | 0.287-amzn-6 | いくつかのクエリを実行するサービス。 |
| presto-client | 0.287-amzn-6 | Presto サーバーが起動されていない HA クラスターのスタンバイマスターにインストールされる Presto コマンドラインクライアント。 |
| trino-coordinator | 476-amzn-1 | trino-worker 間でクエリを受け入れ、クエリの実行を管理するサービス。 |
| trino-worker | 476-amzn-1 | いくつかのクエリを実行するサービス。 |
| trino-client | 476-amzn-1 | Trino サーバーが起動されていない HA クラスターのスタンバイマスターにインストールされる Trino コマンドラインクライアント。 |
| pig-client | 0.17.0 | Pig コマンドラインクライアント。 |
| r | 4.3.2 | 統計的コンピューティング用 R プロジェクト |
| ranger-kms-server | 2.0.0 | Apache Ranger Key Management System |
| spark-client | 3.5.6-amzn-1 | Spark コマンドラインクライアント。 |
| spark-history-server | 3.5.6-amzn-1 | 完了した Spark アプリケーションの有効期間にログに記録されたイベントを表示するウェブ UI。 |
| spark-on-yarn | 3.5.6-amzn-1 | YARN のメモリ内実行エンジン。 |
| spark-yarn-slave | 3.5.6-amzn-1 | YARN スレーブで必要な Apache Spark ライブラリ。 |
| spark-rapids | 25.08.0-amzn-0 | GPU で Apache Spark を高速化する Nvidia Spark RAPIDS プラグイン。 |
| tensorflow | 2.19.0 | TensorFlow は、高性能数値計算用のオープンソースのソフトウェアライブラリです。 |
| tez-on-yarn | 0.10.2-amzn-19 | tez YARN アプリケーションおよびライブラリ。 |
| tez-on-worker | 0.10.2-amzn-19 | ワーカーノード用 tez YARN アプリケーションおよびライブラリ。 |
| zeppelin-server | 0.11.1 | インタラクティブなデータ分析を可能にするウェブベースのノートブック。 |
| zookeeper-server | 3.9.3-amzn-4 | 設定情報を維持し、名前を付け、分散化された同期を提供し、グループサービスを提供する一元化されたサービス。 |
| zookeeper-client | 3.9.3-amzn-4 | ZooKeeper コマンドラインクライアント。 |
7.12.0 設定分類
設定分類を使用すると、アプリケーションをカスタマイズできます。これらは多くの場合、hive-site.xml などのアプリケーションの構成 XML ファイルに対応します。詳細については、「アプリケーションの設定」を参照してください。
再設定アクションは、実行中のクラスターのインスタンスグループの設定を指定すると発生します。Amazon EMR によって、変更した分類に対してのみ再設定アクションが開始されます。詳細については、「実行中のクラスター内のインスタンスグループの再設定」を参照してください。
| 分類 | 説明 | 再設定アクション |
|---|---|---|
capacity-scheduler | Hadoop の capacity-scheduler.xml ファイルの値を変更します。 | Restarts the ResourceManager service. |
container-executor | Hadoop YARN の container-executor.cfg ファイルの値を変更します。 | Not available. |
container-log4j | Hadoop YARN の container-log4j.properties ファイルの値を変更します。 | Not available. |
core-site | Hadoop の core-site.xml ファイルの値を変更します。 | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. |
docker-conf | Docker 関連の設定を変更します。 | Not available. |
emrfs-site | EMRFS の設定を変更します。 | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. |
flink-conf | flink-conf.yaml の設定を変更します。 | Restarts Flink history server. |
flink-log4j | Flink log4j.properties の設定を変更します。 | Restarts Flink history server. |
flink-log4j-session | Kubernetes/Yarn セッションの Flink log4j-session.properties 設定を変更します。 | Restarts Flink history server. |
flink-log4j-cli | Flink log4j-cli.properties の設定を変更します。 | Restarts Flink history server. |
hadoop-env | Hadoop のすべてのコンポーネントに対する Hadoop 環境の値を変更します。 | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. |
hadoop-log4j | Hadoop の log4j.properties ファイルの値を変更します。 | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. |
hadoop-ssl-server | Hadoop ssl のサーバー設定を変更します。 | Not available. |
hadoop-ssl-client | Hadoop ssl のクライアント設定を変更します。 | Not available. |
hbase | Apache HBase 用の Amazon EMR-curated 設定。 | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. |
hbase-env | HBase の環境の値を変更します。 | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. |
hbase-log4j2 | HBase の hbase-log4j2.properties ファイルの値を変更します。 | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. |
hbase-metrics | HBase の hadoop-metrics2-hbase.properties ファイルの値を変更します。 | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. |
hbase-policy | HBase の hbase-policy.xml ファイルの値を変更します。 | Not available. |
hbase-site | HBase の hbase-site.xml ファイルの値を変更します。 | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. |
hdfs-encryption-zones | HDFS 暗号化ゾーンを設定します。 | This classification should not be reconfigured. |
hdfs-env | HDFS 環境の値を変更します。 | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. |
hdfs-site | HDFS の hdfs-site.xml の値を変更します。 | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. |
hcatalog-env | HCatalog 環境の値を変更します。 | Restarts Hive HCatalog Server. |
hcatalog-server-jndi | HCatalog の jndi.properties の値を変更します。 | Restarts Hive HCatalog Server. |
hcatalog-server-proto-hive-site | HCatalog の proto-hive-site.xml の値を変更します。 | Restarts Hive HCatalog Server. |
hcatalog-webhcat-env | HCatalog WebHCat 環境の値を変更します。 | Restarts Hive WebHCat server. |
hcatalog-webhcat-log4j2 | HCatalog WebHCat の log4j2.properties の値を変更します。 | Restarts Hive WebHCat server. |
hcatalog-webhcat-site | HCatalog WebHCat の webhcat-site.xml ファイルの値を変更します。 | Restarts Hive WebHCat server. |
hive | Apache Hive 用の Amazon EMR-curated 設定。 | Sets configurations to launch Hive LLAP service. |
hive-beeline-log4j2 | Hive の beeline-log4j2.properties ファイルの値を変更します。 | Not available. |
hive-parquet-logging | Hive の parquet-logging.properties ファイルの値を変更します。 | Not available. |
hive-env | Hive 環境の値を変更します。 | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. |
hive-exec-log4j2 | Hive の hive-exec-log4j2.properties ファイルの値を変更します。 | Not available. |
hive-llap-daemon-log4j2 | Hive の llap-daemon-log4j2.properties ファイルの値を変更します。 | Not available. |
hive-log4j2 | Hive の hive-log4j2.properties ファイルの値を変更します。 | Not available. |
hive-site | Hive の hive-site.xml ファイルの値を変更します | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. |
hiveserver2-site | Hive Server2 の hiveserver2-site.xml ファイルの値を変更します | Not available. |
hue-ini | Hue の ini ファイルの値を変更します | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. |
httpfs-env | HTTPFS 環境の値を変更します。 | Restarts Hadoop Httpfs service. |
httpfs-site | Hadoop の httpfs-site.xml ファイルの値を変更します。 | Restarts Hadoop Httpfs service. |
hadoop-kms-acls | Hadoop の kms-acls.xml ファイルの値を変更します。 | Not available. |
hadoop-kms-env | Hadoop KMS 環境の値を変更します。 | Restarts Hadoop-KMS service. |
hadoop-kms-java-home | Hadoop の KMS java ホームを変更します。 | Not available. |
hadoop-kms-log4j | Hadoop の kms-log4j.properties ファイルの値を変更します。 | Not available. |
hadoop-kms-site | Hadoop の kms-site.xml ファイルの値を変更します。 | Restarts Hadoop-KMS and Ranger-KMS service. |
hudi-env | Hudi 環境の値を変更します。 | Not available. |
hudi-defaults | Hudi の hudi-defaults.conf ファイルの値を変更します。 | Not available. |
iceberg-defaults | Iceberg の iceberg-defaults.conf ファイルの値を変更します。 | Not available. |
delta-defaults | Delta の delta-defaults.conf ファイルの値を変更します。 | Not available. |
jupyter-notebook-conf | Jupyter Notebook の jupyter_notebook_config.py ファイルの値を変更します。 | Not available. |
jupyter-hub-conf | JupyterHubs の jupyterhub_config.py ファイルの値を変更します。 | Not available. |
jupyter-s3-conf | Jupyter Notebook の S3 の永続性を設定します。 | Not available. |
jupyter-sparkmagic-conf | Sparkmagic の config.json ファイルの値を変更します。 | Not available. |
livy-conf | Livy の livy.conf ファイルの値を変更します。 | Restarts Livy Server. |
livy-env | Livy 環境の値を変更します。 | Restarts Livy Server. |
livy-log4j2 | Livy の log4j2.properties の設定を変更します。 | Restarts Livy Server. |
mapred-env | MapReduce アプリケーションの環境の値を変更します。 | Restarts Hadoop MapReduce-HistoryServer. |
mapred-site | MapReduce アプリケーションの mapred-site.xml ファイルの値を変更します。 | Restarts Hadoop MapReduce-HistoryServer. |
oozie-env | Oozie の環境の値を変更します。 | Restarts Oozie. |
oozie-log4j | Oozie の oozie-log4j.properties ファイルの値を変更します。 | Restarts Oozie. |
oozie-site | Oozie の oozie-site.xml ファイルの値を変更します。 | Restarts Oozie. |
phoenix-hbase-metrics | Phoenix の hadoop-metrics2-hbase.properties ファイルの値を変更します。 | Not available. |
phoenix-hbase-site | Phoenix の hbase-site.xml ファイルの値を変更します。 | Not available. |
phoenix-log4j2 | Phoenix の log4j2.properties ファイルの値を変更します。 | Restarts Phoenix-QueryServer. |
phoenix-metrics | Phoenix の hadoop-metrics2-phoenix.properties ファイルの値を変更します。 | Not available. |
pig-env | Pig 環境の値を変更します。 | Not available. |
pig-properties | Pig の pig.properties ファイルの値を変更します。 | Restarts Oozie. |
pig-log4j | Pig の log4j.properties ファイルの値を変更します。 | Not available. |
presto-log | Presto の log.properties ファイルの値を変更します。 | Restarts Presto-Server (for PrestoDB) |
presto-config | Presto の config.properties ファイルの値を変更します。 | Restarts Presto-Server (for PrestoDB) |
presto-password-authenticator | Presto の password-authenticator.properties ファイルの値を変更します。 | Not available. |
presto-env | Presto の presto-env.sh ファイルの値を変更します。 | Restarts Presto-Server (for PrestoDB) |
presto-node | Presto の node.properties ファイルの値を変更します。 | Not available. |
presto-connector-blackhole | Presto の blackhole.properties ファイルの値を変更します。 | Not available. |
presto-connector-cassandra | Presto の cassandra.properties ファイルの値を変更します。 | Not available. |
presto-connector-hive | Presto の hive.properties ファイルの値を変更します。 | Restarts Presto-Server (for PrestoDB) |
presto-connector-jmx | Presto の jmx.properties ファイルの値を変更します。 | Not available. |
presto-connector-kafka | Presto の kafka.properties ファイルの値を変更します。 | Not available. |
presto-connector-lakeformation | Presto の lakeformation.properties ファイルの値を変更します。 | Restarts Presto-Server (for PrestoDB) |
presto-connector-localfile | Presto の localfile.properties ファイルの値を変更します。 | Not available. |
presto-connector-memory | Presto の memory.properties ファイルの値を変更します。 | Not available. |
presto-connector-mongodb | Presto の mongodb.properties ファイルの値を変更します。 | Not available. |
presto-connector-mysql | Presto の musql.properties ファイルの値を変更します。 | Not available. |
presto-connector-postgresql | Presto の postgresql.properties ファイルの値を変更します。 | Not available. |
presto-connector-raptor | Presto の raptor.properties ファイルの値を変更します。 | Not available. |
presto-connector-redis | Presto の redis.properties ファイルの値を変更します。 | Not available. |
presto-connector-redshift | Presto の redshift.properties ファイルの値を変更します。 | Not available. |
presto-connector-tpch | Presto の tpcj.properties ファイルの値を変更します。 | Not available. |
presto-connector-tpcds | Presto の tpcds.properties ファイルの値を変更します。 | Not available. |
trino-log | Trino の log.properties ファイルの値を変更します。 | Restarts Trino-Server (for Trino) |
trino-config | Trino の config.properties ファイルの値を変更します。 | Restarts Trino-Server (for Trino) |
trino-password-authenticator | Trino の password-authenticator.properties ファイルの値を変更します。 | Restarts Trino-Server (for Trino) |
trino-env | Trino の trino-env.sh ファイルの値を変更します。 | Restarts Trino-Server (for Trino) |
trino-node | Trino の node.properties ファイルの値を変更します。 | Not available. |
trino-connector-blackhole | Trino の blackhole.properties ファイルの値を変更します。 | Not available. |
trino-connector-cassandra | Trino の cassandra.properties ファイルの値を変更します。 | Not available. |
trino-connector-delta | Trino の delta.properties ファイルの値を変更します。 | Restarts Trino-Server (for Trino) |
trino-connector-hive | Trino の hive.properties ファイルの値を変更します。 | Restarts Trino-Server (for Trino) |
trino-exchange-manager | Trino の exchange-manager.properties ファイルの値を変更します。 | Restarts Trino-Server (for Trino) |
trino-connector-iceberg | Trino の iceberg.properties ファイルの値を変更します。 | Restarts Trino-Server (for Trino) |
trino-connector-hudi | Trino の hudi.properties ファイルの値を変更します。 | Restarts Trino-Server (for Trino) |
trino-connector-jmx | Trino の jmx.properties ファイルの値を変更します。 | Not available. |
trino-connector-kafka | Trino の kafka.properties ファイルの値を変更します。 | Not available. |
trino-connector-localfile | Trino の localfile.properties ファイルの値を変更します。 | Not available. |
trino-connector-memory | Trino の memory.properties ファイルの値を変更します。 | Not available. |
trino-connector-mongodb | Trino の mongodb.properties ファイルの値を変更します。 | Not available. |
trino-connector-mysql | Trino の mysql.properties ファイルの値を変更します。 | Not available. |
trino-connector-postgresql | Presto の postgresql.properties ファイルの値を変更します。 | Not available. |
trino-connector-raptor | Trino の raptor.properties ファイルの値を変更します。 | Not available. |
trino-connector-redis | Trino の redis.properties ファイルの値を変更します。 | Not available. |
trino-connector-redshift | Trino の redshift.properties ファイルの値を変更します。 | Not available. |
trino-connector-tpch | Trino の tpch.properties ファイルの値を変更します。 | Not available. |
trino-connector-tpcds | Trino の tpcds.properties ファイルの値を変更します。 | Not available. |
ranger-kms-dbks-site | Ranger KMS の dbks-site.xml ファイルの値を変更します。 | Restarts Ranger KMS Server. |
ranger-kms-site | Ranger KMS の ranger-kms-site.xml ファイルの値を変更します。 | Restarts Ranger KMS Server. |
ranger-kms-env | Ranger KMS 環境の値を変更します。 | Restarts Ranger KMS Server. |
ranger-kms-logback | Ranger KMS の kms-logback.xml ファイルの値を変更します。 | Not available. |
ranger-kms-db-ca | Ranger KMS を使用した MySQL SSL 接続用の S3 の CA ファイルの値を変更します。 | Not available. |
spark | Apache Spark 用の Amazon EMR-curated 設定。 | This property modifies spark-defaults. See actions there. |
spark-defaults | Spark の spark-defaults.conf ファイルの値を変更します。 | Restarts Spark history server and Spark thrift server. |
spark-env | Spark 環境の値を変更します。 | Restarts Spark history server and Spark thrift server. |
spark-hive-site | Spark の hive-site.xml ファイルの値を変更します | Not available. |
spark-log4j2 | Spark の log4j2.properties ファイルの値を変更します。 | Restarts Spark history server and Spark thrift server. |
spark-metrics | Spark の metrics.properties ファイルの値を変更します。 | Restarts Spark history server and Spark thrift server. |
tez-site | Tez の tez-site.xml ファイルの値を変更します。 | Restart Oozie and HiveServer2. |
yarn-env | YARN 環境の値を変更します。 | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. |
yarn-site | YARN の yarn-site.xml ファイルの値を変更します。 | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. |
zeppelin-env | Zeppelin 環境の値を変更します。 | Restarts Zeppelin. |
zeppelin-site | zeppelin-site.xml の構成設定を変更します。 | Restarts Zeppelin. |
zookeeper-config | ZooKeeper の zoo.cfg ファイルの値を変更します。 | Restarts Zookeeper server. |
zookeeper-logback | ZooKeeper の logback.xml ファイルの値を変更します。 | Restarts Zookeeper server. |
cloudwatch-logs | EMR クラスターノードの CloudWatch Logs 統合を設定します。 | Not available. |
emr-metrics | このノードの emr メトリクス設定を変更します。 | Restarts the CloudWatchAgent service. |
7.12.0 変更ログ
| Date | [Event] (イベント) | 説明 |
|---|---|---|
| 2025-11-21 | ドキュメント公開 | Amazon EMR 7.12.0 リリースノートが初めて公開されました |