View a markdown version of this page

使用 spark-submit 執行 Spark 作業 - Amazon EMR

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

使用 spark-submit 執行 Spark 作業

Amazon EMR 6.10.0 版及更高版本支援 spark-submit 作為命令列工具,可以使用它向 Amazon EMR on EKS 叢集提交 Spark 應用程式並執行。

注意

Amazon EMR 會根據 vCPU 和記憶體使用量計算 Amazon EKS 定價。此計算適用於驅動程式和執行器 Pod。此計算從您下載 Amazon EMR 應用程式映像時開始,直到 Amazon EKS Pod 終止且四捨五入至最接近的秒數。無論映像是存放在公有 Amazon EMR Amazon ECR 登錄檔還是您自己的私有登錄檔中,無論任務如何協調 (例如 StartJobRun API、Spark 運算子或 spark-submit),每當 Pod 使用衍生自 Amazon EMR 執行時間的映像執行時,都會套用定價。