Acceso a las interfaces de usuario web de Spark

Para ver las interfaces de usuario web de Spark, siga los procedimientos para crear un túnel de SSH o crear un proxy en la sección denominada Conectarse a un clúster en la Guía de administración de Amazon EMR y, a continuación, vaya al YARN ResourceManager para el clúster. Elija el enlace de la aplicación en Tracking UI (IU de seguimiento). Si la aplicación está en ejecución, verá ApplicationMaster. Esto le lleva a la IU web del nodo principal de la aplicación en el puerto 20888 donde se encuentra el controlador. El controlador podría estar situado en el nodo principal del clúster si se ejecuta en modo de cliente de YARN. Si ejecuta una aplicación en modo de clúster YARN, el controlador se encuentra en ApplicationMaster para la aplicación en el clúster. Si la aplicación ha finalizado, puede ver Historial, que le lleva al número de puerto de interfaz de usuario de HistoryServer de Spark en 18 080 del nodo principal del clúster de EMR. Esto es para aplicaciones que ya se han completado. También puede tener acceso a la interfaz de usuario HistoryServer de Spark directamente en http://master-public-dns-name:18080/.

Con la versión 5.25.0 y posteriores de Amazon EMR, puede acceder a la interfaz de usuario del servidor del historial de Spark desde la consola sin configurar un proxy web a través de una conexión SSH. Para obtener más información, consulte Ver interfaces de usuario de aplicaciones persistentes.