Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà. # Versioni del rilascio di Amazon EMR 5.x Questa sezione contiene le versioni dell'applicazione, le note di rilascio, le versioni dei componenti e le classificazioni di configurazione disponibili in ogni versione di rilascio di Amazon EMR 5x. Quando si avvia un cluster, è possibile scegliere tra diversi rilasci di Amazon EMR. In questo modo l'utente può testare e utilizzare le versioni dell'applicazione che soddisfano i propri requisiti di compatibilità. È possibile specificare il numero di rilascio con *l'etichetta del rilascio*. Le etichette di rilascio sono sotto forma di `emr-x.x.x` Ad esempio, `emr-7.12.0`. I nuovi rilasci di Amazon EMR diventano disponibili in Regioni differenti nell'arco di alcuni giorni, a partire dalla prima Regione alla data del rilascio iniziale. La versione più recente potrebbe non essere disponibile nella tua Regione durante questo periodo. Per una tabella completa delle versioni delle applicazioni in ogni versione di Amazon EMR 5.x, consulta [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md). **Topics** + [ # Versioni dell'applicazione nei rilasci di Amazon EMR 5.x ](emr-release-app-versions-5.x.md) + [ # Amazon EMR versione 5.36.2 ](emr-5362-release.md) + [ # Versione 5.36.1 di Amazon EMR ](emr-5361-release.md) + [ # Rilascio 5.36.0 di Amazon EMR ](emr-5360-release.md) + [ # Amazon EMR versione 5.35.0 ](emr-5350-release.md) + [ # Rilascio 5.34.0 di Amazon EMR ](emr-5340-release.md) + [ # Rilascio 5.33.1 di Amazon EMR ](emr-5331-release.md) + [ # Rilascio 5.33.0 di Amazon EMR ](emr-5330-release.md) + [ # Rilascio 5.32.1 di Amazon EMR ](emr-5321-release.md) + [ # Rilascio 5.32.0 di Amazon EMR ](emr-5320-release.md) + [ # Rilascio 5.31.1 di Amazon EMR ](emr-5311-release.md) + [ # Rilascio 5.31.0 di Amazon EMR ](emr-5310-release.md) + [ # Rilascio 5.30.2 di Amazon EMR ](emr-5302-release.md) + [ # Rilascio 5.30.1 di Amazon EMR ](emr-5301-release.md) + [ # Rilascio 5.30.0 di Amazon EMR ](emr-5300-release.md) + [ # Rilascio 5.29.0 di Amazon EMR ](emr-5290-release.md) + [ # Rilascio 5.28.1 di Amazon EMR ](emr-5281-release.md) + [ # Rilascio 5.28.0 di Amazon EMR ](emr-5280-release.md) + [ # Rilascio 5.27.1 di Amazon EMR ](emr-5271-release.md) + [ # Rilascio 5.27.0 di Amazon EMR ](emr-5270-release.md) + [ # Rilascio 5.26.0 di Amazon EMR ](emr-5260-release.md) + [ # Rilascio 5.25.0 di Amazon EMR ](emr-5250-release.md) + [ # Rilascio 5.24.1 di Amazon EMR ](emr-5241-release.md) + [ # Rilascio 5.24.0 di Amazon EMR ](emr-5240-release.md) + [ # Rilascio 5.23.1 di Amazon EMR ](emr-5231-release.md) + [ # Rilascio 5.23.0 di Amazon EMR ](emr-5230-release.md) + [ # Rilascio 5.22.0 di Amazon EMR ](emr-5220-release.md) + [ # Rilascio 5.21.2 di Amazon EMR ](emr-5212-release.md) + [ # Rilascio 5.21.1 di Amazon EMR ](emr-5211-release.md) + [ # Rilascio 5.21.0 di Amazon EMR ](emr-5210-release.md) + [ # Rilascio 5.20.1 di Amazon EMR ](emr-5201-release.md) + [ # Rilascio 5.20.0 di Amazon EMR ](emr-5200-release.md) + [ # Rilascio 5.19.1 di Amazon EMR ](emr-5191-release.md) + [ # Rilascio 5.19.0 di Amazon EMR ](emr-5190-release.md) + [ # Rilascio 5.18.1 di Amazon EMR ](emr-5181-release.md) + [ # Rilascio 5.18.0 di Amazon EMR ](emr-5180-release.md) + [ # Rilascio 5.17.2 di Amazon EMR ](emr-5172-release.md) + [ # Rilascio 5.17.1 di Amazon EMR ](emr-5171-release.md) + [ # Rilascio 5.17.0 di Amazon EMR ](emr-5170-release.md) + [ # Rilascio 5.16.1 di Amazon EMR ](emr-5161-release.md) + [ # Rilascio 5.16.0 di Amazon EMR ](emr-5160-release.md) + [ # Rilascio 5.15.1 di Amazon EMR ](emr-5151-release.md) + [ # Rilascio 5.15.0 di Amazon EMR ](emr-5150-release.md) + [ # Rilascio 5.14.2 di Amazon EMR ](emr-5142-release.md) + [ # Rilascio 5.14.1 di Amazon EMR ](emr-5141-release.md) + [ # Rilascio 5.14.0 di Amazon EMR ](emr-5140-release.md) + [ # Rilascio 5.13.1 di Amazon EMR ](emr-5131-release.md) + [ # Rilascio 5.13.0 di Amazon EMR ](emr-5130-release.md) + [ # Rilascio 5.12.3 di Amazon EMR ](emr-5123-release.md) + [ # Rilascio 5.12.2 di Amazon EMR ](emr-5122-release.md) + [ # Rilascio 5.12.1 di Amazon EMR ](emr-5121-release.md) + [ # Rilascio 5.12.0 di Amazon EMR ](emr-5120-release.md) + [ # Rilascio 5.11.4 di Amazon EMR ](emr-5114-release.md) + [ # Rilascio 5.11.3 di Amazon EMR ](emr-5113-release.md) + [ # Rilascio 5.11.2 di Amazon EMR ](emr-5112-release.md) + [ # Rilascio 5.11.1 di Amazon EMR ](emr-5111-release.md) + [ # Rilascio 5.11.0 di Amazon EMR ](emr-5110-release.md) + [ # Rilascio 5.10.1 di Amazon EMR ](emr-5101-release.md) + [ # Rilascio 5.10.0 di Amazon EMR ](emr-5100-release.md) + [ # Rilascio 5.9.1 di Amazon EMR ](emr-591-release.md) + [ # Rilascio 5.9.0 di Amazon EMR ](emr-590-release.md) + [ # Rilascio 5.8.3 di Amazon EMR ](emr-583-release.md) + [ # Rilascio 5.8.2 di Amazon EMR ](emr-582-release.md) + [ # Rilascio 5.8.1 di Amazon EMR ](emr-581-release.md) + [ # Rilascio 5.8.0 di Amazon EMR ](emr-580-release.md) + [ # Rilascio 5.7.1 di Amazon EMR ](emr-571-release.md) + [ # Rilascio 5.7.0 di Amazon EMR ](emr-570-release.md) + [ # Rilascio 5.6.1 di Amazon EMR ](emr-561-release.md) + [ # Rilascio 5.6.0 di Amazon EMR ](emr-560-release.md) + [ # Rilascio 5.5.4 di Amazon EMR ](emr-554-release.md) + [ # Rilascio 5.5.3 di Amazon EMR ](emr-553-release.md) + [ # Rilascio 5.5.2 di Amazon EMR ](emr-552-release.md) + [ # Rilascio 5.5.1 di Amazon EMR ](emr-551-release.md) + [ # Rilascio 5.5.0 di Amazon EMR ](emr-550-release.md) + [ # Rilascio 5.4.1 di Amazon EMR ](emr-541-release.md) + [ # Rilascio 5.4.0 di Amazon EMR ](emr-540-release.md) + [ # Rilascio 5.3.2 di Amazon EMR ](emr-532-release.md) + [ # Rilascio 5.3.1 di Amazon EMR ](emr-531-release.md) + [ # Rilascio 5.3.0 di Amazon EMR ](emr-530-release.md) + [ # Rilascio 5.2.3 di Amazon EMR ](emr-523-release.md) + [ # Rilascio 5.2.2 di Amazon EMR ](emr-522-release.md) + [ # Rilascio 5.2.1 di Amazon EMR ](emr-521-release.md) + [ # Rilascio 5.2.0 di Amazon EMR ](emr-520-release.md) + [ # Rilascio 5.1.1 di Amazon EMR ](emr-511-release.md) + [ # Rilascio 5.1.0 di Amazon EMR ](emr-510-release.md) + [ # Rilascio 5.0.3 di Amazon EMR ](emr-503-release.md) + [ # Rilascio 5.0.2 di Amazon EMR ](emr-502-release.md) + [ # Rilascio 5.0.1 di Amazon EMR ](emr-501-release.md) + [ # Rilascio 5.0.0 di Amazon EMR ](emr-500-release.md) # Versioni dell'applicazione nei rilasci di Amazon EMR 5.x Nella tabella seguente sono elencate le versioni dell'applicazione disponibili in ogni versione di Amazon EMR 5.x. **Informazioni sulla versione dell'applicazione** | | emr-5,36,2 | emr-5.36.1 | emr-5.36.0 | emr-5.35.0 | emr-5.34.0 | emr-5.33.1 | emr-5.33.0 | emr-5.32.1 | emr-5.32.0 | emr-5.31.1 | emr-5.31.0 | emr-5.30.2 | emr-5.30.1 | emr-5.30.0 | emr-5.29.0 | emr-5.28.1 | emr-5.28.0 | emr-5.27.1 | emr-5.27.0 | emr-5.26.0 | emr-5.25.0 | emr-5.24.1 | emr-5.24.0 | emr-5.23.1 | emr-5.23.0 | emr-5.22.0 | emr-5.21.2 | emr-5.21.1 | emr-5.21.0 | emr-5.20.1 | emr-5.20.0 | emr-5.19.1 | emr-5.19.0 | emr-5.18.1 | emr-5.18.0 | emr-5.17.2 | emr-5.17.1 | emr-5.17.0 | emr-5.16.1 | emr-5.16.0 | emr-5.15.1 | emr-5.15.0 | emr-5.14.2 | emr-5.14.1 | emr-5.14.0 | emr-5.13.1 | emr-5.13.0 | emr-5.12.3 | emr-5.12.2 | emr-5.12.1 | emr-5.12.0 | emr-5.11.4 | emr-5.11.3 | emr-5.11.2 | emr-5.11.1 | emr-5.11.0 | emr-5.10.1 | emr-5.10.0 | emr-5.9.1 | emr-5.9.0 | emr-5.8.3 | emr-5.8.2 | emr-5.8.1 | emr-5.8.0 | emr-5.7.1 | emr-5.7.0 | emr-5.6.1 | emr-5.6.0 | emr-5.5.4 | emr-5.5.3 | emr-5.5.2 | emr-5.5.1 | emr-5.5.0 | emr-5.4.1 | emr-5.4.0 | emr-5.3.2 | emr-5.3.1 | emr-5.3.0 | emr-5.2.3 | emr-5.2.2 | emr-5.2.1 | emr-5.2.0 | emr-5.1.1 | emr-5.1.0 | emr-5.0.3 | emr-5.0.2 | emr-5.0.1 | emr-5.0.0 | | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.12.206 | 1,12,206 | 1,12,206 | 1,12,159 | 1,11,970 | 1,11,970 | 1,11,970 | 1,11,890 | 1,11,890 | 1,11,852 | 1,11,8852 | 1,11,759 | 1,11,759 | 1,11,759 | 1,11,682 | 1,11,659 | 1,11,659 | 1,11,615 | 1,11,615 | 1,11,595 | 1,11,566 | 1,11,546 | 1,11,546 | 1,11,519 | 1,11,519 | 1,11,510 | 1,11,4479 | 1,11,4479 | 1,11,4479 | 1,11,461 | 1,11,461 | 1,11,433 | 1,11,433 | 1,11,3393 | 1,11,3393 | 1,11336 | 1,11336 | 1,11336 | 1,11336 | 1,11336 | 1,11333 | 1,11333 | 1,11,297 | 1,11,297 | 1,11,297 | 1,11,297 | 1,11,297 | 1,11,67 | 1,11267 | 1,11267 | 1,11267 | 1,11238 | 1,11238 | 1,11238 | 1,11238 | 1,11238 | 1,11,221 | 1,11,221 | 1,11,183 | 1,11,183 | 1,11,160 | 1,11,160 | 1,11,160 | 1,11,160 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2,7, 3,6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | Delta | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | Flink | 1.14.2 | 1.14.2 | 1.14.2 | 1.14.2 | 1.13.1 | 1.12.1 | 1.12.1 | 1.11.2 | 1.11.2 | 1.11.0 | 1.11.0 | 1.10.0 | 1.10.0 | 1.10.0 | 1.9.1 | 1.9.0 | 1.9.0 | 1.8.1 | 1.8.1 | 1.8.0 | 1.8.0 | 1.8.0 | 1.8.0 | 1.7.1 | 1.7.1 | 1.7.1 | 1.7.0 | 1.7.0 | 1.7.0 | 1.6.2 | 1.6.2 | 1.6.1 | 1.6.1 | 1.6.0 | 1.6.0 | 1.5.2 | 1.5.2 | 1.5.2 | 1.5.0 | 1.5.0 | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.0 | 1.3.0 | 1.2.1 | 1.2.1 | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | 1.1.4 | 1.1.4 | 1.1.4 | 1.1.3 | 1.1.3 | 1.1.3 | 1.1.3 | 1.1.3 | 1.1.3 | - | - | - | - | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.10 | 1.4.10 | 1.4.10 | 1.4.10 | 1.4.10 | 1.4.10 | 1.4.9 | 1.4.9 | 1.4.9 | 1.4.9 | 1.4.9 | 1.4.9 | 1.4.8 | 1.4.8 | 1.4.8 | 1.4.8 | 1.4.8 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.4 | 1.4.4 | 1.4.4 | 1.4.4 | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.2 | 1.2.2 | 1.2.2 | 1.2.2 | | HCatalog | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-0 | 2.3.8-amzn-0 | 2.3.7-amzn-4 | 2.3.7-amzn-4 | 2.3.7-amzn-3 | 2.3.7-amzn-3 | 2.3.7-amzn-1 | 2.3.7-amzn-1 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-1 | 2.3.6-amzn-0 | 2.3.6-amzn-0 | 2.3.5-amzn-1 | 2.3.5-amzn-1 | 2.3.5-amzn-0 | 2.3.5-amzn-0 | 2.3.4-amzn-2 | 2.3.4-amzn-2 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.3-amzn-2 | 2.3.3-amzn-2 | 2.3.3-amzn-2 | 2.3.3-amzn-2 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-0 | 2.3.3-amzn-0 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.1-amzn-0 | 2.3.1-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.10.1-amzn-4 | 2.10.1-amzn-4 | 2.10.1-amzn-4 | 2.10.1-amzn-3 | 2.10.1-amzn-2 | 2.10.1-amzn-1.1 | 2.10.1-amzn-1 | 2.10.1-amzn-0.1 | 2.10.1-amzn-0 | 2.10.0-amzn-0.1 | 2.10.0-amzn-0 | 2.8.5-amzn-6.1 | 2.8.5-amzn-6 | 2.8.5-amzn-6 | 2.8.5-amzn-5 | 2.8.5-amzn-5 | 2.8.5-amzn-5 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-3 | 2.8.5-amzn-3 | 2.8.5-amzn-2 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-0 | 2.8.5-amzn-0 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-0 | 2.8.4-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-5 | 2.7.3-amzn-5 | 2.7.3-amzn-4 | 2.7.3-amzn-4 | 2.7.3-amzn-3 | 2.7.3-amzn-3 | 2.7.3-amzn-3 | 2.7.3-amzn-3 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-0 | 2.7.3-amzn-0 | 2.7.3-amzn-0 | 2.7.3-amzn-0 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | | Hive | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-0 | 2.3.8-amzn-0 | 2.3.7-amzn-4 | 2.3.7-amzn-4 | 2.3.7-amzn-3 | 2.3.7-amzn-3 | 2.3.7-amzn-1 | 2.3.7-amzn-1 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-1 | 2.3.6-amzn-0 | 2.3.6-amzn-0 | 2.3.5-amzn-1 | 2.3.5-amzn-1 | 2.3.5-amzn-0 | 2.3.5-amzn-0 | 2.3.4-amzn-2 | 2.3.4-amzn-2 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-0 | 2.3.3-amzn-0 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.1-amzn-0 | 2.3.1-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | 0.10.1-amzn-1 | 0.10.1-amzn-1 | 0.10.1-amzn-1 | 0.9.0-amzn-2 | 0.9.0-amzn-0 | 0.7.0-amzn-1 | 0.7.0-amzn-1 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | 0.5.2-incubating | 0.5.2-incubating | 0.5.2-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | Hue | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 4.9.0 | 4.9.0 | 4.9.0 | 4.8.0 | 4.8.0 | 4,7,1 | 4,7,1 | 4.6.0 | 4.6.0 | 4.6.0 | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | 3.11.0 | 3.11.0 | 3.11.0 | 3.11.0 | 3.11.0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 1.2.2 | 1.2.2 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 0.9.6 | 0.9.6 | 0.9.6 | 0.9.6 | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | Livy | 0.7.1-incubating | 0.7.1-incubating | 0.7.1-incubating | 0.7.1-incubating | 0.7.1-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | MXNet | 1.8.0 | 1.8.0 | 1.8.0 | 1.8.0 | 1.8.0 | 1.7.0 | 1.7.0 | 1.7.0 | 1.7.0 | 1.6.0 | 1.6.0 | 1.5.1 | 1.5.1 | 1.5.1 | 1.5.1 | 1.5.1 | 1.5.1 | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.0 | 1.3.0 | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 0.12.0 | 0.12.0 | 0.12.0 | 0.12.0 | 0.12.0 | 0.12.0 | 0.12.0 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.2- -1,4 HBase | 4.14.2- -1,4 HBase | 4.14.2- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.16.0-amzn-1 | 0.16.0-amzn-1 | 0.16.0-amzn-1 | 0.16.0-amzn-1 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.267-amzn-1 | 0.267-amzn-1 | 0.267-amzn-1 | 0.266-amzn-0 | 0.261-amzn-0 | 0.245.1-amzn-0 | 0.245.1-amzn-0 | 0.240.1-amzn-0 | 0.240.1-amzn-0 | 0.238.3-amzn-0 | 0.238.3-amzn-0 | 0.232 | 0.232 | 0.232 | 0.227 | 0.227 | 0.227 | 0.224 | 0.224 | 0.220 | 0.220 | 0.219 | 0.219 | 0.215 | 0.215 | 0.215 | 0.215 | 0.215 | 0.215 | 0.214 | 0.214 | 0.212 | 0.212 | 0.210 | 0.210 | 0.206 | 0.206 | 0.206 | 0.203 | 0.203 | 0.194 | 0.194 | 0.194 | 0.194 | 0.194 | 0.194 | 0.194 | 0.188 | 0.188 | 0.188 | 0.188 | 0.187 | 0.187 | 0.187 | 0.187 | 0.187 | 0.187 | 0.187 | 0.184 | 0.184 | 0.170 | 0.170 | 0.170 | 0.170 | 0.170 | 0.170 | 0.170 | 0.170 | 0.170 | 0.170 | 0.170 | 0.170 | 0.170 | 0.166 | 0.166 | 0.157.1 | 0.157.1 | 0.157.1 | 0.157.1 | 0.157.1 | 0.157.1 | 0.152.3 | 0.152.3 | 0.152.3 | 0.152.3 | 0.150 | 0.150 | 0.150 | | Spark | 2.4.8-amzn-2 | 2.4.8-amzn-2 | 2.4.8-amzn-2 | 2.4.8-amzn-1 | 2.4.8-amzn-0 | 2.4.7-amzn-1.1 | 2.4.7-amzn-1 | 2.4.7-amzn-0.1 | 2.4.7-amzn-0 | 2.4.6-amzn-0.1 | 2.4.6-amzn-0 | 2.4.5-amzn-0.1 | 2.4.5-amzn-0 | 2.4.5-amzn-0 | 2.4.4 | 2.4.4 | 2.4.4 | 2.4.4 | 2.4.4 | 2.4.3 | 2.4.3 | 2.4.2 | 2.4.2 | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | 2.3.2 | 2.3.2 | 2.3.2 | 2.3.2 | 2.3.1 | 2.3.1 | 2.3.1 | 2.3.1 | 2.3.1 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.1.1 | 2.1.1 | 2.1.1 | 2.1.1 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.1 | 2.0.1 | 2.0.1 | 2.0.0 | 2.0.0 | 2.0.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 2.3.1 | 2.3.1 | 2.1.0 | 2.1.0 | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | 1.13.1 | 1.13.1 | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | 1.11.0 | 1.11.0 | 1.9.0 | 1.9.0 | 1.9.0 | 1.9.0 | 1.9.0 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | | Zeppelin | 0.10.0 | 0.10.0 | 0.10.0 | 0.10.0 | 0.10.0 | 0.9.0 | 0.9.0 | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.0 | 0.7.0 | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.1 | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | # Amazon EMR versione 5.36.2 emr-5.36.2 ## versioni dell'applicazione 5.36.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog),, [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.36.2 | emr-5.36.1 | emr-5.36.0 | emr-5.35.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.12.206 | 1,12,206 | 1,12,206 | 1,12,159 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.14.2 | 1.14.2 | 1.14.2 | 1.14.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-0 | | Hadoop | 2.10.1-amzn-4 | 2.10.1-amzn-4 | 2.10.1-amzn-4 | 2.10.1-amzn-3 | | Hive | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-0 | | Hudi | 0.10.1-amzn-1 | 0.10.1-amzn-1 | 0.10.1-amzn-1 | 0.9.0-amzn-2 | | Hue | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.1.0 | 2.1.0 | | JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | | Livy | 0.7.1-incubating | 0.7.1-incubating | 0.7.1-incubating | 0.7.1-incubating | | MXNet | 1.8.0 | 1.8.0 | 1.8.0 | 1.8.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.267-amzn-1 | 0.267-amzn-1 | 0.267-amzn-1 | 0.266-amzn-0 | | Spark | 2.4.8-amzn-2 | 2.4.8-amzn-2 | 2.4.8-amzn-2 | 2.4.8-amzn-1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.10.0 | 0.10.0 | 0.10.0 | 0.10.0 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## note di rilascio 5.36.2 Le seguenti note di rilascio includono informazioni per la versione 5.36.2 di Amazon EMR. Le modifiche sono relative alla versione 5.36.1. Per ulteriori informazioni sulla tempistica di rilascio, consulta il [log delle modifiche](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-5362-release.html#5362-changelog). **Modifiche, miglioramenti e problemi risolti** + Questa versione migliora la logica di scalabilità verso il basso del cluster in modo che Amazon EMR non riduca i nodi principali al di sotto dell'impostazione del fattore di replica HDFS per il cluster. Questo miglioramento soddisfa i requisiti di ridondanza dei dati e riduce la possibilità che un'operazione di scalabilità si blocchi. + Questa versione aggiunge un nuovo meccanismo di tentativi al flusso di lavoro dimensionabile per i cluster EMR che eseguono Presto o Trino. Questo miglioramento riduce il rischio che il ridimensionamento del cluster venga eseguito all'infinito a causa di una singola operazione di ridimensionamento non riuscita. Inoltre, migliora l'utilizzo del cluster, poiché quest'ultimo aumenta e riduce le·proprie·dimensioni più rapidamente. + Risolve un problema a causa del quale le operazioni di scalabilità verso il basso del cluster potrebbero bloccarsi mentre Amazon EMR disattiva correttamente un nodo centrale e questo non funzionava correttamente prima della sua completa disattivazione. + Migliora la stabilità di un nodo in un cluster ad alta disponibilità con più nodi primari quando Amazon EMR riavvia un singolo nodo. + Ottimizza la gestione dei log con Amazon EMR in esecuzione su Amazon EC2. Di conseguenza, potresti notare una leggera riduzione dei costi di archiviazione per i log del cluster. + Migliora la gestione dei file di registro delle ZooKeeper transazioni mantenuti sui nodi primari per ridurre al minimo gli scenari in cui i file di registro superano i limiti e interrompono le operazioni del cluster. + Risolve un bug raro che può causare il fallimento di un cluster ad alta disponibilità con più nodi primari a causa dell'impossibilità di comunicare con Yarn. ResourceManager + Quando avvii un cluster con *l'ultima versione di patch* di Amazon EMR 5.36 o successiva, 6.6 o successiva o 7.0 o successiva, Amazon EMR utilizza la versione più recente di Amazon Linux 2023 o Amazon Linux 2 per l'AMI Amazon EMR predefinita. Per ulteriori informazioni, consulta [Utilizzo dell'AMI Amazon Linux predefinita per Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html). [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5362-release.html) ## Versioni dei componenti 5.36.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.16.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.16.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.5.0 | Ambiente Conda per EMR Notebooks che include il gateway aziendale Jupyter | | emr-s3-dist-cp | 2.21.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.7.0 | Connettore di EMR S3Select | | emrfs | 2,51,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.14.2 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.14.2 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.1-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.1-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.1-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.1-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.1-amzn-4 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.1-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.1-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.1-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.1-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.1-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.1-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.9-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.9-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.9-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.9-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.9-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.9-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.9-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.10.1-amzn-1 | Framework di elaborazione incrementale per alimentare la Data Pipeline a bassa latenza e alta efficienza. | | hudi-spark | 0.10.1-amzn-1 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.10.1-amzn-1 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.10.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.4.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.1-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.13.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.8.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.68 | Server di database MySQL. | | nvidia-cuda | 110,194 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 52,1 | Client a riga di comando Oozie. | | oozie-server | 5.2.1 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.5.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.267-amzn-1 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.267-amzn-1 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.267-amzn-1 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 4.0.2 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.8-amzn-2 | Client a riga di comando Spark. | | spark-history-server | 2.4.8-amzn-2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.8-amzn-2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.8-amzn-2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.4.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.10.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## 5.36.2 classificazioni di configurazione Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). Le azioni di riconfigurazione vengono eseguite quando si specifica una configurazione per gruppi di istanze in un cluster in esecuzione. Amazon EMR avvia solo le azioni di riconfigurazione per le classificazioni modificate. Per ulteriori informazioni, consulta [Riconfigurazione di un gruppo di istanze in un cluster in esecuzione](emr-configure-apps-running-cluster.md). **classificazioni emr-5.36.2** | Classificazioni | Description | Operazioni di riconfigurazione | | --- | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | Restarts the ResourceManager service. | | container-executor | Modificare i valori nel file container-executor.cfg di Hadoop YARN. | Not available. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | Not available. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | docker-conf | Modifica le impostazioni relative a docker. | Not available. | | emrfs-site | Modifica le impostazioni EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | flink-conf | Modifica le impostazione flink-conf.yaml. | Restarts Flink history server. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | Restarts Flink history server. | | flink-log4j-session | Modifica le impostazioni di Flink log4j-session.properties per la sessione. Kubernetes/Yarn | Not available. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | Restarts Flink history server. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | Not available. | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | Not available. | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | | hbase-env | Modifica i valori nell'ambiente. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | Not available. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | Should not be reconfigured. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | Restarts Hive HCatalog Server. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | Restarts Hive HCatalog Server. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | Restarts Hive HCatalog Server. | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | Restarts Hive WebHCat Server. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | Not available. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | Not available. | | hive-env | Modifica i valori nell'ambiente Hive. | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | Restarts HiveServer2 and HiveMetastore. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | Not available. | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | Not available. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | Not available. | | hue-ini | Modifica i valori nel file ini di Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | Restarts Hadoop Httpfs service. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | Restarts Hadoop Httpfs service. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | Not available. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | Restarts Hadoop-KMS service. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | Not available. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | | hudi-env | Modifica i valori nell'ambiente Hudi. | Not available. | | hudi-defaults | Modifica i valori nel file hudi-defaults.conf di Hudi. | Not available. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | Not available. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | Not available. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | Not available. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | Not available. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | Restarts Livy Server. | | livy-env | Modifica i valori nell'ambiente Livy. | Restarts Livy Server. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | Restarts Livy Server. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | Restarts Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | Restarts Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | Restarts Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | Not available. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | Not available. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | Restarts Phoenix-QueryServer. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | Not available. | | pig-env | Change values in the Pig environment. | Not available. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | Restarts Oozie. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | Not available. | | presto-log | Modifica i valori nel file log.properties di Presto. | Restarts Presto-Server. | | presto-config | Modifica i valori nel file config.properties di Presto. | Restarts Presto-Server. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | Not available. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | Restarts Presto-Server. | | presto-node | Modifica i valori nel file node.properties di Presto. | Not available. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | Not available. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | Not available. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | Restarts Presto-Server. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | Not available. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | Not available. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | Not available. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | Not available. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | Not available. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | Not available. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | Not available. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | Not available. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | Not available. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | Not available. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | Not available. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | Not available. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | Not available. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | Not available. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | Restarts EMR record server. | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | Restarts EMR record server. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | Restarts EMR record server. | | spark | Impostazioni Amazon EMR per Apache Spark. | This property modifies spark-defaults. See actions there. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | Restarts Spark history server and Spark thrift server. | | spark-env | Modifica i valori nell'ambiente Spark. | Restarts Spark history server and Spark thrift server. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | Not available. | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | Restarts Spark history server and Spark thrift server. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | Restarts Spark history server and Spark thrift server. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | Not available. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | Not available. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | Not available. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | Restarts Oozie. | | yarn-env | Modifica i valori nell'ambiente YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | Restarts Zeppelin. | | zeppelin-site | Modifica le impostazioni di configurazione in zeppelin-site.xml. | Restarts Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | Restarts Zookeeper server. | ## 5.36.2 registro delle modifiche **Registro delle modifiche per la versione 5.36.2 e le note di rilascio** | Data | Event | Description | | --- | --- | --- | | 2024-05-28 | Implementazione completata | [Amazon EMR 5.36.2 completamente distribuito in tutte le regioni supportate](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | | 2024-05-28 | Pubblicazione dei documenti | Pubblicate per la prima volta le note di rilascio di Amazon EMR 5.36.2 | | 2024-05-20 | Rilascio iniziale | Amazon EMR 5.36.2 è stato distribuito per la prima volta in regioni commerciali limitate | # Versione 5.36.1 di Amazon EMR emr-5.36.1 ## Versioni dell'applicazione 5.36.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/) [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.36.1 | emr-5.36.0 | emr-5.35.0 | emr-5.34.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.12.206 | 1,12,206 | 1,12,159 | 1,11,970 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.14.2 | 1.14.2 | 1.14.2 | 1.13.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-0 | 2.3.8-amzn-0 | | Hadoop | 2.10.1-amzn-4 | 2.10.1-amzn-4 | 2.10.1-amzn-3 | 2.10.1-amzn-2 | | Hive | 2.3.9-amzn-2 | 2.3.9-amzn-2 | 2.3.9-amzn-0 | 2.3.8-amzn-0 | | Hudi | 0.10.1-amzn-1 | 0.10.1-amzn-1 | 0.9.0-amzn-2 | 0.9.0-amzn-0 | | Hue | 4.10.0 | 4.10.0 | 4.10.0 | 4.9.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | 2.6.0 | 2.1.0 | 2.1.0 | 2.1.0 | | JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | | Livy | 0.7.1-incubating | 0.7.1-incubating | 0.7.1-incubating | 0.7.1-incubating | | MXNet | 1.8.0 | 1.8.0 | 1.8.0 | 1.8.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.267-amzn-1 | 0.267-amzn-1 | 0.266-amzn-0 | 0.261-amzn-0 | | Spark | 2.4.8-amzn-2 | 2.4.8-amzn-2 | 2.4.8-amzn-1 | 2.4.8-amzn-0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.10.0 | 0.10.0 | 0.10.0 | 0.10.0 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.36.1 Le seguenti note di rilascio includono informazioni relative alla versione 5.36.1 di Amazon EMR. Le modifiche sono relative alla versione 5.36.0. Per ulteriori informazioni sulla tempistica di rilascio, consulta il [log delle modifiche](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-5361-release.html#5361-changelog). **Modifiche, miglioramenti e problemi risolti** + La versione 5.36.1 di Amazon EMR aggiunge il supporto per l'archiviazione dei log su Amazon S3 durante la riduzione dei cluster. Nelle precedenti versioni 5.x, era possibile archiviare i file di log in Amazon S3 solo durante la terminazione del cluster. Questo miglioramento garantisce la persistenza su Amazon S3 dei file di log generati nel cluster anche dopo la terminazione del nodo. Per ulteriori informazioni, consulta [Configurazione della registrazione e del debug di cluster](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-debugging.html). + La versione 5.36.1 migliora il daemon di gestione dei log sul cluster per monitorare cartelle di log aggiuntive nel cluster EMR. Questo miglioramento riduce al minimo gli scenari di utilizzo eccessivo del disco. + La versione 5.36.1 riavvia automaticamente il daemon di gestione dei log sul cluster quando si arresta. Questo miglioramento riduce il rischio che i nodi appaiano non integri a causa dell'eccessivo utilizzo del disco. + La versione 5.36.1 corregge un problema per cui i daemon Amazon EMR sul nodo primario mantenevano i metadati obsoleti per le istanze terminate nel cluster. Il mantenimento di dati obsoleti potrebbe causare un aumento illimitato dell'utilizzo della CPU e della memoria all'interno del cluster e, infine, provocare errori del cluster. + Per i cluster avviati con più nodi primari, la versione 5.36.1 corregge un problema per cui un guasto hardware di Amazon EC2 su uno dei nodi primari poteva causare l'esito negativo di un secondo nodo primario e rendere instabile il cluster. + Per i cluster configurati con la crittografia in transito, ora Scalabilità gestita riconosce i *dati shuffle di Spark*. I dati shuffle di Spark sono dati che Spark ridistribuisce tra le partizioni per eseguire operazioni specifiche. Durante la riduzione, Scalabilità gestita ignora le istanze con dati shuffle. In questo modo si evitano nuovi tentativi di eseguire il processo e nuovi calcoli, che sono costosi in termini di prezzo e prestazioni. Per ulteriori informazioni sulle operazioni di shuffle, consulta la [Guida di programmazione Spark](https://spark.apache.org/docs/latest/rdd-programming-guide.html#shuffle-operations). + Quando avvii un cluster con *l'ultima versione di patch* di Amazon EMR 5.36 o successiva, 6.6 o successiva o 7.0 o successiva, Amazon EMR utilizza la versione più recente di Amazon Linux 2023 o Amazon Linux 2 per l'AMI Amazon EMR predefinita. Per ulteriori informazioni, consulta [Utilizzo dell'AMI Amazon Linux predefinita per Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html). [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5361-release.html) ## Versioni dei componenti 5.36.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.16.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.16.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.5.0 | Ambiente Conda per EMR Notebooks che include il gateway aziendale Jupyter | | emr-s3-dist-cp | 2.21.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.7.0 | Connettore di EMR S3Select | | emrfs | 2,51,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.14.2 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.14.2 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.1-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.1-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.1-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.1-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.1-amzn-4 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.1-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.1-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.1-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.1-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.1-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.1-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.9-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.9-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.9-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.9-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.9-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.9-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.9-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.10.1-amzn-1 | Framework di elaborazione incrementale per alimentare la Data Pipeline a bassa latenza e alta efficienza. | | hudi-spark | 0.10.1-amzn-1 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.10.1-amzn-1 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.10.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.4.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.1-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.13.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.8.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.68 | Server di database MySQL. | | nvidia-cuda | 110,194 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 52,1 | Client a riga di comando Oozie. | | oozie-server | 5.2.1 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.5.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.267-amzn-1 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.267-amzn-1 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.267-amzn-1 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 4.0.2 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.8-amzn-2 | Client a riga di comando Spark. | | spark-history-server | 2.4.8-amzn-2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.8-amzn-2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.8-amzn-2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.4.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.10.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.36.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). Le azioni di riconfigurazione vengono eseguite quando si specifica una configurazione per gruppi di istanze in un cluster in esecuzione. Amazon EMR avvia solo le azioni di riconfigurazione per le classificazioni modificate. Per ulteriori informazioni, consulta [Riconfigurazione di un gruppo di istanze in un cluster in esecuzione](emr-configure-apps-running-cluster.md). **Classificazioni emr-5.36.1** | Classificazioni | Description | Operazioni di riconfigurazione | | --- | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | Restarts the ResourceManager service. | | container-executor | Modificare i valori nel file container-executor.cfg di Hadoop YARN. | Not available. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | Not available. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | docker-conf | Modifica le impostazioni relative a docker. | Not available. | | emrfs-site | Modifica le impostazioni EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | flink-conf | Modifica le impostazione flink-conf.yaml. | Restarts Flink history server. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | Restarts Flink history server. | | flink-log4j-session | Modifica le impostazioni di Flink log4j-session.properties per la sessione. Kubernetes/Yarn | Not available. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | Restarts Flink history server. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | Not available. | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | Not available. | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | | hbase-env | Modifica i valori nell'ambiente. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | Not available. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | Should not be reconfigured. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | Restarts Hive HCatalog Server. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | Restarts Hive HCatalog Server. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | Restarts Hive HCatalog Server. | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | Restarts Hive WebHCat Server. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | Not available. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | Not available. | | hive-env | Modifica i valori nell'ambiente Hive. | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | Restarts HiveServer2 and HiveMetastore. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | Not available. | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | Not available. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | Not available. | | hue-ini | Modifica i valori nel file ini di Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | Restarts Hadoop Httpfs service. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | Restarts Hadoop Httpfs service. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | Not available. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | Restarts Hadoop-KMS service. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | Not available. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | | hudi-env | Modifica i valori nell'ambiente Hudi. | Not available. | | hudi-defaults | Modifica i valori nel file hudi-defaults.conf di Hudi. | Not available. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | Not available. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | Not available. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | Not available. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | Not available. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | Restarts Livy Server. | | livy-env | Modifica i valori nell'ambiente Livy. | Restarts Livy Server. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | Restarts Livy Server. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | Restarts Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | Restarts Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | Restarts Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | Not available. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | Not available. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | Restarts Phoenix-QueryServer. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | Not available. | | pig-env | Change values in the Pig environment. | Not available. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | Restarts Oozie. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | Not available. | | presto-log | Modifica i valori nel file log.properties di Presto. | Restarts Presto-Server. | | presto-config | Modifica i valori nel file config.properties di Presto. | Restarts Presto-Server. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | Not available. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | Restarts Presto-Server. | | presto-node | Modifica i valori nel file node.properties di Presto. | Not available. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | Not available. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | Not available. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | Restarts Presto-Server. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | Not available. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | Not available. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | Not available. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | Not available. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | Not available. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | Not available. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | Not available. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | Not available. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | Not available. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | Not available. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | Not available. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | Not available. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | Not available. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | Not available. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | Restarts EMR record server. | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | Restarts EMR record server. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | Restarts EMR record server. | | spark | Impostazioni Amazon EMR per Apache Spark. | This property modifies spark-defaults. See actions there. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | Restarts Spark history server and Spark thrift server. | | spark-env | Modifica i valori nell'ambiente Spark. | Restarts Spark history server and Spark thrift server. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | Not available. | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | Restarts Spark history server and Spark thrift server. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | Restarts Spark history server and Spark thrift server. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | Not available. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | Not available. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | Not available. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | Restarts Oozie. | | yarn-env | Modifica i valori nell'ambiente YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | Restarts Zeppelin. | | zeppelin-site | Modifica le impostazioni di configurazione in zeppelin-site.xml. | Restarts Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | Restarts Zookeeper server. | ## Log delle modifiche 5.36.1 **Log delle modifiche per la versione 5.36.1 e note di rilascio** | Data | Event | Description | | --- | --- | --- | | 2023-07-26 | Aggiorna | Nuove etichette della versione del sistema operativo 2.0.20230612.0 e 2.0.20230628.0. | | 2023-05-25 | Implementazione completata | [Amazon EMR 5.36.1 completamente distribuito in tutte le regioni supportate](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | | 2023-05-09 | Pubblicazione dei documenti | Pubblicazione delle prime note di rilascio di Amazon EMR 5.36.1 | | 2023-05-04 | Rilascio iniziale | Implementazione di Amazon EMR 5.36.1 in alcune regioni commerciali | # Rilascio 5.36.0 di Amazon EMR emr-5.36.0 ## Versioni dell'applicazione 5.36.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/),, [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/) [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.36.0 | emr-5.35.0 | emr-5.34.0 | emr-5.33.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.12.206 | 1,12,159 | 1,11,970 | 1,11,970 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.14.2 | 1.14.2 | 1.13.1 | 1.12.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.9-amzn-2 | 2.3.9-amzn-0 | 2.3.8-amzn-0 | 2.3.7-amzn-4 | | Hadoop | 2.10.1-amzn-4 | 2.10.1-amzn-3 | 2.10.1-amzn-2 | 2.10.1-amzn-1.1 | | Hive | 2.3.9-amzn-2 | 2.3.9-amzn-0 | 2.3.8-amzn-0 | 2.3.7-amzn-4 | | Hudi | 0.10.1-amzn-1 | 0.9.0-amzn-2 | 0.9.0-amzn-0 | 0.7.0-amzn-1 | | Hue | 4.10.0 | 4.10.0 | 4.9.0 | 4.9.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.2.2 | | Livy | 0.7.1-incubating | 0.7.1-incubating | 0.7.1-incubating | 0.7.0-incubating | | MXNet | 1.8.0 | 1.8.0 | 1.8.0 | 1.7.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.267-amzn-1 | 0.266-amzn-0 | 0.261-amzn-0 | 0.245.1-amzn-0 | | Spark | 2.4.8-amzn-2 | 2.4.8-amzn-1 | 2.4.8-amzn-0 | 2.4.7-amzn-1.1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.10.0 | 0.10.0 | 0.10.0 | 0.9.0 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.36.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.36.0. Le modifiche sono relative alla versione 5.35.0. Data del rilascio iniziale: 15 giugno 2022 **Nuove funzionalità** + La versione 5.36.0 di Amazon EMR aggiunge il supporto per il linguaggio DDL (Data Definition Language) con Apache Spark su cluster abilitati per Apache Ranger. Ciò consente di utilizzare Apache Ranger per gestire l'accesso a operazioni come la creazione, la modifica e la rimozione di database e tabelle da un cluster Amazon EMR. + Quando avvii un cluster con *l'ultima versione di patch* di Amazon EMR 5.36 o successiva, 6.6 o successiva o 7.0 o successiva, Amazon EMR utilizza la versione più recente di Amazon Linux 2023 o Amazon Linux 2 per l'AMI Amazon EMR predefinita. Per ulteriori informazioni, consulta [Utilizzo dell'AMI Amazon Linux predefinita per Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html). **Nota** Questa versione non riceve più aggiornamenti automatici delle AMI poiché è stata sostituita da un'altra versione di patch. La versione della patch è indicata dal numero dopo il secondo separatore decimale (`6.8.1`). Per scoprire se stai utilizzando l'ultima versione della patch, controlla le versioni disponibili nella [https://docs.aws.amazon.com/emr/latest/ReleaseGuide](https://docs.aws.amazon.com/emr/latest/ReleaseGuide) o consulta il menu a discesa **Versione Amazon EMR** quando crei un cluster nella console o utilizzi l'API [https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html](https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html) o l'operazione [https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html](https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html) nella CLI. Per ricevere aggiornamenti sulle nuove versioni, iscriviti al feed RSS nella pagina [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). | OsReleaseLabel (Versione Amazon Linux) | Versione del kernel di Amazon Linux | Data di disponibilità | Regioni supportate | | --- | --- | --- | --- | | 2.0.20260302.0 | 4,14,355-280,714amzn2 | 13 marzo 2026 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 20,20260216,0 | 4,14,355-280,714amzn2 | 25 febbraio 2026 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 20,20260120,1 | 4,14,355-280,713.amzn2 | 18 febbraio 2026 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 20,20251208,0 | 4,14,355-280,710.amzn2 | 13 gennaio 2026 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 2,020251121,0 | 4,14,355-280,708.amzn2 | 16 dicembre 2025 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 20,20251027,1 | 4,14,355-280,706.amzn2 | 10 novembre 2025 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 20,20250929,2 | 4,14,355-280,695. amzn2 | 13 ottobre 2025 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 2.0,20250818,2 | 4,14,355-280,672. amzn2 | 17 settembre 2025 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 2.0,20250808.1 | 4.14,355-280.664.amzn2 | 28 agosto 2025 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 2.0,20250721,2 | 4,14,355-280,652. amzn2 | 14 agosto 2025 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 2,020250623,0 | 4,14,355-277,647amzn2 | 21 luglio 2025 | Africa (Città del Capo), Asia Pacifico (Hong Kong), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Canada (Centrale), Europa (Francoforte), Europa (Zurigo), Europa (Stockstock) Holm), Europa (Milano), Europa (Spagna), Europa (Irlanda), Europa (Londra), Europa (Parigi), Israele (Tel Aviv), Medio Oriente (Emirati Arabi Uniti), Medio Oriente (Bahrein), Sud America (San Paolo), Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon) | | 20,20250610,0 | 4,14,355-277,647.amzn2 | 14 luglio 2025 | Europa (Stoccolma), Medio Oriente (Bahrein), Cina (Pechino), Asia Pacifico (Mumbai), Europa (Parigi), Asia Pacifico (Giacarta), Stati Uniti orientali (Ohio), Africa (Città del Capo), Europa (Irlanda), Medio Oriente (Emirati Arabi Uniti), Europa (Francoforte), Sud America (San Paolo), Asia Pacifico (Hong Kong), Asia Pacifico (Hyderabad)), Stati Uniti orientali (Virginia settentrionale), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Europa (Londra), Europa (Milano), Asia Pacifico (Tokyo), (Stati Uniti orientali), (Stati Uniti occidentali), Stati Uniti occidentali (Oregon) AWS GovCloud , Stati Uniti occidentali (California settentrionale), Asia Pacifico (Singapore), Asia Pacifico (Sydney) AWS GovCloud ), Israele (Tel Aviv), Canada (Centrale), Europa (Spagna), Cina (Ningxia), Europa (Zurigo) | | 2.0,20250527,1 | 4,14,355-277,647.amzn2 | 19 giugno 2025 | Europa (Stoccolma), Medio Oriente (Bahrein), Asia Pacifico (Mumbai), Europa (Parigi), Asia Pacifico (Giacarta), Stati Uniti orientali (Ohio), Africa (Città del Capo), Europa (Irlanda), Medio Oriente (Emirati Arabi Uniti), Europa (Francoforte), Sud America (San Paolo), Asia Pacifico (Hong Kong), Asia Pacifico (Hyderabad), Stati Uniti orientali (ND) Virginia), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Europa (Londra), Asia Pacifico (Melbourne), Europa (Milano), Asia Pacifico (Tokyo), Stati Uniti occidentali (Oregon), Stati Uniti occidentali (California settentrionale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Israele (Tel Aviv), Canada (Centrale), Europa (Spagna), Europa (Zurigo) | | 2.0,20250512,0 | 4,14,355-277,643.amzn2 | 04 giugno 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Milano), Europa (Parigi), Europa (Stoccolma), Asia Pacifico (Hong Kong), Asia Pacifico (Giacarta), Asia Pacifico (Mumbai), Asia Pacifico (Osaka), Asia Pacifico (Hong Kong), Asia Pacifico (Giacarta), Asia Pacifico (Mumbai), Asia Pacifico (Osaka), Asia Pacifico (Hong Kong) (Seul), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Tokyo), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti orientali), ( AWS GovCloud Stati Uniti occidentali), Cina (Pechino), Cina (Ningxia) AWS GovCloud | | 2,0,20250428,0 | 4,14,355-276,639amzn2 | 23 maggio 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Milano), Europa (Parigi), Europa (Spagna), Europa (Stoccolma), Europa (Zurigo), Asia Pacifico (Hong Kong), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad) Giacarta), Asia Pacifico (Melbourne), Asia Pacifico (Mumbai), Asia Pacifico (Osaka), Asia Pacifico (Seoul), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Tokyo), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Medio Oriente (Emirati Arabi Uniti), Canada (Centrale), Israele (Tel Aviv) | | 20,20250414,0 | 4,14,355-276,618.amzn2 | 12 maggio 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong) Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), ( AWS GovCloud Stati Uniti orientali), Cina (Pechino), Cina (Ningxia) AWS GovCloud | | 20,20250321,0 | 4,14,355 | 09 aprile 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong) Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), ( AWS GovCloud Stati Uniti orientali), Cina (Pechino), Cina (Ningxia) AWS GovCloud | | 2,0,20250305,0 | 4,14,355 | 18 marzo 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong) Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), ( AWS GovCloud Stati Uniti orientali), Cina (Pechino), Cina (Ningxia) AWS GovCloud | | 2,0,20250220,0 | 4,14,355 | 08 marzo 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong) Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), ( AWS GovCloud Stati Uniti orientali), Cina (Pechino), Cina (Ningxia) AWS GovCloud | | 2,0,20250201,0 | 4,14,355 | 28 febbraio 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong) Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), ( AWS GovCloud Stati Uniti orientali), Cina (Pechino), Cina (Ningxia) AWS GovCloud | | 2,0,20250123,4 | 4,14,355 | 27 gennaio 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong) Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), ( AWS GovCloud Stati Uniti orientali), Cina (Pechino), Cina (Ningxia) AWS GovCloud | | 2,0,20250116,0 | 4,14,355 | 23 gennaio 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong) Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), ( AWS GovCloud Stati Uniti orientali), Cina (Pechino), Cina (Ningxia) AWS GovCloud | | 2,0,20241217,0 | 4,14,355 | 08 gennaio 2025 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong) Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), ( AWS GovCloud Stati Uniti orientali), Cina (Pechino), Cina (Ningxia), Asia AWS GovCloud Pacifico (Hyderabad), Medio Oriente (Emirati Arabi Uniti), Europa (Spagna), Europa (Zurigo), Asia Pacifico (Melbourne), Israele (Tel Aviv) | | 20,20240709,1 | 4,14,348 | 23 luglio 2024 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Hong Kong) Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), ( AWS GovCloud Stati Uniti orientali), Cina (Pechino), Cina (Ningxia), Asia AWS GovCloud Pacifico (Hyderabad), Medio Oriente (Emirati Arabi Uniti), Europa (Spagna), Europa (Zurigo), Asia Pacifico (Melbourne), Israele (Tel Aviv) | | 2.0.20230504.1 | 4,14,313 | 16 maggio 2023 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 20,20230418,0 | 4,14,311 | 3 maggio 2023 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 20,20230404,1 | 4,14,311 | 18 aprile 2023 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 20,20230404,0 | 4,14,311 | 10 aprile 2023 | Stati Uniti orientali (Virginia settentrionale), Europa (Parigi) | | 20,20230320,0 | 4,1409 | 30 marzo 2023 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 2,0,20230307,0 | 4,14,305 | 15 marzo 2023 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 2,0,20230207,0 | 4,14,304 | 22 febbraio 2023 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 2,0,20230119,1 | 4,14,31 | 3 febbraio 2023 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 20,20221210,1 | 4,14,31 | 22 dicembre 2023 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 20,20221103,3 | 4,1496 | 5 dicembre 2022 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 20,20221004,0 | 4,1294 | 2 novembre 2022 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 20,20220912,1 | 4,14,291 | 7 ottobre 2022 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | | 2,0,20220719,0 | 4,14,287 | 10 agosto 2022 | Stati Uniti occidentali (California settentrionale), Europa (Parigi), Europa (Stoccolma), Europa (Francoforte), Asia Pacifico (Mumbai), Medio Oriente (Bahrein) | | 2,0,20220426,0 | 4,1481 | 14 giugno 2022 | Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong-Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka-Locale), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacific (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale) | **Modifiche, miglioramenti e problemi risolti** + Gli aggiornamenti di Amazon EMR 5.36.0 ora supportano: aws-sdk 1.12.206, Hadoop 2.10.1-amzn-4, Hive 2.3.9-amzn-2, Hudi 0.10.1-amzn-1, Spark 2.4.8-amzn-2, Presto 0.267-amzn-1, connettore Amazon Glue 1.18.0 e EMRFS 2.51.0. **Problemi noti** + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. + Con le release 5.36.0 e da 6.6.0 a 6.9.0 di Amazon EMR, i componenti dei servizi `SecretAgent` e `RecordServer` servizio potrebbero subire una perdita di dati di log a causa di una configurazione errata del modello nome file nelle proprietà Log4j2. Ca sua della configurazione errata, i componenti generano un solo file di log al giorno. Quando si applica la strategia di rotazione, sovrascrive il file esistente invece di generare un nuovo file di log come previsto. Come soluzione alternativa, utilizza un'azione bootstrap per generare file di log ogni ora e accoda un numero intero con incremento automatico nel nome file per gestire la rotazione. Per le release da 6.6.0 a 6.9.0 di Amazon EMR, utilizza la seguente azione bootstrap quando avvii un cluster. ``` ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-6x/replace-puppet.sh,Args=[]" ``` Per Amazon EMR 5.36.0, utilizza la seguente azione bootstrap quando avvii un cluster. ``` ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-5x/replace-puppet.sh,Args=[]" ``` ## Versioni dei componenti 5.36.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.16.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.16.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.5.0 | Ambiente Conda per EMR Notebooks che include il gateway aziendale Jupyter | | emr-s3-dist-cp | 2.21.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.7.0 | Connettore di EMR S3Select | | emrfs | 2,51,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.14.2 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.14.2 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.1-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.1-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.1-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.1-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.1-amzn-4 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.1-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.1-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.1-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.1-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.1-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.1-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.9-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.9-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.9-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.9-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.9-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.9-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.9-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.10.1-amzn-1 | Framework di elaborazione incrementale per alimentare la Data Pipeline a bassa latenza e alta efficienza. | | hudi-spark | 0.10.1-amzn-1 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.10.1-amzn-1 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.10.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.4.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.1-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.13.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.8.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.68 | Server di database MySQL. | | nvidia-cuda | 110,194 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 52,1 | Client a riga di comando Oozie. | | oozie-server | 5.2.1 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.5.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.267-amzn-1 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.267-amzn-1 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.267-amzn-1 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 4.0.2 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.8-amzn-2 | Client a riga di comando Spark. | | spark-history-server | 2.4.8-amzn-2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.8-amzn-2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.8-amzn-2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.4.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.10.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.36.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). Le azioni di riconfigurazione vengono eseguite quando si specifica una configurazione per gruppi di istanze in un cluster in esecuzione. Amazon EMR avvia solo le azioni di riconfigurazione per le classificazioni modificate. Per ulteriori informazioni, consulta [Riconfigurazione di un gruppo di istanze in un cluster in esecuzione](emr-configure-apps-running-cluster.md). **Classificazioni emr-5.36.0** | Classificazioni | Description | Operazioni di riconfigurazione | | --- | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | Restarts the ResourceManager service. | | container-executor | Modificare i valori nel file container-executor.cfg di Hadoop YARN. | Not available. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | Not available. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | docker-conf | Modifica le impostazioni relative a docker. | Not available. | | emrfs-site | Modifica le impostazioni EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | flink-conf | Modifica le impostazione flink-conf.yaml. | Restarts Flink history server. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | Restarts Flink history server. | | flink-log4j-session | Modifica le impostazioni di Flink log4j-session.properties per la sessione. Kubernetes/Yarn | Not available. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | Restarts Flink history server. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | Not available. | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | Not available. | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | | hbase-env | Modifica i valori nell'ambiente. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | Not available. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | Should not be reconfigured. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | Restarts Hive HCatalog Server. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | Restarts Hive HCatalog Server. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | Restarts Hive HCatalog Server. | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | Restarts Hive WebHCat Server. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | Not available. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | Not available. | | hive-env | Modifica i valori nell'ambiente Hive. | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | Restarts HiveServer2 and HiveMetastore. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | Not available. | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | Not available. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | Not available. | | hue-ini | Modifica i valori nel file ini di Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | Restarts Hadoop Httpfs service. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | Restarts Hadoop Httpfs service. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | Not available. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | Restarts Hadoop-KMS service. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | Not available. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | | hudi-env | Modifica i valori nell'ambiente Hudi. | Not available. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | Not available. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | Not available. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | Not available. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | Not available. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | Restarts Livy Server. | | livy-env | Modifica i valori nell'ambiente Livy. | Restarts Livy Server. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | Restarts Livy Server. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | Restarts Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | Restarts Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | Restarts Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | Not available. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | Not available. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | Restarts Phoenix-QueryServer. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | Not available. | | pig-env | Change values in the Pig environment. | Not available. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | Restarts Oozie. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | Not available. | | presto-log | Modifica i valori nel file log.properties di Presto. | Restarts Presto-Server. | | presto-config | Modifica i valori nel file config.properties di Presto. | Restarts Presto-Server. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | Not available. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | Restarts Presto-Server. | | presto-node | Modifica i valori nel file node.properties di Presto. | Not available. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | Not available. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | Not available. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | Restarts Presto-Server. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | Not available. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | Not available. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | Not available. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | Not available. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | Not available. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | Not available. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | Not available. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | Not available. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | Not available. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | Not available. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | Not available. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | Not available. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | Not available. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | Not available. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | Restarts EMR record server. | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | Restarts EMR record server. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | Restarts EMR record server. | | spark | Impostazioni Amazon EMR per Apache Spark. | This property modifies spark-defaults. See actions there. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | Restarts Spark history server and Spark thrift server. | | spark-env | Modifica i valori nell'ambiente Spark. | Restarts Spark history server and Spark thrift server. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | Not available. | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | Restarts Spark history server and Spark thrift server. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | Restarts Spark history server and Spark thrift server. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | Not available. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | Not available. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | Not available. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | Restarts Oozie. | | yarn-env | Modifica i valori nell'ambiente YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | Restarts Zeppelin. | | zeppelin-site | Modifica le impostazioni di configurazione in zeppelin-site.xml. | Restarts Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | Restarts Zookeeper server. | # Amazon EMR versione 5.35.0 emr-5.35.0 ## Versioni dell'applicazione 5.35.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/) [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.35.0 | emr-5.34.0 | emr-5.33.1 | emr-5.33.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.12.159 | 1,11,970 | 1,11,970 | 1,11,970 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.14.2 | 1.13.1 | 1.12.1 | 1.12.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.9-amzn-0 | 2.3.8-amzn-0 | 2.3.7-amzn-4 | 2.3.7-amzn-4 | | Hadoop | 2.10.1-amzn-3 | 2.10.1-amzn-2 | 2.10.1-amzn-1.1 | 2.10.1-amzn-1 | | Hive | 2.3.9-amzn-0 | 2.3.8-amzn-0 | 2.3.7-amzn-4 | 2.3.7-amzn-4 | | Hudi | 0.9.0-amzn-2 | 0.9.0-amzn-0 | 0.7.0-amzn-1 | 0.7.0-amzn-1 | | Hue | 4.10.0 | 4.9.0 | 4.9.0 | 4.9.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | JupyterHub | 1.4.1 | 1.4.1 | 1.2.2 | 1.2.2 | | Livy | 0.7.1-incubating | 0.7.1-incubating | 0.7.0-incubating | 0.7.0-incubating | | MXNet | 1.8.0 | 1.8.0 | 1.7.0 | 1.7.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.1 | 5.2.1 | 5.2.0 | 5.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.266-amzn-0 | 0.261-amzn-0 | 0.245.1-amzn-0 | 0.245.1-amzn-0 | | Spark | 2.4.8-amzn-1 | 2.4.8-amzn-0 | 2.4.7-amzn-1.1 | 2.4.7-amzn-1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.10.0 | 0.10.0 | 0.9.0 | 0.9.0 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.35.0 Questa è la nota di rilascio di Amazon EMR 5.35.0. Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.35.0. Le modifiche sono relative alla versione 5.34.0. Data del rilascio iniziale: 30 marzo 2022 **Nuove funzionalità** + Le applicazioni Amazon EMR versione 5.35 che usano Log4j 1.x e Log4j 2.x sono aggiornate per usare rispettivamente Log4j 1.2.17 (o superiore) e Log4j 2.17.1 (o superiore) e non richiedono l'uso di operazioni di bootstrap per mitigare i problemi CVE nelle versioni precedenti. Per informazioni, consulta [Approccio per mitigare il CVE-2021-44228](emr-log4j-vulnerability.md). **Modifiche, miglioramenti e problemi risolti** **Modifiche di Flink** | Tipo di modifica | Description | | --- | --- | | Aggiornamenti | [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5350-release.html) | **Cambiamenti di Hadoop** | Tipo di modifica | Description | | --- | --- | | Backport open source di Hadoop da EMR 5.34.0 | [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5350-release.html) | | Modifiche e correzioni di Hadoop | [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5350-release.html) | **Cambiamenti Hive** | Tipo di modifica | Description | | --- | --- | | Hive aggiornato a open source[versione 2.3.9](https://www.mail-archive.com/user@hive.apache.org/msg22311.html), incluse queste correzioni JIRA | [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5350-release.html) | | Hive backport open source da EMR 5.34.0 | [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5350-release.html) | | Aggiornamenti e correzioni di Hive | [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5350-release.html) | | Nuove funzionalità | [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5350-release.html) | **Modifiche Oozie** | Tipo di modifica | Description | | --- | --- | | Backport open source di Oozie da EMR 5.34.0 | [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5350-release.html) | **Cambiamenti Pig** | Tipo di modifica | Description | | --- | --- | | Aggiornamenti | [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-5350-release.html) | **Problemi noti** + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.35.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.16.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.15.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.5.0 | Ambiente Conda per EMR Notebooks che include il gateway aziendale Jupyter | | emr-s3-dist-cp | 2.20.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.7.0 | Connettore di EMR S3Select | | emrfs | 2,49,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.14,2 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.14.2 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.1-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.1-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.1-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.1-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.1-amzn-3 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.1-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.1-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.1-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.1-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.1-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.1-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.9-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.9-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.9-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.9-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.9-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.9-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.9-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.9.0-amzn-2 | Framework di elaborazione incrementale per alimentare la Data Pipeline a bassa latenza e alta efficienza. | | hudi-spark | 0.9.0-amzn-2 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.9.0-amzn-2 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.10.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.4.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.1-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.13.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.8.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.68 | Server di database MySQL. | | nvidia-cuda | 10,1243 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.1 | Client a riga di comando Oozie. | | oozie-server | 5.2.1 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.5.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.266-amzn-0 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.266-amzn-0 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.266-amzn-0 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 4.0.2 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.8-amzn-1 | Client a riga di comando Spark. | | spark-history-server | 2.4.8-amzn-1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.8-amzn-1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.8-amzn-1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.4.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.10.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.35.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). Le azioni di riconfigurazione vengono eseguite quando si specifica una configurazione per gruppi di istanze in un cluster in esecuzione. Amazon EMR avvia solo le azioni di riconfigurazione per le classificazioni modificate. Per ulteriori informazioni, consulta [Riconfigurazione di un gruppo di istanze in un cluster in esecuzione](emr-configure-apps-running-cluster.md). **Classificazioni emr-5.35.0** | Classificazioni | Description | Operazioni di riconfigurazione | | --- | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | Restarts the ResourceManager service. | | container-executor | Modificare i valori nel file container-executor.cfg di Hadoop YARN. | Not available. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | Not available. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | docker-conf | Modifica le impostazioni relative a docker. | Not available. | | emrfs-site | Modifica le impostazioni EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | flink-conf | Modifica le impostazione flink-conf.yaml. | Restarts Flink history server. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | Restarts Flink history server. | | flink-log4j-session | Modifica le impostazioni di Flink log4j-session.properties per la sessione. Kubernetes/Yarn | Not available. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | Restarts Flink history server. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | Not available. | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | Not available. | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | | hbase-env | Modifica i valori nell'ambiente. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | Not available. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | Should not be reconfigured. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | Restarts Hive HCatalog Server. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | Restarts Hive HCatalog Server. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | Restarts Hive HCatalog Server. | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | Restarts Hive WebHCat Server. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | Not available. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | Not available. | | hive-env | Modifica i valori nell'ambiente Hive. | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | Restarts HiveServer2 and HiveMetastore. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | Not available. | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | Not available. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | Not available. | | hue-ini | Modifica i valori nel file ini di Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | Restarts Hadoop Httpfs service. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | Restarts Hadoop Httpfs service. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | Not available. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | Restarts Hadoop-KMS service. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | Not available. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | | hudi-env | Modifica i valori nell'ambiente Hudi. | Not available. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | Not available. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | Not available. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | Not available. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | Not available. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | Restarts Livy Server. | | livy-env | Modifica i valori nell'ambiente Livy. | Restarts Livy Server. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | Restarts Livy Server. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | Restarts Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | Restarts Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | Restarts Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | Not available. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | Not available. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | Restarts Phoenix-QueryServer. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | Not available. | | pig-env | Change values in the Pig environment. | Not available. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | Restarts Oozie. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | Not available. | | presto-log | Modifica i valori nel file log.properties di Presto. | Restarts Presto-Server. | | presto-config | Modifica i valori nel file config.properties di Presto. | Restarts Presto-Server. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | Not available. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | Restarts Presto-Server. | | presto-node | Modifica i valori nel file node.properties di Presto. | Not available. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | Not available. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | Not available. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | Restarts Presto-Server. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | Not available. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | Not available. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | Not available. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | Not available. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | Not available. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | Not available. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | Not available. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | Not available. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | Not available. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | Not available. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | Not available. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | Not available. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | Not available. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | Not available. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | Restarts EMR record server. | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | Restarts EMR record server. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | Restarts EMR record server. | | spark | Impostazioni Amazon EMR per Apache Spark. | This property modifies spark-defaults. See actions there. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | Restarts Spark history server and Spark thrift server. | | spark-env | Modifica i valori nell'ambiente Spark. | Restarts Spark history server and Spark thrift server. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | Not available. | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | Restarts Spark history server and Spark thrift server. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | Restarts Spark history server and Spark thrift server. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | Not available. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | Not available. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | Not available. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | Restarts Oozie. | | yarn-env | Modifica i valori nell'ambiente YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | Restarts Zeppelin. | | zeppelin-site | Modifica le impostazioni di configurazione in zeppelin-site.xml. | Restarts Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | Restarts Zookeeper server. | # Rilascio 5.34.0 di Amazon EMR emr-5.34.0 ## Versioni dell'applicazione 5.34.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/) [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.34.0 | emr-5.33.1 | emr-5.33.0 | emr-5.32.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.970 | 1,11,970 | 1,11,970 | 1,11,890 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.13.1 | 1.12.1 | 1.12.1 | 1.11.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.8-amzn-0 | 2.3.7-amzn-4 | 2.3.7-amzn-4 | 2.3.7-amzn-3 | | Hadoop | 2.10.1-amzn-2 | 2.10.1-amzn-1.1 | 2.10.1-amzn-1 | 2.10.1-amzn-0.1 | | Hive | 2.3.8-amzn-0 | 2.3.7-amzn-4 | 2.3.7-amzn-4 | 2.3.7-amzn-3 | | Hudi | 0.9.0-amzn-0 | 0.7.0-amzn-1 | 0.7.0-amzn-1 | 0.6.0-amzn-0 | | Hue | 4.9.0 | 4.9.0 | 4.9.0 | 4.8.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | JupyterHub | 1.4.1 | 1.2.2 | 1.2.2 | 1.1.0 | | Livy | 0.7.1-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | | MXNet | 1.8.0 | 1.7.0 | 1.7.0 | 1.7.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.1 | 5.2.0 | 5.2.0 | 5.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.261-amzn-0 | 0.245.1-amzn-0 | 0.245.1-amzn-0 | 0.240.1-amzn-0 | | Spark | 2.4.8-amzn-0 | 2.4.7-amzn-1.1 | 2.4.7-amzn-1 | 2.4.7-amzn-0.1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.3.1 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.10.0 | 0.9.0 | 0.9.0 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.34.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.34.0. Le modifiche sono relative alla versione 5.33.1. Data del rilascio iniziale: 20 gennaio 2022 Data di rilascio aggiornata: 21 marzo 2022 **Nuove funzionalità** + **[Dimensionamento] Ottimizzazione del dimensionamento gestito dei dati di shuffle di Spark** - Per Amazon EMR versioni 5.34.0 e successive e EMR 6.4.0 e successive, il dimensionamento gestito è ora consapevole dei dati di shuffle di Spark (dati che Spark ridistribuisce tra le partizioni per eseguire operazioni specifiche). Per ulteriori informazioni sulle operazioni di shuffle, consulta [Utilizzo del dimensionamento gestito da EMR in Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-scaling.html) nella *Guida alla gestione di Amazon EMR* e [Guida di programmazione Spark](https://spark.apache.org/docs/latest/rdd-programming-guide.html#shuffle-operations). + [Hudi] Miglioramenti per semplificare la configurazione Hudi. Optimistic Concurrency Control disabilitato per impostazione predefinita. **Modifiche, miglioramenti e problemi risolti** + Questa è una versione per risolvere i problemi con Amazon EMR Scaling quando non riesce a up/scale ridimensionare correttamente un cluster o causa errori delle applicazioni. + In precedenza, il riavvio manuale del gestore delle risorse su un cluster multi-master provocava il ricaricamento, da parte dei daemon su cluster di Amazon EMR come Zookeeper, di tutti i nodi precedentemente disattivati o persi nel file znode di Zookeeper. Ciò causava il superamento dei limiti predefiniti in determinate situazioni. Ora Amazon EMR rimuove i record dei nodi disattivati o persi più vecchi di un'ora dal file Zookeeper e i limiti interni sono stati aumentati. + È stato risolto il problema per cui le richieste di dimensionamento avevano esito negativo per i cluster di grandi dimensioni e ad alto utilizzo quando i daemon su cluster di Amazon EMR eseguivano attività di controllo dell'integrità, come la raccolta dello stato del nodo YARN e dello stato del nodo HDFS. Ciò si verificava perché i daemon su cluster non erano in grado di comunicare i dati sullo stato di integrità di un nodo ai componenti interni di Amazon EMR. + I daemon su cluster di EMR sono stati migliorati per monitorare correttamente gli stati dei nodi quando gli indirizzi IP vengono riutilizzati per migliorare l'affidabilità durante le operazioni di dimensionamento. + [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). È stato risolto il problema per cui si verificavano errori di processo durante la riduzione del cluster poiché Spark presupponeva che tutti i nodi disponibili fossero negati. + [YARN-9011](https://issues.apache.org/jira/browse/YARN-9011). È stato risolto il problema per cui si verificavano errori di processo a causa di una race condition nella disattivazione di YARN quando il cluster tentava di aumentare o ridursi. + È stato risolto il problema relativo agli errori di fase o processo durante il dimensionamento del cluster garantendo che gli stati dei nodi siano sempre coerenti tra i daemon su cluster di Amazon EMR e YARN/HDFS. + È stato risolto il problema a causa del quale le operazioni del cluster, come la riduzione e l'invio di fasi, non riuscivano per i cluster Amazon EMR abilitati con autenticazione Kerberos. Questo perché il daemon on-cluster di Amazon EMR non ha rinnovato il ticket Kerberos, necessario per comunicare in modo sicuro con l'esecuzione sul nodo primario. HDFS/YARN + Zeppelin aggiornato alla versione 0.10.0. + Livy Fix: aggiornato alla versione 0.7.1 + Miglioramento delle prestazioni di Spark: gli esecutori eterogenei sono disabilitati quando alcuni valori di configurazione Spark vengono sovrascritti in EMR 5.34.0. + I server HttpFS e WebHDFS sono disabilitati per impostazione predefinita. Puoi abilitare nuovamente WebHDFS utilizzando la configurazione di Hadoop, `dfs.webhdfs.enabled`. Il server HttpFS può essere avviato utilizzando `sudo systemctl start hadoop-httpfs`. **Problemi noti** + La caratteristica di Amazon EMR Notebooks utilizzata con la rappresentazione utente di Livy non funziona perché HttpFS è disabilitato per impostazione predefinita. In questo caso, EMR Notebooks non può connettersi al cluster in cui è abilitata la rappresentazione di Livy. La soluzione alternativa consiste nell'avviare il server HttpFS prima di connettere EMR Notebooks al cluster utilizzando `sudo systemctl start hadoop-httpfs`. + Le query Hue non funzionano in Amazon EMR 6.4.0 perché il server HttpFS di Apache Hadoop è disabilitato per impostazione predefinita. Per utilizzare Hue su Amazon EMR 6.4.0, avvia manualmente il server HttpFS sul nodo primario di Amazon EMR utilizzando `sudo systemctl start hadoop-httpfs` oppure [utilizza una fase di Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/add-step-cli.html). + La caratteristica di Amazon EMR Notebooks utilizzata con la rappresentazione utente di Livy non funziona perché HttpFS è disabilitato per impostazione predefinita. In questo caso, EMR Notebooks non può connettersi al cluster in cui è abilitata la rappresentazione di Livy. La soluzione alternativa consiste nell'avviare il server HttpFS prima di connettere EMR Notebooks al cluster utilizzando `sudo systemctl start hadoop-httpfs`. + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.34.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.16.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.14.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.4.0 | Ambiente Conda per EMR Notebooks che include il gateway aziendale Jupyter | | emr-s3-dist-cp | 2.18.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.7.0 | Connettore di EMR S3Select | | emrfs | 2,48,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.13.1 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.13.1 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.1-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.1-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.1-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.1-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.1-amzn-2 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.1-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.1-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.1-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.1-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.1-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.1-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.8-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.8-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.8-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.8-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.8-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.8-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.8-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.9.0-amzn-0 | Framework di elaborazione incrementale per alimentare la Data Pipeline a bassa latenza e alta efficienza. | | hudi-spark | 0.9.0-amzn-0 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.9.0-amzn-0 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.9.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.4.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.1-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.13.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.8.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.68 | Server di database MySQL. | | nvidia-cuda | 10,1243 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.1 | Client a riga di comando Oozie. | | oozie-server | 5.2.1 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.5.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.261-amzn-0 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.261-amzn-0 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.261-amzn-0 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 4.0.2 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.8-amzn-0 | Client a riga di comando Spark. | | spark-history-server | 2.4.8-amzn-0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.8-amzn-0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.8-amzn-0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.4.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.10.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.34.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). Le azioni di riconfigurazione vengono eseguite quando si specifica una configurazione per gruppi di istanze in un cluster in esecuzione. Amazon EMR avvia solo le azioni di riconfigurazione per le classificazioni modificate. Per ulteriori informazioni, consulta [Riconfigurazione di un gruppo di istanze in un cluster in esecuzione](emr-configure-apps-running-cluster.md). **Classificazioni emr-5.34.0** | Classificazioni | Description | Operazioni di riconfigurazione | | --- | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | Restarts the ResourceManager service. | | container-executor | Modificare i valori nel file container-executor.cfg di Hadoop YARN. | Not available. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | Not available. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | docker-conf | Modifica le impostazioni relative a docker. | Not available. | | emrfs-site | Modifica le impostazioni EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | flink-conf | Modifica le impostazione flink-conf.yaml. | Restarts Flink history server. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | Restarts Flink history server. | | flink-log4j-session | Modifica le impostazioni di Flink log4j-session.properties per la sessione. Kubernetes/Yarn | Not available. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | Restarts Flink history server. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | Not available. | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | Not available. | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | | hbase-env | Modifica i valori nell'ambiente. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | Not available. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | Should not be reconfigured. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | Restarts Hive HCatalog Server. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | Restarts Hive HCatalog Server. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | Restarts Hive HCatalog Server. | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | Restarts Hive WebHCat Server. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | Not available. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | Not available. | | hive-env | Modifica i valori nell'ambiente Hive. | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | Restarts HiveServer2 and HiveMetastore. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | Not available. | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | Not available. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | Not available. | | hue-ini | Modifica i valori nel file ini di Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | Restarts Hadoop Httpfs service. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | Restarts Hadoop Httpfs service. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | Not available. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | Restarts Hadoop-KMS service. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | Not available. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | | hudi-env | Modifica i valori nell'ambiente Hudi. | Not available. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | Not available. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | Not available. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | Not available. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | Not available. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | Restarts Livy Server. | | livy-env | Modifica i valori nell'ambiente Livy. | Restarts Livy Server. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | Restarts Livy Server. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | Restarts Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | Restarts Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | Restarts Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | Not available. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | Not available. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | Restarts Phoenix-QueryServer. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | Not available. | | pig-env | Change values in the Pig environment. | Not available. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | Restarts Oozie. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | Not available. | | presto-log | Modifica i valori nel file log.properties di Presto. | Restarts Presto-Server. | | presto-config | Modifica i valori nel file config.properties di Presto. | Restarts Presto-Server. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | Not available. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | Restarts Presto-Server. | | presto-node | Modifica i valori nel file node.properties di Presto. | Not available. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | Not available. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | Not available. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | Restarts Presto-Server. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | Not available. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | Not available. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | Not available. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | Not available. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | Not available. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | Not available. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | Not available. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | Not available. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | Not available. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | Not available. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | Not available. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | Not available. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | Not available. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | Not available. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | Restarts EMR record server. | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | Restarts EMR record server. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | Restarts EMR record server. | | spark | Impostazioni Amazon EMR per Apache Spark. | This property modifies spark-defaults. See actions there. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | Restarts Spark history server and Spark thrift server. | | spark-env | Modifica i valori nell'ambiente Spark. | Restarts Spark history server and Spark thrift server. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | Not available. | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | Restarts Spark history server and Spark thrift server. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | Restarts Spark history server and Spark thrift server. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | Not available. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | Not available. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | Not available. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | Restarts Oozie. | | yarn-env | Modifica i valori nell'ambiente YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | Restarts Zeppelin. | | zeppelin-site | Modifica le impostazioni di configurazione in zeppelin-site.xml. | Restarts Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | Restarts Zookeeper server. | # Rilascio 5.33.1 di Amazon EMR emr-5.33.1 ## Versioni dell'applicazione 5.33.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/) [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.33.1 | emr-5.33.0 | emr-5.32.1 | emr-5.32.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.970 | 1,11,970 | 1,11,890 | 1,11,890 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.12.1 | 1.12.1 | 1.11.2 | 1.11.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.7-amzn-4 | 2.3.7-amzn-4 | 2.3.7-amzn-3 | 2.3.7-amzn-3 | | Hadoop | 2.10.1-amzn-1.1 | 2.10.1-amzn-1 | 2.10.1-amzn-0.1 | 2.10.1-amzn-0 | | Hive | 2.3.7-amzn-4 | 2.3.7-amzn-4 | 2.3.7-amzn-3 | 2.3.7-amzn-3 | | Hudi | 0.7.0-amzn-1 | 0.7.0-amzn-1 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | | Hue | 4.9.0 | 4.9.0 | 4.8.0 | 4.8.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | JupyterHub | 1.2.2 | 1.2.2 | 1.1.0 | 1.1.0 | | Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | | MXNet | 1.7.0 | 1.7.0 | 1.7.0 | 1.7.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.245.1-amzn-0 | 0.245.1-amzn-0 | 0.240.1-amzn-0 | 0.240.1-amzn-0 | | Spark | 2.4.7-amzn-1.1 | 2.4.7-amzn-1 | 2.4.7-amzn-0.1 | 2.4.7-amzn-0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.4.1 | 2.4.1 | 2.3.1 | 2.3.1 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.9.0 | 0.9.0 | 0.8.2 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.33.1 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.33.0/5.33.1. Le modifiche sono relative alla versione 5.32.0. Data del rilascio iniziale: 19 aprile 2021 Ultimo aggiornamento: 9 agosto 2021 **Aggiornamenti** + Connettore Amazon Glue aggiornato alla versione 1.15.0 + Aggiornato alla versione 1.11.970 AWS SDK per Java + EMRFS aggiornato alla versione 2.46.0 + EMR Goodies aggiornato alla versione 2.14.0 + EMR Record Server aggiornato alla versione 1.9.0 + EMR S3 Dist CP aggiornato alla versione 2.18.0 + EMR Secret Agent aggiornato alla versione 1.8.0 + Flink aggiornato alla versione 1.12.1 + Hadoop aggiornato alla versione 2.10.1-amzn-1 + Hive aggiornato alla versione 2.3.7-amzn-4 + Hudi aggiornato alla versione 0.7.0 + Hue aggiornato alla versione 4.9.0 + OpenCV aggiornato alla versione 4.5.0 + Presto aggiornato alla versione 0.245.1-amzn-0 + R aggiornato alla versione 4.0.2 + Spark aggiornato alla versione 2.4.7-amzn-1 + Aggiornato alla versione 2.4.1 TensorFlow + Zeppelin aggiornato alla versione 0.9.0 **Modifiche, miglioramenti e problemi risolti** + Questa è una versione per risolvere i problemi con Amazon EMR Scaling quando non riesce a up/scale ridimensionare correttamente un cluster o causa errori delle applicazioni. + È stato risolto il problema per cui le richieste di dimensionamento avevano esito negativo per i cluster di grandi dimensioni e ad alto utilizzo quando i daemon su cluster di Amazon EMR eseguivano attività di controllo dell'integrità, come la raccolta dello stato del nodo YARN e dello stato del nodo HDFS. Ciò si verificava perché i daemon su cluster non erano in grado di comunicare i dati sullo stato di integrità di un nodo ai componenti interni di Amazon EMR. + I daemon su cluster di EMR sono stati migliorati per monitorare correttamente gli stati dei nodi quando gli indirizzi IP vengono riutilizzati per migliorare l'affidabilità durante le operazioni di dimensionamento. + [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). È stato risolto il problema per cui si verificavano errori di processo durante la riduzione del cluster poiché Spark presupponeva che tutti i nodi disponibili fossero negati. + [YARN-9011](https://issues.apache.org/jira/browse/YARN-9011). È stato risolto il problema per cui si verificavano errori di processo a causa di una race condition nella disattivazione di YARN quando il cluster tentava di aumentare o ridursi. + È stato risolto il problema relativo agli errori di fase o processo durante il dimensionamento del cluster garantendo che gli stati dei nodi siano sempre coerenti tra i daemon su cluster di Amazon EMR e YARN/HDFS. + È stato risolto il problema a causa del quale le operazioni del cluster, come la riduzione e l'invio di fasi, non riuscivano per i cluster Amazon EMR abilitati con autenticazione Kerberos. Questo perché il daemon on-cluster di Amazon EMR non ha rinnovato il ticket Kerberos, necessario per comunicare in modo sicuro con l'esecuzione sul nodo primario. HDFS/YARN + Le versioni più recenti di Amazon EMR risolvono il problema con un limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti di Amazon EMR. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono ora una correzione permanente con un'impostazione "Max open files" (Max. file aperti). + **Configurazione di un cluster per risolvere i problemi di prestazioni di Apache YARN Timeline Server versione 1 e 1.5** Le versioni 1 e 1.5 di Apache YARN Timeline Server possono causare problemi di prestazioni con cluster EMR molto attivi e di grandi dimensioni, in particolare con `yarn.resourcemanager.system-metrics-publisher.enabled=true`, che è l'impostazione predefinita in Amazon EMR. Un YARN Timeline Server v2 open source risolve il problema di prestazioni relativo alla scalabilità di YARN Timeline Server. Altre soluzioni alternative per questo problema includono: + Configurazione di yarn.resourcemanager. system-metrics-publisher.enabled=false in yarn-site.xml. + L'abilitazione della correzione per questo problema durante la creazione di un cluster, come descritto di seguito. I seguenti rilasci di Amazon EMR contengono una correzione per questo problema di prestazioni di YARN Timeline Server. EMR 5.30.2, 5.31.1, 5.32.1, 5.33.1, 5.34.x, 6.0.1, 6.1.1, 6.2.1, 6.3.1 e 6.4.x Per abilitare la correzione su una delle versioni di Amazon EMR sopra specificate, imposta queste proprietà su `true` in un file JSON di configurazioni che viene passato utilizzando il [parametro del comando `aws emr create-cluster`](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps-create-cluster.html): `--configurations file://./configurations.json`. Oppure abilita la correzione utilizzando l'[interfaccia utente della console di riconfigurazione](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps-running-cluster.html). Esempio del contenuto del file configurations.json: ``` [ { "Classification": "yarn-site", "Properties": { "yarn.resourcemanager.system-metrics-publisher.timeline-server-v1.enable-batch": "true", "yarn.resourcemanager.system-metrics-publisher.enabled": "true" }, "Configurations": [] } ] ``` + Adesso, il runtime di Spark è più veloce quando si recuperano le posizioni delle partizioni dal metastore Hive per le query di inserimento Spark. + Versioni dei componenti aggiornate. Per un elenco delle versioni dei componenti, consulta [Informazioni sui rilasci di Amazon EMR](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-release-components.html) in questa guida. + Installato il pacchetto AWS Java SDK su ogni nuovo cluster. Si tratta di un singolo jar contenente tutti i servizi SDKs e le relative dipendenze, anziché i vasetti dei singoli componenti. Per ulteriori informazioni, consulta [Dipendenza dell'SDK in bundle](https://aws.amazon.com/blogs/developer/java-sdk-bundle/). + Risolti i problemi di dimensionamento gestito nelle versioni precedenti di Amazon EMR e apportati miglioramenti in modo da ridurre significativamente le percentuali di errore delle applicazioni. + Il protocollo HTTPS ora è abilitato per impostazione predefinita per i repository Amazon Linux. Se utilizzi una policy Amazon S3 VPCE per limitare l'accesso a specifici bucket, devi aggiungere il nuovo ARN del bucket Amazon Linux `arn:aws:s3:::amazonlinux-2-repos-$region/*` alla tua policy (sostituisci `$region` con la Regione in cui si trova l'endpoint). Per ulteriori informazioni, consultate questo argomento nei AWS forum di discussione. [Annuncio: Amazon Linux 2 ora supporta la possibilità di utilizzare HTTPS durante la connessione ai repository dei pacchetti ](https://forums.aws.amazon.com/ann.jspa?annID=8528). **Nuove funzionalità** + Amazon EMR supporta Amazon S3 Access Point, una funzionalità di Amazon S3 che consente di gestire facilmente l'accesso ai data lake condivisi. Utilizzando il tuo alias Amazon S3 Access Point, puoi semplificare l'accesso ai dati su larga scala su Amazon EMR. Puoi utilizzare Amazon S3 Access Point con tutte le versioni di Amazon EMR senza costi aggiuntivi in tutte le regioni in cui è disponibile AWS Amazon EMR. Per ulteriori informazioni sugli alias degli Access Point e degli Amazon S3 Access Point, consulta [Utilizzo di un alias in stile bucket per il punto di accesso](https://docs.aws.amazon.com/AmazonS3/latest/userguide/access-points-alias.html) nella *Guida per l'utente di Amazon S3*. + Amazon EMR-5.33 supporta nuovi tipi di istanza Amazon EC2: c5a, c5ad, c6gn, c6gd, m6gd, d3, d3en, m5zn, r5b, r6gd. Consulta la sezione relativa ai [tipi di istanza supportati](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-supported-instance-types.html). **Problemi noti** + **Limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti AL2 [corretto nelle versioni più recenti].** Versioni di Amazon EMR: emr-5.30.x, emr-5.31.0, emr-5.32.0, emr-6.0.0, emr-6.1.0 ed emr-6.2.0 si basano su versioni precedenti di Amazon Linux 2 (), che hanno un'impostazione ulimit inferiore per «Max open files» quando i cluster Amazon EMR vengono creati con l'AMI predefinita. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono una correzione permanente con un'impostazione "Max open files" (Max. file aperti). Le versioni con il limite minimo del file aperto causano l'errore "Too many open files" (Troppi file aperti) durante l'invio del processo Spark. Nelle versioni interessate, l'AMI predefinita di Amazon EMR ha un'impostazione ulimit di default di 4096 per "Max open files" (Max. file aperti), che è inferiore al limite di file 65536 nell'ultima AMI di Amazon Linux 2. L'impostazione ulimit inferiore per "Max open files (Max. file aperti)" causa il fallimento del processo Spark quando il driver e l'executor Spark tentano di aprire più di 4096 file. Per risolvere il problema, Amazon EMR dispone di uno script dell'operazione bootstrap (BA) che regola l'impostazione ulimit durante la creazione del cluster. Se utilizzi una versione di Amazon EMR meno recente che non ha la soluzione permanente per questo problema, la seguente soluzione alternativa consente di impostare esplicitamente l'ulimit del controller dell'istanza su un massimo di 65536 file. **Impostazione di un ulimit esplicito dalla riga di comando** 1. Modifica `/etc/systemd/system/instance-controller.service` per aggiungere i seguenti parametri alla sezione Servizio. `LimitNOFILE=65536` `LimitNPROC=65536` 1. Riavvia InstanceController `$ sudo systemctl daemon-reload` `$ sudo systemctl restart instance-controller` **Impostazione di un ulimit usando l'operazione di bootstrap (BA)** È inoltre possibile utilizzare uno script dell'operazione di bootstrap (BA) per configurare l'ulimit del controller di istanza a 65536 file durante la creazione del cluster. ``` #!/bin/bash for user in hadoop spark hive; do sudo tee /etc/security/limits.d/$user.conf << EOF $user - nofile 65536 $user - nproc 65536 EOF done for proc in instancecontroller logpusher; do sudo mkdir -p /etc/systemd/system/$proc.service.d/ sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF [Service] LimitNOFILE=65536 LimitNPROC=65536 EOF pid=$(pgrep -f aws157.$proc.Main) sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535 done sudo systemctl daemon-reload ``` + Per i cluster della sottorete privata di Amazon EMR 6.3.0 e 6.2.0 non è possibile accedere all'interfaccia utente Web di Ganglia. Verrà visualizzato l'errore "access denied (403) (accesso negato (403))". Altri siti web UIs, come Spark, Hue, Zeppelin JupyterHub, Livy e Tez, funzionano normalmente. Anche l'accesso all'interfaccia utente Web di Ganglia sui cluster della sottorete pubblica funziona normalmente. Per risolvere il problema, riavvia il servizio httpd sul nodo primario con `sudo systemctl restart httpd`. Questo problema è stato risolto in Amazon EMR 6.4.0. + **Importante** I cluster Amazon EMR che eseguono le Amazon Machine Image (AMI) Amazon Linux o Amazon Linux 2 utilizzano il comportamento predefinito di Amazon Linux e non scaricano e installano automaticamente aggiornamenti importanti e critici dei kernel che richiedono un riavvio. Si tratta dello stesso comportamento assunto da altre istanze Amazon EC2 che eseguono l'AMI predefinita di Amazon Linux. Se nuovi aggiornamenti software Amazon Linux che richiedono un riavvio (ad esempio, aggiornamenti del kernel, NVIDIA e CUDA) risultano disponibili dopo il rilascio di una versione di Amazon EMR, le istanze del cluster EMR che eseguono l'AMI predefinita non scaricano e installano automaticamente tali aggiornamenti. Per ottenere gli aggiornamenti del kernel, puoi [personalizzare l'AMI di Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-custom-ami.html) per [utilizzare l'AMI di Amazon Linux più recente](https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/finding-an-ami.html). + Il supporto da console per creare una configurazione di sicurezza che specifichi l'opzione di integrazione AWS Ranger non è attualmente supportato nella regione. GovCloud La configurazione della sicurezza può essere eseguita utilizzando la CLI. Consulta [Creazione della configurazione di sicurezza EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-ranger-security-config.html) nella *Guida alla gestione di Amazon EMR*. + Policy gestite con ambito: per allinearsi alle AWS best practice, Amazon EMR ha introdotto policy gestite predefinite con ambito EMR v2 in sostituzione delle politiche che verranno obsolete. Consulta [Policy gestite di Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-iam-policies.html). + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.33.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.16.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.14.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.2.0 | Ambiente Conda per EMR Notebooks che include il gateway aziendale Jupyter | | emr-s3-dist-cp | 2.18.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.6.0 | Connettore di EMR S3Select | | emrfs | 2,46,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.12.1 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.12.1 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.1-amzn-1.1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.1-amzn-1.1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.1-amzn-1.1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.1-amzn-1.1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.1-amzn-1.1 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.1-amzn-1.1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.1-amzn-1.1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.1-amzn-1.1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.1-amzn-1.1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.1-amzn-1.1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.1-amzn-1.1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.7-amzn-4 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.7-amzn-4 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.7-amzn-4 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.7-amzn-4 | Client a riga di comando Hive. | | hive-hbase | 2.3.7-amzn-4 | Client Hive-hbase. | | hive-metastore-server | 2.3.7-amzn-4 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.7-amzn-4 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.7.0-amzn-1 | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-spark | 0.7.0-amzn-1 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.7.0-amzn-1 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.9.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.2.2 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.7.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.68\$1 | Server di database MySQL. | | nvidia-cuda | 10,1243 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.0 | Client a riga di comando Oozie. | | oozie-server | 5.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.5.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.245.1-amzn-0 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.245.1-amzn-0 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.245.1-amzn-0 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 4.0.2 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.7-amzn-1.1 | Client a riga di comando Spark. | | spark-history-server | 2.4.7-amzn-1.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.7-amzn-1.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.7-amzn-1.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.4.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.9.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.33.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). Le azioni di riconfigurazione vengono eseguite quando si specifica una configurazione per gruppi di istanze in un cluster in esecuzione. Amazon EMR avvia solo le azioni di riconfigurazione per le classificazioni modificate. Per ulteriori informazioni, consulta [Riconfigurazione di un gruppo di istanze in un cluster in esecuzione](emr-configure-apps-running-cluster.md). **Classificazioni emr-5.33.1** | Classificazioni | Description | Operazioni di riconfigurazione | | --- | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | Restarts the ResourceManager service. | | container-executor | Modificare i valori nel file container-executor.cfg di Hadoop YARN. | Not available. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | Not available. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | docker-conf | Modifica le impostazioni relative a docker. | Not available. | | emrfs-site | Modifica le impostazioni EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | flink-conf | Modifica le impostazione flink-conf.yaml. | Restarts Flink history server. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | Restarts Flink history server. | | flink-log4j-session | Modifica le impostazioni di Flink log4j-session.properties per la sessione. Kubernetes/Yarn | Not available. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | Restarts Flink history server. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | Not available. | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | Not available. | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | | hbase-env | Modifica i valori nell'ambiente. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | Not available. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | Should not be reconfigured. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | Restarts Hive HCatalog Server. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | Restarts Hive HCatalog Server. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | Restarts Hive HCatalog Server. | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | Restarts Hive WebHCat Server. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | Not available. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | Not available. | | hive-env | Modifica i valori nell'ambiente Hive. | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | Restarts HiveServer2 and HiveMetastore. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | Not available. | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | Not available. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | Not available. | | hue-ini | Modifica i valori nel file ini di Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | Restarts Hadoop Httpfs service. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | Restarts Hadoop Httpfs service. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | Not available. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | Restarts Hadoop-KMS service. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | Not available. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | | hudi-env | Modifica i valori nell'ambiente Hudi. | Not available. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | Not available. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | Not available. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | Not available. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | Not available. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | Restarts Livy Server. | | livy-env | Modifica i valori nell'ambiente Livy. | Restarts Livy Server. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | Restarts Livy Server. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | Restarts Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | Restarts Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | Restarts Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | Not available. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | Not available. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | Restarts Phoenix-QueryServer. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | Not available. | | pig-env | Change values in the Pig environment. | Not available. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | Restarts Oozie. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | Not available. | | presto-log | Modifica i valori nel file log.properties di Presto. | Restarts Presto-Server. | | presto-config | Modifica i valori nel file config.properties di Presto. | Restarts Presto-Server. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | Not available. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | Restarts Presto-Server. | | presto-node | Modifica i valori nel file node.properties di Presto. | Not available. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | Not available. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | Not available. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | Restarts Presto-Server. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | Not available. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | Not available. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | Not available. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | Not available. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | Not available. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | Not available. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | Not available. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | Not available. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | Not available. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | Not available. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | Not available. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | Not available. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | Not available. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | Not available. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | Restarts EMR record server. | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | Restarts EMR record server. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | Restarts EMR record server. | | spark | Impostazioni Amazon EMR per Apache Spark. | This property modifies spark-defaults. See actions there. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | Restarts Spark history server and Spark thrift server. | | spark-env | Modifica i valori nell'ambiente Spark. | Restarts Spark history server and Spark thrift server. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | Not available. | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | Restarts Spark history server and Spark thrift server. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | Restarts Spark history server and Spark thrift server. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | Not available. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | Not available. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | Not available. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | Restarts Oozie. | | yarn-env | Modifica i valori nell'ambiente YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | Restarts Zeppelin. | | zeppelin-site | Modifica le impostazioni di configurazione in zeppelin-site.xml. | Restarts Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | Restarts Zookeeper server. | # Rilascio 5.33.0 di Amazon EMR emr-5.33.0 ## Versioni dell'applicazione 5.33.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/) [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.33.0 | emr-5.32.1 | emr-5.32.0 | emr-5.31.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.970 | 1,11,890 | 1,11,890 | 1,11,852 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.12.1 | 1.11.2 | 1.11.2 | 1.11.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.7-amzn-4 | 2.3.7-amzn-3 | 2.3.7-amzn-3 | 2.3.7-amzn-1 | | Hadoop | 2.10.1-amzn-1 | 2.10.1-amzn-0.1 | 2.10.1-amzn-0 | 2.10.0-amzn-0.1 | | Hive | 2.3.7-amzn-4 | 2.3.7-amzn-3 | 2.3.7-amzn-3 | 2.3.7-amzn-1 | | Hudi | 0.7.0-amzn-1 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | | Hue | 4.9.0 | 4.8.0 | 4.8.0 | 4,7,1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | - | | JupyterHub | 1.2.2 | 1.1.0 | 1.1.0 | 1.1.0 | | Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | | MXNet | 1.7.0 | 1.7.0 | 1.7.0 | 1.6.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.245.1-amzn-0 | 0.240.1-amzn-0 | 0.240.1-amzn-0 | 0.238.3-amzn-0 | | Spark | 2.4.7-amzn-1 | 2.4.7-amzn-0.1 | 2.4.7-amzn-0 | 2.4.6-amzn-0.1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.4.1 | 2.3.1 | 2.3.1 | 2.1.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.9.0 | 0.8.2 | 0.8.2 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.33.0 ## Versioni dei componenti 5.33.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.16.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.14.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.2.0 | Ambiente Conda per EMR Notebooks che include il gateway aziendale Jupyter | | emr-s3-dist-cp | 2.18.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.6.0 | Connettore di EMR S3Select | | emrfs | 2,46,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.12.1 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.12.1 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.1-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.1-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.1-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.1-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.1-amzn-1 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.1-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.1-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.1-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.1-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.1-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.1-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.7-amzn-4 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.7-amzn-4 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.7-amzn-4 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.7-amzn-4 | Client a riga di comando Hive. | | hive-hbase | 2.3.7-amzn-4 | Client Hive-hbase. | | hive-metastore-server | 2.3.7-amzn-4 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.7-amzn-4 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.7.0-amzn-1 | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-spark | 0.7.0-amzn-1 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.7.0-amzn-1 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.9.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.2.2 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.7.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.68 | Server di database MySQL. | | nvidia-cuda | 10,1243 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.0 | Client a riga di comando Oozie. | | oozie-server | 5.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.5.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.245.1-amzn-0 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.245.1-amzn-0 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.245.1-amzn-0 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 4.0.2 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.7-amzn-1 | Client a riga di comando Spark. | | spark-history-server | 2.4.7-amzn-1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.7-amzn-1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.7-amzn-1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.4.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.9.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.33.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). Le azioni di riconfigurazione vengono eseguite quando si specifica una configurazione per gruppi di istanze in un cluster in esecuzione. Amazon EMR avvia solo le azioni di riconfigurazione per le classificazioni modificate. Per ulteriori informazioni, consulta [Riconfigurazione di un gruppo di istanze in un cluster in esecuzione](emr-configure-apps-running-cluster.md). **Classificazioni emr-5.33.0** | Classificazioni | Description | Operazioni di riconfigurazione | | --- | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | Restarts the ResourceManager service. | | container-executor | Modificare i valori nel file container-executor.cfg di Hadoop YARN. | Not available. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | Not available. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | docker-conf | Modifica le impostazioni relative a docker. | Not available. | | emrfs-site | Modifica le impostazioni EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | flink-conf | Modifica le impostazione flink-conf.yaml. | Restarts Flink history server. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | Restarts Flink history server. | | flink-log4j-session | Modifica le impostazioni di Flink log4j-session.properties per la sessione. Kubernetes/Yarn | Not available. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | Restarts Flink history server. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | Not available. | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | Not available. | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | | hbase-env | Modifica i valori nell'ambiente. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | Not available. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | Should not be reconfigured. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | Restarts Hive HCatalog Server. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | Restarts Hive HCatalog Server. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | Restarts Hive HCatalog Server. | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | Restarts Hive WebHCat Server. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | Not available. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | Not available. | | hive-env | Modifica i valori nell'ambiente Hive. | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | Restarts HiveServer2 and HiveMetastore. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | Not available. | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | Not available. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | Not available. | | hue-ini | Modifica i valori nel file ini di Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | Restarts Hadoop Httpfs service. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | Restarts Hadoop Httpfs service. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | Not available. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | Restarts Hadoop-KMS service. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | Not available. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | | hudi-env | Modifica i valori nell'ambiente Hudi. | Not available. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | Not available. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | Not available. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | Not available. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | Not available. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | Restarts Livy Server. | | livy-env | Modifica i valori nell'ambiente Livy. | Restarts Livy Server. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | Restarts Livy Server. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | Restarts Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | Restarts Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | Restarts Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | Not available. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | Not available. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | Restarts Phoenix-QueryServer. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | Not available. | | pig-env | Change values in the Pig environment. | Not available. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | Restarts Oozie. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | Not available. | | presto-log | Modifica i valori nel file log.properties di Presto. | Restarts Presto-Server. | | presto-config | Modifica i valori nel file config.properties di Presto. | Restarts Presto-Server. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | Not available. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | Restarts Presto-Server. | | presto-node | Modifica i valori nel file node.properties di Presto. | Not available. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | Not available. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | Not available. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | Restarts Presto-Server. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | Not available. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | Not available. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | Not available. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | Not available. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | Not available. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | Not available. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | Not available. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | Not available. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | Not available. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | Not available. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | Not available. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | Not available. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | Not available. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | Not available. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | Restarts EMR record server. | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | Restarts EMR record server. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | Restarts EMR record server. | | spark | Impostazioni Amazon EMR per Apache Spark. | This property modifies spark-defaults. See actions there. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | Restarts Spark history server and Spark thrift server. | | spark-env | Modifica i valori nell'ambiente Spark. | Restarts Spark history server and Spark thrift server. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | Not available. | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | Restarts Spark history server and Spark thrift server. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | Restarts Spark history server and Spark thrift server. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | Not available. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | Not available. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | Not available. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | Restarts Oozie. | | yarn-env | Modifica i valori nell'ambiente YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | Restarts Zeppelin. | | zeppelin-site | Modifica le impostazioni di configurazione in zeppelin-site.xml. | Restarts Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | Restarts Zookeeper server. | # Rilascio 5.32.1 di Amazon EMR emr-5.32.1 ## Versioni dell'applicazione 5.32.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/) [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.32.1 | emr-5.32.0 | emr-5.31.1 | emr-5.31.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.890 | 1,11,890 | 1,11,852 | 1,11,8852 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.11.2 | 1.11.2 | 1.11.0 | 1.11.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.7-amzn-3 | 2.3.7-amzn-3 | 2.3.7-amzn-1 | 2.3.7-amzn-1 | | Hadoop | 2.10.1-amzn-0.1 | 2.10.1-amzn-0 | 2.10.0-amzn-0.1 | 2.10.0-amzn-0 | | Hive | 2.3.7-amzn-3 | 2.3.7-amzn-3 | 2.3.7-amzn-1 | 2.3.7-amzn-1 | | Hudi | 0.6.0-amzn-0 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | | Hue | 4.8.0 | 4.8.0 | 4,7,1 | 4,7,1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | - | - | | JupyterHub | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | | Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | | MXNet | 1.7.0 | 1.7.0 | 1.6.0 | 1.6.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.240.1-amzn-0 | 0.240.1-amzn-0 | 0.238.3-amzn-0 | 0.238.3-amzn-0 | | Spark | 2.4.7-amzn-0.1 | 2.4.7-amzn-0 | 2.4.6-amzn-0.1 | 2.4.6-amzn-0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.3.1 | 2.3.1 | 2.1.0 | 2.1.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.32.1 Questa è una versione per risolvere i problemi con Amazon EMR Scaling quando non riesce a up/scale ridimensionare correttamente un cluster o causa errori delle applicazioni. **Modifiche, miglioramenti e problemi risolti** + È stato risolto il problema per cui le richieste di dimensionamento avevano esito negativo per i cluster di grandi dimensioni e ad alto utilizzo quando i daemon su cluster di Amazon EMR eseguivano attività di controllo dell'integrità, come la raccolta dello stato del nodo YARN e dello stato del nodo HDFS. Ciò si verificava perché i daemon su cluster non erano in grado di comunicare i dati sullo stato di integrità di un nodo ai componenti interni di Amazon EMR. + I daemon su cluster di EMR sono stati migliorati per monitorare correttamente gli stati dei nodi quando gli indirizzi IP vengono riutilizzati per migliorare l'affidabilità durante le operazioni di dimensionamento. + [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). È stato risolto il problema per cui si verificavano errori di processo durante la riduzione del cluster poiché Spark presupponeva che tutti i nodi disponibili fossero negati. + [YARN-9011](https://issues.apache.org/jira/browse/YARN-9011). È stato risolto il problema per cui si verificavano errori di processo a causa di una race condition nella disattivazione di YARN quando il cluster tentava di aumentare o ridursi. + È stato risolto il problema relativo agli errori di fase o processo durante il dimensionamento del cluster garantendo che gli stati dei nodi siano sempre coerenti tra i daemon su cluster di Amazon EMR e YARN/HDFS. + È stato risolto il problema a causa del quale le operazioni del cluster, come la riduzione e l'invio di fasi, non riuscivano per i cluster Amazon EMR abilitati con autenticazione Kerberos. Questo perché il daemon on-cluster di Amazon EMR non ha rinnovato il ticket Kerberos, necessario per comunicare in modo sicuro con l'esecuzione sul nodo primario. HDFS/YARN + Le versioni più recenti di Amazon EMR risolvono il problema con un limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti di Amazon EMR. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono ora una correzione permanente con un'impostazione "Max open files" (Max. file aperti). + Il protocollo HTTPS ora è abilitato per impostazione predefinita per i repository Amazon Linux. Se utilizzi una policy Amazon S3 VPCE per limitare l'accesso a specifici bucket, devi aggiungere il nuovo ARN del bucket Amazon Linux `arn:aws:s3:::amazonlinux-2-repos-$region/*` alla tua policy (sostituisci `$region` con la Regione in cui si trova l'endpoint). Per ulteriori informazioni, consulta questo argomento nei forum di discussione. AWS [Annuncio: Amazon Linux 2 ora supporta la possibilità di utilizzare HTTPS durante la connessione ai repository dei pacchetti ](https://forums.aws.amazon.com/ann.jspa?annID=8528). **Problemi noti** + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.32.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.16.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.13.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.1.0 | Ambiente Conda per EMR Notebooks che include il gateway aziendale Jupyter | | emr-s3-dist-cp | 2.17.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.6.0 | Connettore di EMR S3Select | | emrfs | 2,45,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.11.2 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.11.2 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.1-amzn-0.1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.1-amzn-0.1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.1-amzn-0.1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.1-amzn-0.1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.1-amzn-0.1 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.1-amzn-0.1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.1-amzn-0.1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.1-amzn-0.1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.1-amzn-0.1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.1-amzn-0.1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.1-amzn-0.1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.7-amzn-3 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.7-amzn-3 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.7-amzn-3 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.7-amzn-3 | Client a riga di comando Hive. | | hive-hbase | 2.3.7-amzn-3 | Client Hive-hbase. | | hive-metastore-server | 2.3.7-amzn-3 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.7-amzn-3 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.6.0-amzn-0 | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-spark | 0.6.0-amzn-0 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.6.0-amzn-0 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.8.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.1.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.7.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.68\$1 | Server di database MySQL. | | nvidia-cuda | 10,1243 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.0 | Client a riga di comando Oozie. | | oozie-server | 5.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.240.1-amzn-0 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.240.1-amzn-0 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.240.1-amzn-0 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.3 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.7-amzn-0.1 | Client a riga di comando Spark. | | spark-history-server | 2.4.7-amzn-0.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.7-amzn-0.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.7-amzn-0.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.3.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.32.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). Le azioni di riconfigurazione vengono eseguite quando si specifica una configurazione per gruppi di istanze in un cluster in esecuzione. Amazon EMR avvia solo le azioni di riconfigurazione per le classificazioni modificate. Per ulteriori informazioni, consulta [Riconfigurazione di un gruppo di istanze in un cluster in esecuzione](emr-configure-apps-running-cluster.md). **Classificazioni emr-5.32.1** | Classificazioni | Description | Operazioni di riconfigurazione | | --- | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | Restarts the ResourceManager service. | | container-executor | Modificare i valori nel file container-executor.cfg di Hadoop YARN. | Not available. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | Not available. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | docker-conf | Modifica le impostazioni relative a docker. | Not available. | | emrfs-site | Modifica le impostazioni EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | flink-conf | Modifica le impostazione flink-conf.yaml. | Restarts Flink history server. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | Restarts Flink history server. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | Not available. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | Restarts Flink history server. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | Not available. | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | Not available. | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | | hbase-env | Modifica i valori nell'ambiente. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | Not available. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | Should not be reconfigured. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | Restarts Hive HCatalog Server. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | Restarts Hive HCatalog Server. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | Restarts Hive HCatalog Server. | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | Restarts Hive WebHCat Server. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | Not available. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | Not available. | | hive-env | Modifica i valori nell'ambiente Hive. | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | Restarts HiveServer2 and HiveMetastore. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | Not available. | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | Not available. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | Not available. | | hue-ini | Modifica i valori nel file ini di Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | Restarts Hadoop Httpfs service. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | Restarts Hadoop Httpfs service. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | Not available. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | Restarts Hadoop-KMS service. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | Not available. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | | hudi-env | Modifica i valori nell'ambiente Hudi. | Not available. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | Not available. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | Not available. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | Not available. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | Not available. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | Restarts Livy Server. | | livy-env | Modifica i valori nell'ambiente Livy. | Restarts Livy Server. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | Restarts Livy Server. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | Restarts Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | Restarts Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | Restarts Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | Not available. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | Not available. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | Restarts Phoenix-QueryServer. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | Not available. | | pig-env | Change values in the Pig environment. | Not available. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | Restarts Oozie. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | Not available. | | presto-log | Modifica i valori nel file log.properties di Presto. | Restarts Presto-Server. | | presto-config | Modifica i valori nel file config.properties di Presto. | Restarts Presto-Server. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | Not available. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | Restarts Presto-Server. | | presto-node | Modifica i valori nel file node.properties di Presto. | Not available. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | Not available. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | Not available. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | Restarts Presto-Server. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | Not available. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | Not available. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | Not available. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | Not available. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | Not available. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | Not available. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | Not available. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | Not available. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | Not available. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | Not available. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | Not available. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | Not available. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | Not available. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | Not available. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | Restarts EMR record server. | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | Restarts EMR record server. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | Restarts EMR record server. | | spark | Impostazioni Amazon EMR per Apache Spark. | This property modifies spark-defaults. See actions there. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | Restarts Spark history server and Spark thrift server. | | spark-env | Modifica i valori nell'ambiente Spark. | Restarts Spark history server and Spark thrift server. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | Not available. | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | Restarts Spark history server and Spark thrift server. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | Restarts Spark history server and Spark thrift server. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | Not available. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | Not available. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | Not available. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | Restarts Oozie. | | yarn-env | Modifica i valori nell'ambiente YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | Restarts Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | Restarts Zookeeper server. | # Rilascio 5.32.0 di Amazon EMR emr-5.32.0 ## Versioni dell'applicazione 5.32.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/) [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.32.0 | emr-5.31.1 | emr-5.31.0 | emr-5.30.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.890 | 1,11,852 | 1,11,8852 | 1,11,759 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.11.2 | 1.11.0 | 1.11.0 | 1.10.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.7-amzn-3 | 2.3.7-amzn-1 | 2.3.7-amzn-1 | 2.3.6-amzn-2 | | Hadoop | 2.10.1-amzn-0 | 2.10.0-amzn-0.1 | 2.10.0-amzn-0 | 2.8.5-amzn-6.1 | | Hive | 2.3.7-amzn-3 | 2.3.7-amzn-1 | 2.3.7-amzn-1 | 2.3.6-amzn-2 | | Hudi | 0.6.0-amzn-0 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | 0.5.2-incubating | | Hue | 4.8.0 | 4,7,1 | 4,7,1 | 4.6.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | 2.1.0 | - | - | - | | JupyterHub | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | | Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | | MXNet | 1.7.0 | 1.6.0 | 1.6.0 | 1.5.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.240.1-amzn-0 | 0.238.3-amzn-0 | 0.238.3-amzn-0 | 0.232 | | Spark | 2.4.7-amzn-0 | 2.4.6-amzn-0.1 | 2.4.6-amzn-0 | 2.4.5-amzn-0.1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.3.1 | 2.1.0 | 2.1.0 | 1.14.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.32.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.32.0. Le modifiche sono relative alla versione 5.31.0. Data del rilascio iniziale: 8 gennaio 2021 **Aggiornamenti** + Connettore Amazon Glue aggiornato alla versione 1.14.0 + Amazon SageMaker Spark SDK aggiornato alla versione 1.4.1 + Aggiornato alla versione 1.11.890 AWS SDK per Java + EMR DynamoDB Connector aggiornato alla versione 4.16.0 + EMRFS aggiornato alla versione 2.45.0 + Parametri di analisi dei log EMR aggiornati alla versione 1.18.0 + Client MetricsAndEventsApiGateway EMR aggiornato alla versione 1.5.0 + EMR Record Server aggiornato alla versione 1.8.0 + EMR S3 Dist CP aggiornato alla versione 2.17.0 + EMR Secret Agent aggiornato alla versione 1.7.0 + Flink aggiornato alla versione 1.11.2 + Hadoop aggiornato alla versione 2.10.1-amzn-0 + Hive aggiornato alla versione 2.3.7-amzn-3 + Hue aggiornato alla versione 4.8.0 + MXNet aggiornato alla versione 1.7.0 + OpenCV aggiornato alla versione 4.4.0 + Presto aggiornato alla versione 0.240.1-amzn-0 + Spark aggiornato alla versione 2.4.7-amzn-0 + Aggiornato alla versione 2.3.1 TensorFlow **Modifiche, miglioramenti e problemi risolti** + Questa è una versione per risolvere i problemi con Amazon EMR Scaling quando non riesce a up/scale ridimensionare correttamente un cluster o causa errori delle applicazioni. + È stato risolto il problema per cui le richieste di dimensionamento avevano esito negativo per i cluster di grandi dimensioni e ad alto utilizzo quando i daemon su cluster di Amazon EMR eseguivano attività di controllo dell'integrità, come la raccolta dello stato del nodo YARN e dello stato del nodo HDFS. Ciò si verificava perché i daemon su cluster non erano in grado di comunicare i dati sullo stato di integrità di un nodo ai componenti interni di Amazon EMR. + I daemon su cluster di EMR sono stati migliorati per monitorare correttamente gli stati dei nodi quando gli indirizzi IP vengono riutilizzati per migliorare l'affidabilità durante le operazioni di dimensionamento. + [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). È stato risolto il problema per cui si verificavano errori di processo durante la riduzione del cluster poiché Spark presupponeva che tutti i nodi disponibili fossero negati. + [YARN-9011](https://issues.apache.org/jira/browse/YARN-9011). È stato risolto il problema per cui si verificavano errori di processo a causa di una race condition nella disattivazione di YARN quando il cluster tentava di aumentare o ridursi. + È stato risolto il problema relativo agli errori di fase o processo durante il dimensionamento del cluster garantendo che gli stati dei nodi siano sempre coerenti tra i daemon su cluster di Amazon EMR e YARN/HDFS. + È stato risolto il problema a causa del quale le operazioni del cluster, come la riduzione e l'invio di fasi, non riuscivano per i cluster Amazon EMR abilitati con autenticazione Kerberos. Questo perché il daemon on-cluster di Amazon EMR non ha rinnovato il ticket Kerberos, necessario per comunicare in modo sicuro con l'esecuzione sul nodo primario. HDFS/YARN + Le versioni più recenti di Amazon EMR risolvono il problema con un limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti di Amazon EMR. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono ora una correzione permanente con un'impostazione "Max open files" (Max. file aperti). + Versioni dei componenti aggiornate. + Per un elenco delle versioni dei componenti, consulta [Informazioni sui rilasci di Amazon EMR](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-release-components.html) in questa guida. **Nuove funzionalità** + A partire da Amazon EMR 5.32.0 e 6.5.0, il ridimensionamento dell'executor dinamico per Apache Spark è abilitato di default. Per attivare o disattivare questa caratteristica, è possibile utilizzare il `spark.yarn.heterogeneousExecutors.enabled` parametro di configurazione. + Stato del supporto di Instance Metadata Service (IMDS) V2: i componenti di Amazon EMR 5.23.1, 5.27.1 e 5.32 o versioni successive vengono utilizzati per tutte le chiamate IMDS. IMDSv2 Per le chiamate IMDS nel codice dell'applicazione, puoi utilizzare entrambi IMDSv1 e IMDSv2 oppure configurare l'IMDS in modo che venga utilizzato solo per una maggiore sicurezza. IMDSv2 Per le altre versioni 5.x EMR, la IMDSv1 disabilitazione causa un errore di avvio del cluster. + A partire da Amazon EMR 5.32.0, è possibile avviare un cluster che si integra nativamente con Apache Ranger. Apache Ranger è un framework open source che consente di abilitare, monitorare e gestire la sicurezza completa dei dati attraverso la piattaforma Hadoop. Per ulteriori informazioni, consulta [Apache Ranger](https://ranger.apache.org/). L'integrazione nativa consente di utilizzare Apache Ranger per imporre un controllo granulare di accesso ai dati su Amazon EMR. Consulta [Integrazione di Amazon EMR con Apache Ranger](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-ranger.html) nella *Guida ai rilasci di Amazon EMR*. + Amazon EMR 5.32.0 supporta Amazon EMR su EKS. Per ulteriori dettagli su come iniziare a utilizzare EMR su EKS, consulta [Che cos'è Amazon EMR su EKS?](https://docs.aws.amazon.com/emr/latest/EMR-on-EKS-DevelopmentGuide/emr-eks.html). + Amazon EMR 5.32.0 supporta Amazon EMR Studio (anteprima). Per ulteriori informazioni sulle nozioni di base di EMR Studio, consulta [Amazon EMR Studio (anteprima)](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-studio.html). + Policy gestite con ambito: per allinearsi alle AWS best practice, Amazon EMR ha introdotto policy gestite predefinite con ambito EMR v2 in sostituzione delle politiche che verranno obsolete. Consulta [Policy gestite di Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-iam-policies.html). **Problemi noti** + Per i cluster della sottorete privata di Amazon EMR 6.3.0 e 6.2.0 non è possibile accedere all'interfaccia utente Web di Ganglia. Verrà visualizzato l'errore "access denied (403) (accesso negato (403))". Altri siti Web UIs, come Spark, Hue, Zeppelin, Livy e Tez, funzionano normalmente. JupyterHub Anche l'accesso all'interfaccia utente Web di Ganglia sui cluster della sottorete pubblica funziona normalmente. Per risolvere il problema, riavvia il servizio httpd sul nodo primario con `sudo systemctl restart httpd`. Questo problema è stato risolto in Amazon EMR 6.4.0. + **Limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti [corretto nelle versioni più recenti AL2 ].** Versioni di Amazon EMR: emr-5.30.x, emr-5.31.0, emr-5.32.0, emr-6.0.0, emr-6.1.0 ed emr-6.2.0 si basano su versioni precedenti di Amazon Linux 2 (), che hanno un'impostazione ulimit inferiore per «Max open files» quando i cluster Amazon EMR vengono creati con l'AMI predefinita. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono una correzione permanente con un'impostazione "Max open files" (Max. file aperti). Le versioni con il limite minimo del file aperto causano l'errore "Too many open files" (Troppi file aperti) durante l'invio del processo Spark. Nelle versioni interessate, l'AMI predefinita di Amazon EMR ha un'impostazione ulimit di default di 4096 per "Max open files" (Max. file aperti), che è inferiore al limite di file 65536 nell'ultima AMI di Amazon Linux 2. L'impostazione ulimit inferiore per "Max open files (Max. file aperti)" causa il fallimento del processo Spark quando il driver e l'executor Spark tentano di aprire più di 4096 file. Per risolvere il problema, Amazon EMR dispone di uno script dell'operazione bootstrap (BA) che regola l'impostazione ulimit durante la creazione del cluster. Se utilizzi una versione di Amazon EMR meno recente che non ha la soluzione permanente per questo problema, la seguente soluzione alternativa consente di impostare esplicitamente l'ulimit del controller dell'istanza su un massimo di 65536 file. **Impostazione di un ulimit esplicito dalla riga di comando** 1. Modifica `/etc/systemd/system/instance-controller.service` per aggiungere i seguenti parametri alla sezione Servizio. `LimitNOFILE=65536` `LimitNPROC=65536` 1. Riavvia InstanceController `$ sudo systemctl daemon-reload` `$ sudo systemctl restart instance-controller` **Impostazione di un ulimit usando l'operazione di bootstrap (BA)** È inoltre possibile utilizzare uno script dell'operazione di bootstrap (BA) per configurare l'ulimit del controller di istanza a 65536 file durante la creazione del cluster. ``` #!/bin/bash for user in hadoop spark hive; do sudo tee /etc/security/limits.d/$user.conf << EOF $user - nofile 65536 $user - nproc 65536 EOF done for proc in instancecontroller logpusher; do sudo mkdir -p /etc/systemd/system/$proc.service.d/ sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF [Service] LimitNOFILE=65536 LimitNPROC=65536 EOF pid=$(pgrep -f aws157.$proc.Main) sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535 done sudo systemctl daemon-reload ``` + **Importante** I cluster Amazon EMR che eseguono le AMI (Amazon Linux Machine Images) Amazon Linux o Amazon Linux 2 utilizzano il comportamento predefinito di Amazon Linux e non scaricano e installano automaticamente aggiornamenti importanti e critici dei kernel che richiedono un riavvio. Si tratta dello stesso comportamento assunto da altre istanze Amazon EC2 che eseguono l'AMI predefinita di Amazon Linux. Se nuovi aggiornamenti software Amazon Linux che richiedono un riavvio (ad esempio, aggiornamenti del kernel, NVIDIA e CUDA) risultano disponibili dopo il rilascio di una versione di Amazon EMR, le istanze del cluster EMR che eseguono l'AMI predefinita non scaricano e installano automaticamente tali aggiornamenti. Per ottenere gli aggiornamenti del kernel, puoi [personalizzare l'AMI di Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-custom-ami.html) per [utilizzare l'AMI di Amazon Linux più recente](https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/finding-an-ami.html). + Il supporto della console per creare una configurazione di sicurezza che specifichi l'opzione di integrazione AWS Ranger non è attualmente supportato nella GovCloud regione. La configurazione della sicurezza può essere eseguita utilizzando la CLI. Consulta [Creazione della configurazione di sicurezza EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-ranger-security-config.html) nella *Guida alla gestione di Amazon EMR*. + Quando AtRestEncryption la crittografia HDFS è abilitata su un cluster che utilizza Amazon EMR 5.31.0 o 5.32.0, le query Hive generano la seguente eccezione di runtime. ``` TaskAttempt 3 failed, info=[Error: Error while running task ( failure ) : attempt_1604112648850_0001_1_01_000000_3:java.lang.RuntimeException: java.lang.RuntimeException: Hive Runtime Error while closing operators: java.io.IOException: java.util.ServiceConfigurationError: org.apache.hadoop.security.token.TokenIdentifier: Provider org.apache.hadoop.hbase.security.token.AuthenticationTokenIdentifier not found ``` + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.32.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.16.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.13.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.1.0 | Ambiente Conda per EMR Notebooks che include il gateway aziendale Jupyter | | emr-s3-dist-cp | 2.17.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.6.0 | Connettore di EMR S3Select | | emrfs | 2,45,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.11.2 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.11.2 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.1-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.1-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.1-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.1-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.1-amzn-0 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.1-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.1-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.1-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.1-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.1-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.1-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.7-amzn-3 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.7-amzn-3 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.7-amzn-3 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.7-amzn-3 | Client a riga di comando Hive. | | hive-hbase | 2.3.7-amzn-3 | Client Hive-hbase. | | hive-metastore-server | 2.3.7-amzn-3 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.7-amzn-3 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.6.0-amzn-0 | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-spark | 0.6.0-amzn-0 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.6.0-amzn-0 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.8.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.1.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.7.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.68 | Server di database MySQL. | | nvidia-cuda | 10,1243 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.0 | Client a riga di comando Oozie. | | oozie-server | 5.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.240.1-amzn-0 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.240.1-amzn-0 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.240.1-amzn-0 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.3 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.7-amzn-0 | Client a riga di comando Spark. | | spark-history-server | 2.4.7-amzn-0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.7-amzn-0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.7-amzn-0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.3.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.32.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). Le azioni di riconfigurazione vengono eseguite quando si specifica una configurazione per gruppi di istanze in un cluster in esecuzione. Amazon EMR avvia solo le azioni di riconfigurazione per le classificazioni modificate. Per ulteriori informazioni, consulta [Riconfigurazione di un gruppo di istanze in un cluster in esecuzione](emr-configure-apps-running-cluster.md). **Classificazioni emr-5.32.0** | Classificazioni | Description | Operazioni di riconfigurazione | | --- | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | Restarts the ResourceManager service. | | container-executor | Modificare i valori nel file container-executor.cfg di Hadoop YARN. | Not available. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | Not available. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | docker-conf | Modifica le impostazioni relative a docker. | Not available. | | emrfs-site | Modifica le impostazioni EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | | flink-conf | Modifica le impostazione flink-conf.yaml. | Restarts Flink history server. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | Restarts Flink history server. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | Not available. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | Restarts Flink history server. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | Not available. | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | Not available. | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | | hbase-env | Modifica i valori nell'ambiente. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | Not available. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | Should not be reconfigured. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | Restarts Hive HCatalog Server. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | Restarts Hive HCatalog Server. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | Restarts Hive HCatalog Server. | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | Restarts Hive WebHCat Server. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | Restarts Hive WebHCat Server. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | Not available. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | Not available. | | hive-env | Modifica i valori nell'ambiente Hive. | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | Restarts HiveServer2 and HiveMetastore. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | Not available. | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | Not available. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | Not available. | | hue-ini | Modifica i valori nel file ini di Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | Restarts Hadoop Httpfs service. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | Restarts Hadoop Httpfs service. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | Not available. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | Restarts Hadoop-KMS service. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | Not available. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | | hudi-env | Modifica i valori nell'ambiente Hudi. | Not available. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | Not available. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | Not available. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | Not available. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | Not available. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | Restarts Livy Server. | | livy-env | Modifica i valori nell'ambiente Livy. | Restarts Livy Server. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | Restarts Livy Server. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | Restarts Hadoop MapReduce-HistoryServer. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | Restarts Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | Restarts Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | Restarts Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | Not available. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | Not available. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | Restarts Phoenix-QueryServer. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | Not available. | | pig-env | Change values in the Pig environment. | Not available. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | Restarts Oozie. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | Not available. | | presto-log | Modifica i valori nel file log.properties di Presto. | Restarts Presto-Server. | | presto-config | Modifica i valori nel file config.properties di Presto. | Restarts Presto-Server. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | Not available. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | Restarts Presto-Server. | | presto-node | Modifica i valori nel file node.properties di Presto. | Not available. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | Not available. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | Not available. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | Restarts Presto-Server. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | Not available. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | Not available. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | Not available. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | Not available. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | Not available. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | Not available. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | Not available. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | Not available. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | Not available. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | Not available. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | Not available. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | Not available. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | Restarts Ranger KMS Server. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | Not available. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | Not available. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | Restarts EMR record server. | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | Restarts EMR record server. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | Restarts EMR record server. | | spark | Impostazioni Amazon EMR per Apache Spark. | This property modifies spark-defaults. See actions there. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | Restarts Spark history server and Spark thrift server. | | spark-env | Modifica i valori nell'ambiente Spark. | Restarts Spark history server and Spark thrift server. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | Not available. | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | Restarts Spark history server and Spark thrift server. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | Restarts Spark history server and Spark thrift server. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | Not available. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | Not available. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | Not available. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | Restarts Oozie. | | yarn-env | Modifica i valori nell'ambiente YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | Restarts Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | Restarts Zookeeper server. | # Rilascio 5.31.1 di Amazon EMR emr-5.31.1 ## Versioni dell'applicazione 5.31.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/) [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.31.1 | emr-5.31.0 | emr-5.30.2 | emr-5.30.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.852 | 1,11,8852 | 1,11,759 | 1,11,759 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.11.0 | 1.11.0 | 1.10.0 | 1.10.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.7-amzn-1 | 2.3.7-amzn-1 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | | Hadoop | 2.10.0-amzn-0.1 | 2.10.0-amzn-0 | 2.8.5-amzn-6.1 | 2.8.5-amzn-6 | | Hive | 2.3.7-amzn-1 | 2.3.7-amzn-1 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | | Hudi | 0.6.0-amzn-0 | 0.6.0-amzn-0 | 0.5.2-incubating | 0.5.2-incubating | | Hue | 4,7,1 | 4,7,1 | 4.6.0 | 4.6.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | | Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | | MXNet | 1.6.0 | 1.6.0 | 1.5.1 | 1.5.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.238.3-amzn-0 | 0.238.3-amzn-0 | 0.232 | 0.232 | | Spark | 2.4.6-amzn-0.1 | 2.4.6-amzn-0 | 2.4.5-amzn-0.1 | 2.4.5-amzn-0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.1.0 | 2.1.0 | 1.14.0 | 1.14.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.31.1 Questa è una versione per risolvere i problemi con Amazon EMR Scaling quando non riesce a up/scale ridimensionare correttamente un cluster o causa errori delle applicazioni. **Modifiche, miglioramenti e problemi risolti** + È stato risolto il problema per cui le richieste di dimensionamento avevano esito negativo per i cluster di grandi dimensioni e ad alto utilizzo quando i daemon su cluster di Amazon EMR eseguivano attività di controllo dell'integrità, come la raccolta dello stato del nodo YARN e dello stato del nodo HDFS. Ciò si verificava perché i daemon su cluster non erano in grado di comunicare i dati sullo stato di integrità di un nodo ai componenti interni di Amazon EMR. + I daemon su cluster di EMR sono stati migliorati per monitorare correttamente gli stati dei nodi quando gli indirizzi IP vengono riutilizzati per migliorare l'affidabilità durante le operazioni di dimensionamento. + [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). È stato risolto il problema per cui si verificavano errori di processo durante la riduzione del cluster poiché Spark presupponeva che tutti i nodi disponibili fossero negati. + [YARN-9011](https://issues.apache.org/jira/browse/YARN-9011). È stato risolto il problema per cui si verificavano errori di processo a causa di una race condition nella disattivazione di YARN quando il cluster tentava di aumentare o ridursi. + È stato risolto il problema relativo agli errori di fase o processo durante il dimensionamento del cluster garantendo che gli stati dei nodi siano sempre coerenti tra i daemon su cluster di Amazon EMR e YARN/HDFS. + È stato risolto il problema a causa del quale le operazioni del cluster, come la riduzione e l'invio di fasi, non riuscivano per i cluster Amazon EMR abilitati con autenticazione Kerberos. Questo perché il daemon on-cluster di Amazon EMR non ha rinnovato il ticket Kerberos, necessario per comunicare in modo sicuro con l'esecuzione sul nodo primario. HDFS/YARN + Le versioni più recenti di Amazon EMR risolvono il problema con un limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti di Amazon EMR. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono ora una correzione permanente con un'impostazione "Max open files" (Max. file aperti). + Il protocollo HTTPS ora è abilitato per impostazione predefinita per i repository Amazon Linux. Se utilizzi una policy Amazon S3 VPCE per limitare l'accesso a specifici bucket, devi aggiungere il nuovo ARN del bucket Amazon Linux `arn:aws:s3:::amazonlinux-2-repos-$region/*` alla tua policy (sostituisci `$region` con la Regione in cui si trova l'endpoint). Per ulteriori informazioni, consulta questo argomento nei forum di discussione. AWS [Annuncio: Amazon Linux 2 ora supporta la possibilità di utilizzare HTTPS durante la connessione ai repository dei pacchetti ](https://forums.aws.amazon.com/ann.jspa?annID=8528). **Problemi noti** + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.31.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.15.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.13.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.15.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.6.0 | Connettore di EMR S3Select | | emrfs | 2,43,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.11.0 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.11.0 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.0-amzn-0.1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.0-amzn-0.1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.0-amzn-0.1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.0-amzn-0.1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.0-amzn-0.1 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.0-amzn-0.1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.0-amzn-0.1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.0-amzn-0.1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.0-amzn-0.1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.0-amzn-0.1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.0-amzn-0.1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.7-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.7-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.7-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.7-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.7-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.7-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.7-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.6.0-amzn-0 | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-spark | 0.6.0-amzn-0 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.6.0-amzn-0 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.7.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.1.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.6.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.64\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.0 | Client a riga di comando Oozie. | | oozie-server | 5.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.3.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.238.3-amzn-0 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.238.3-amzn-0 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.238.3-amzn-0 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.3 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.6-amzn-0.1 | Client a riga di comando Spark. | | spark-history-server | 2.4.6-amzn-0.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.6-amzn-0.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.6-amzn-0.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.1.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.31.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.31.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | hudi-env | Modifica i valori nell'ambiente Hudi. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.31.0 di Amazon EMR emr-5.31.0 ## Versioni dell'applicazione 5.31.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/) [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.31.0 | emr-5.30.2 | emr-5.30.1 | emr-5.30.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.852 | 1,11,759 | 1,11,759 | 1,11,759 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.11.0 | 1.10.0 | 1.10.0 | 1.10.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | | HCatalog | 2.3.7-amzn-1 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | | Hadoop | 2.10.0-amzn-0 | 2.8.5-amzn-6.1 | 2.8.5-amzn-6 | 2.8.5-amzn-6 | | Hive | 2.3.7-amzn-1 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | | Hudi | 0.6.0-amzn-0 | 0.5.2-incubating | 0.5.2-incubating | 0.5.2-incubating | | Hue | 4,7,1 | 4.6.0 | 4.6.0 | 4.6.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | | Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | | MXNet | 1.6.0 | 1.5.1 | 1.5.1 | 1.5.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.238.3-amzn-0 | 0.232 | 0.232 | 0.232 | | Spark | 2.4.6-amzn-0 | 2.4.5-amzn-0.1 | 2.4.5-amzn-0 | 2.4.5-amzn-0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 2.1.0 | 1.14.0 | 1.14.0 | 1.14.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.31.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.31.0. Le modifiche sono relative alla versione 5.30.1. Data del rilascio iniziale: 9 ottobre 2020 Ultimo aggiornamento: 15 ottobre 2020 **Aggiornamenti** + Connettore Amazon Glue aggiornato alla versione 1.13.0 + Amazon SageMaker Spark SDK aggiornato alla versione 1.4.0 + Connettore Amazon Kinesis aggiornato alla versione 3.5.9 + Aggiornato alla versione 1.11.852 AWS SDK per Java + Bigtop-tomcat aggiornato alla versione 8.5.56 + EMR FS aggiornato alla versione 2.43.0 + Client MetricsAndEventsApiGateway EMR aggiornato alla versione 1.4.0 + EMR S3 Dist CP aggiornato alla versione 2.15.0 + EMR S3 Select aggiornato alla versione 1.6.0 + Flink aggiornato alla versione 1.11.0 + Hadoop aggiornato alla versione 2.10.0 + Hive aggiornato alla versione 2.3.7 + Hudi aggiornato alla versione 0.6.0 + Hue aggiornato alla versione 4.7.1 + Aggiornato alla versione 1.1.0 JupyterHub + MXNet aggiornato alla versione 1.6.0 + OpenCV aggiornato alla versione 4.3.0 + Presto aggiornato alla versione 0.238.3 + Aggiornato alla versione 2.1.0 TensorFlow **Modifiche, miglioramenti e problemi risolti** + Questa è una versione per risolvere i problemi con Amazon EMR Scaling quando non riesce a up/scale ridimensionare correttamente un cluster o causa errori delle applicazioni. + È stato risolto il problema per cui le richieste di dimensionamento avevano esito negativo per i cluster di grandi dimensioni e ad alto utilizzo quando i daemon su cluster di Amazon EMR eseguivano attività di controllo dell'integrità, come la raccolta dello stato del nodo YARN e dello stato del nodo HDFS. Ciò si verificava perché i daemon su cluster non erano in grado di comunicare i dati sullo stato di integrità di un nodo ai componenti interni di Amazon EMR. + I daemon su cluster di EMR sono stati migliorati per monitorare correttamente gli stati dei nodi quando gli indirizzi IP vengono riutilizzati per migliorare l'affidabilità durante le operazioni di dimensionamento. + [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). È stato risolto il problema per cui si verificavano errori di processo durante la riduzione del cluster poiché Spark presupponeva che tutti i nodi disponibili fossero negati. + [YARN-9011](https://issues.apache.org/jira/browse/YARN-9011). È stato risolto il problema per cui si verificavano errori di processo a causa di una race condition nella disattivazione di YARN quando il cluster tentava di aumentare o ridursi. + È stato risolto il problema relativo agli errori di fase o processo durante il dimensionamento del cluster garantendo che gli stati dei nodi siano sempre coerenti tra i daemon su cluster di Amazon EMR e YARN/HDFS. + È stato risolto il problema a causa del quale le operazioni del cluster, come la riduzione e l'invio di fasi, non riuscivano per i cluster Amazon EMR abilitati con autenticazione Kerberos. Questo perché il daemon on-cluster di Amazon EMR non ha rinnovato il ticket Kerberos, necessario per comunicare in modo sicuro con l'esecuzione sul nodo primario. HDFS/YARN + Le versioni più recenti di Amazon EMR risolvono il problema con un limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti di Amazon EMR. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono ora una correzione permanente con un'impostazione "Max open files" (Max. file aperti). + Le [statistiche di colonna Hive](https://cwiki.apache.org/confluence/display/Hive/StatsDev#StatsDev-ColumnStatistics) sono supportate per Amazon EMR 5.31.0 e versioni successive. + Versioni dei componenti aggiornate. + Supporto di EMRFS S3EC V2 in Amazon EMR 5.31.0. In S3 Java SDK 1.11.837 e versioni successive, il client di crittografia versione 2 (S3EC V2) è stato introdotto con vari miglioramenti alla sicurezza. Per ulteriori informazioni, consulta gli argomenti seguenti: + Post del blog S3: [Updates to the Amazon S3 encryption client (Aggiornamenti al client di crittografia Amazon S3)](https://aws.amazon.com/blogs/developer/updates-to-the-amazon-s3-encryption-client/). + AWS SDK per Java Guida per gli sviluppatori: [migra i client di crittografia e decrittografia alla versione 2](https://docs.aws.amazon.com/sdk-for-java/v1/developer-guide/s3-encryption-migration.html#s3-cse-update-code). + Guida alla gestione di EMR: [Crittografia lato client di Amazon S3](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-emrfs-encryption-cse.html). Il client di crittografia V1 è ancora disponibile nell'SDK per la compatibilità con le versioni precedenti. **Nuove funzionalità** + **Riduci il limite «Numero massimo di file aperti» rispetto alle versioni precedenti AL2 [corretto nelle versioni più recenti].** Versioni di Amazon EMR: emr-5.30.x, emr-5.31.0, emr-5.32.0, emr-6.0.0, emr-6.1.0 ed emr-6.2.0 si basano su versioni precedenti di Amazon Linux 2 (), che hanno un'impostazione ulimit inferiore per «Max open files» quando i cluster Amazon EMR vengono creati con l'AMI predefinita. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono una correzione permanente con un'impostazione "Max open files" (Max. file aperti). Le versioni con il limite minimo del file aperto causano l'errore "Too many open files" (Troppi file aperti) durante l'invio del processo Spark. Nelle versioni interessate, l'AMI predefinita di Amazon EMR ha un'impostazione ulimit di default di 4096 per "Max open files" (Max. file aperti), che è inferiore al limite di file 65536 nell'ultima AMI di Amazon Linux 2. L'impostazione ulimit inferiore per "Max open files (Max. file aperti)" causa il fallimento del processo Spark quando il driver e l'executor Spark tentano di aprire più di 4096 file. Per risolvere il problema, Amazon EMR dispone di uno script dell'operazione bootstrap (BA) che regola l'impostazione ulimit durante la creazione del cluster. Se utilizzi una versione di Amazon EMR meno recente che non ha la soluzione permanente per questo problema, la seguente soluzione alternativa consente di impostare esplicitamente l'ulimit del controller dell'istanza su un massimo di 65536 file. **Impostazione di un ulimit esplicito dalla riga di comando** 1. Modifica `/etc/systemd/system/instance-controller.service` per aggiungere i seguenti parametri alla sezione Servizio. `LimitNOFILE=65536` `LimitNPROC=65536` 1. Riavvia InstanceController `$ sudo systemctl daemon-reload` `$ sudo systemctl restart instance-controller` **Impostazione di un ulimit usando l'operazione di bootstrap (BA)** È inoltre possibile utilizzare uno script dell'operazione di bootstrap (BA) per configurare l'ulimit del controller di istanza a 65536 file durante la creazione del cluster. ``` #!/bin/bash for user in hadoop spark hive; do sudo tee /etc/security/limits.d/$user.conf << EOF $user - nofile 65536 $user - nproc 65536 EOF done for proc in instancecontroller logpusher; do sudo mkdir -p /etc/systemd/system/$proc.service.d/ sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF [Service] LimitNOFILE=65536 LimitNPROC=65536 EOF pid=$(pgrep -f aws157.$proc.Main) sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535 done sudo systemctl daemon-reload ``` + Con Amazon EMR 5.31.0, puoi avviare un cluster che si integra con Lake Formation. Questa integrazione fornisce un filtraggio granulare dei dati a livello di colonna per database e tabelle nel Glue Data Catalog. AWS Inoltre, consente l'accesso federato single sign-on a EMR Notebooks o Apache Zeppelin da un sistema di identità aziendale. Per ulteriori informazioni, consulta [Integrazione di Amazon EMR con AWS Lake Formation](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-lake-formation.html) nella *Guida alla gestione di Amazon EMR*. Amazon EMR with Lake Formation è attualmente disponibile in 16 AWS regioni: Stati Uniti orientali (Ohio e Virginia settentrionale), Stati Uniti occidentali (California settentrionale e Oregon), Asia Pacifico (Mumbai, Seoul, Singapore, Sydney e Tokyo), Canada (Centrale), Europa (Francoforte, Irlanda, Londra, Parigi e Stoccolma), Sud America (San Paolo). **Problemi noti** + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. + Quando AtRestEncryption la crittografia HDFS è abilitata su un cluster che utilizza Amazon EMR 5.31.0 o 5.32.0, le query Hive generano la seguente eccezione di runtime. ``` TaskAttempt 3 failed, info=[Error: Error while running task ( failure ) : attempt_1604112648850_0001_1_01_000000_3:java.lang.RuntimeException: java.lang.RuntimeException: Hive Runtime Error while closing operators: java.io.IOException: java.util.ServiceConfigurationError: org.apache.hadoop.security.token.TokenIdentifier: Provider org.apache.hadoop.hbase.security.token.AuthenticationTokenIdentifier not found ``` + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.31.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.4.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.15.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.13.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.15.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.6.0 | Connettore di EMR S3Select | | emrfs | 2,43,0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.11.0 | Applicazioni e script client a riga di comando Apache Flink. | | flink-jobmanager-config | 1.11.0 | Gestione delle risorse sui nodi EMR per Apache Flink. JobManager | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.10.0-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.10.0-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.10.0-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.10.0-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.10.0-amzn-0 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.10.0-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.10.0-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.10.0-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.10.0-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.10.0-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.10.0-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.7-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.7-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.7-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.7-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.7-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.7-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.7-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.6.0-amzn-0 | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-spark | 0.6.0-amzn-0 | Libreria bundle per eseguire Spark con Hudi. | | hudi-presto | 0.6.0-amzn-0 | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.7.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.1.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.6.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.64 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.0 | Client a riga di comando Oozie. | | oozie-server | 5.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 4.3.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.238.3-amzn-0 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.238.3-amzn-0 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.238.3-amzn-0 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.3 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.6-amzn-0 | Client a riga di comando Spark. | | spark-history-server | 2.4.6-amzn-0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.6-amzn-0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.6-amzn-0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 2.1.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.31.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.31.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | hudi-env | Modifica i valori nell'ambiente Hudi. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.30.2 di Amazon EMR emr-5.30.2 ## Versioni dell'applicazione 5.30.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/) [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.30.2 | emr-5.30.1 | emr-5.30.0 | emr-5.29.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.759 | 1,11,759 | 1,11,759 | 1,11,682 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2,7, 3,6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.10.0 | 1.10.0 | 1.10.0 | 1.9.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.10 | | HCatalog | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-1 | | Hadoop | 2.8.5-amzn-6.1 | 2.8.5-amzn-6 | 2.8.5-amzn-6 | 2.8.5-amzn-5 | | Hive | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-1 | | Hudi | 0.5.2-incubating | 0.5.2-incubating | 0.5.2-incubating | 0.5.0-incubating | | Hue | 4.6.0 | 4.6.0 | 4.6.0 | 4.4.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.1.0 | 1.1.0 | 1.1.0 | 1.0.0 | | Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.6.0-incubating | | MXNet | 1.5.1 | 1.5.1 | 1.5.1 | 1.5.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.1.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.232 | 0.232 | 0.232 | 0.227 | | Spark | 2.4.5-amzn-0.1 | 2.4.5-amzn-0 | 2.4.5-amzn-0 | 2.4.4 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.30.2 Questa è una versione per risolvere i problemi con Amazon EMR Scaling quando non riesce a up/scale ridimensionare correttamente un cluster o causa errori delle applicazioni. **Modifiche, miglioramenti e problemi risolti** + È stato risolto il problema per cui le richieste di dimensionamento avevano esito negativo per i cluster di grandi dimensioni e ad alto utilizzo quando i daemon su cluster di Amazon EMR eseguivano attività di controllo dell'integrità, come la raccolta dello stato del nodo YARN e dello stato del nodo HDFS. Ciò si verificava perché i daemon su cluster non erano in grado di comunicare i dati sullo stato di integrità di un nodo ai componenti interni di Amazon EMR. + I daemon su cluster di EMR sono stati migliorati per monitorare correttamente gli stati dei nodi quando gli indirizzi IP vengono riutilizzati per migliorare l'affidabilità durante le operazioni di dimensionamento. + [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). È stato risolto il problema per cui si verificavano errori di processo durante la riduzione del cluster poiché Spark presupponeva che tutti i nodi disponibili fossero negati. + [YARN-9011](https://issues.apache.org/jira/browse/YARN-9011). È stato risolto il problema per cui si verificavano errori di processo a causa di una race condition nella disattivazione di YARN quando il cluster tentava di aumentare o ridursi. + È stato risolto il problema relativo agli errori di fase o processo durante il dimensionamento del cluster garantendo che gli stati dei nodi siano sempre coerenti tra i daemon su cluster di Amazon EMR e YARN/HDFS. + È stato risolto il problema a causa del quale le operazioni del cluster, come la riduzione e l'invio di fasi, non riuscivano per i cluster Amazon EMR abilitati con autenticazione Kerberos. Questo perché il daemon on-cluster di Amazon EMR non ha rinnovato il ticket Kerberos, necessario per comunicare in modo sicuro con l'esecuzione sul nodo primario. HDFS/YARN + Le versioni più recenti di Amazon EMR risolvono il problema con un limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti di Amazon EMR. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono ora una correzione permanente con un'impostazione "Max open files" (Max. file aperti). + Il protocollo HTTPS ora è abilitato per impostazione predefinita per i repository Amazon Linux. Se utilizzi una policy Amazon S3 VPCE per limitare l'accesso a specifici bucket, devi aggiungere il nuovo ARN del bucket Amazon Linux `arn:aws:s3:::amazonlinux-2-repos-$region/*` alla tua policy (sostituisci `$region` con la Regione in cui si trova l'endpoint). Per ulteriori informazioni, consulta questo argomento nei forum di discussione. AWS [Annuncio: Amazon Linux 2 ora supporta la possibilità di utilizzare HTTPS durante la connessione ai repository dei pacchetti ](https://forums.aws.amazon.com/ann.jspa?annID=8528). **Problemi noti** + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.30.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.3.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.14.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.13.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.14.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.5.0 | Connettore di EMR S3Select | | emrfs | 2.40.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.10.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-6.1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-6.1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-6.1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-6.1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-6.1 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-6.1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-6.1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-6.1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-6.1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-6.1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-6.1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.6-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.6-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.6-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.6-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.6-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.6-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.6-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.5.2-incubating | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-presto | 0.5.2-incubating | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.6.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.1.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.5.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.64\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.0 | Client a riga di comando Oozie. | | oozie-server | 5.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.232 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.232 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.232 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.3 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.5-amzn-0.1 | Client a riga di comando Spark. | | spark-history-server | 2.4.5-amzn-0.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.5-amzn-0.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.5-amzn-0.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.14.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.30.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.30.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | hudi-env | Modifica i valori nell'ambiente Hudi. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.30.1 di Amazon EMR emr-5.30.1 ## Versioni dell'applicazione 5.30.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/) [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.30.1 | emr-5.30.0 | emr-5.29.0 | emr-5.28.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.759 | 1,11,759 | 1,11,682 | 1,11,659 | | Python | 2.7, 3.7 | 2.7, 3.7 | 2,7, 3,6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.10.0 | 1.10.0 | 1.9.1 | 1.9.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.13 | 1.4.10 | 1.4.10 | | HCatalog | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-1 | 2.3.6-amzn-0 | | Hadoop | 2.8.5-amzn-6 | 2.8.5-amzn-6 | 2.8.5-amzn-5 | 2.8.5-amzn-5 | | Hive | 2.3.6-amzn-2 | 2.3.6-amzn-2 | 2.3.6-amzn-1 | 2.3.6-amzn-0 | | Hudi | 0.5.2-incubating | 0.5.2-incubating | 0.5.0-incubating | 0.5.0-incubating | | Hue | 4.6.0 | 4.6.0 | 4.4.0 | 4.4.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.1.0 | 1.1.0 | 1.0.0 | 1.0.0 | | Livy | 0.7.0-incubating | 0.7.0-incubating | 0.6.0-incubating | 0.6.0-incubating | | MXNet | 1.5.1 | 1.5.1 | 1.5.1 | 1.5.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.0 | 5.2.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.232 | 0.232 | 0.227 | 0.227 | | Spark | 2.4.5-amzn-0 | 2.4.5-amzn-0 | 2.4.4 | 2.4.4 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.30.1 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.30.1. Le modifiche sono relative alla versione 5.30.0. Data del rilascio iniziale: 30 giugno 2020 Ultimo aggiornamento: 24 agosto 2020 **Modifiche, miglioramenti e problemi risolti** + Le versioni più recenti di Amazon EMR risolvono il problema con un limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti di Amazon EMR. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono ora una correzione permanente con un'impostazione "Max open files" (Max. file aperti). + Risolto il problema per cui il processo del controller di istanza generava un numero infinito di processi. + Risolto un problema per cui Hue non era in grado di eseguire una query Hive, mostrando il messaggio "database is locked (database bloccato)" e impedendo l'esecuzione di query. + Risolto un problema Spark per consentire l'esecuzione simultanea di più attività nel cluster EMR. + Risolto un problema del notebook Jupyter che causava l'errore "too many open files (troppi file aperti)" nel server Jupyter. + Corretto un problema relativo all'ora di inizio del cluster. **Nuove funzionalità** + Le interfacce utente delle applicazioni persistenti Timeline Server di YARN e Tez sono disponibili con Amazon EMR versioni 6.x ed EMR versione 5.30.1 e successive. L'accesso ai collegamenti One-Click alla cronologia dell'applicazione persistente consente di accedere rapidamente alla cronologia dei processi senza configurare un proxy Web tramite una connessione SSH. I log dei cluster attivi e terminati sono disponibili per 30 giorni dopo la fine dell'applicazione. Per ulteriori informazioni, consulta [Visualizzazione delle interfacce utente delle applicazioni persistenti](https://docs.aws.amazon.com/emr/latest/ManagementGuide/app-history-spark-UI.html) nella *Guida alla gestione di Amazon EMR*. + EMR Notebook Execution APIs è disponibile per eseguire notebook EMR tramite uno script o una riga di comando. La possibilità di avviare, interrompere, elencare e descrivere le esecuzioni dei notebook EMR senza la AWS console consente di controllare a livello di programmazione un notebook EMR. Utilizzando una cella del notebook parametrizzata, è possibile passare diversi valori di parametro a un notebook senza doverne creare una copia per ogni nuovo set di valori dei parametri. Consulta [Operazioni dell'API EMR](https://docs.aws.amazon.com/emr/latest/APIReference/API_Operations.html). Per un codice di esempio, consulta [Comandi di esempio per eseguire EMR Notebooks a livello di codice](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-notebooks-headless.html). **Problemi noti** + **Limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti AL2 [corretto nelle versioni più recenti].** Versioni di Amazon EMR: emr-5.30.x, emr-5.31.0, emr-5.32.0, emr-6.0.0, emr-6.1.0 ed emr-6.2.0 si basano su versioni precedenti di Amazon Linux 2 (), che hanno un'impostazione ulimit inferiore per «Max open files» quando i cluster Amazon EMR vengono creati con l'AMI predefinita. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono una correzione permanente con un'impostazione "Max open files" (Max. file aperti). Le versioni con il limite minimo del file aperto causano l'errore "Too many open files" (Troppi file aperti) durante l'invio del processo Spark. Nelle versioni interessate, l'AMI predefinita di Amazon EMR ha un'impostazione ulimit di default di 4096 per "Max open files" (Max. file aperti), che è inferiore al limite di file 65536 nell'ultima AMI di Amazon Linux 2. L'impostazione ulimit inferiore per "Max open files (Max. file aperti)" causa il fallimento del processo Spark quando il driver e l'executor Spark tentano di aprire più di 4096 file. Per risolvere il problema, Amazon EMR dispone di uno script dell'operazione bootstrap (BA) che regola l'impostazione ulimit durante la creazione del cluster. Se utilizzi una versione di Amazon EMR meno recente che non ha la soluzione permanente per questo problema, la seguente soluzione alternativa consente di impostare esplicitamente l'ulimit del controller dell'istanza su un massimo di 65536 file. **Impostazione di un ulimit esplicito dalla riga di comando** 1. Modifica `/etc/systemd/system/instance-controller.service` per aggiungere i seguenti parametri alla sezione Servizio. `LimitNOFILE=65536` `LimitNPROC=65536` 1. Riavvia InstanceController `$ sudo systemctl daemon-reload` `$ sudo systemctl restart instance-controller` **Impostazione di un ulimit usando l'operazione di bootstrap (BA)** È inoltre possibile utilizzare uno script dell'operazione di bootstrap (BA) per configurare l'ulimit del controller di istanza a 65536 file durante la creazione del cluster. ``` #!/bin/bash for user in hadoop spark hive; do sudo tee /etc/security/limits.d/$user.conf << EOF $user - nofile 65536 $user - nproc 65536 EOF done for proc in instancecontroller logpusher; do sudo mkdir -p /etc/systemd/system/$proc.service.d/ sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF [Service] LimitNOFILE=65536 LimitNPROC=65536 EOF pid=$(pgrep -f aws157.$proc.Main) sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535 done sudo systemctl daemon-reload ``` + **EMR Notebooks** La caratteristica che consente di installare kernel e librerie Python aggiuntive sul nodo primario del cluster è disabilitata per impostazione predefinita in EMR versione 5.30.1. Per ulteriori informazioni su questa caratteristica, consulta la sezione [Installing Kernels and Python Libraries on a Cluster Primary Node](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-notebooks-installing-libraries-and-kernels.html) (Installazione di kernel e librerie Python su un nodo primario del cluster). Per abilitare questa funzione, procedi come segue: 1. Assicurati che le policy di autorizzazione associate al ruolo di servizio per EMR Notebooks consentano l'operazione seguente: `elasticmapreduce:ListSteps` Per ulteriori informazioni, consultare il [Ruolo del servizio per EMR Notebooks](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-notebooks-service-role.html). 1. Utilizzare AWS CLI per eseguire un passaggio sul cluster che configura EMR Notebooks, come illustrato nell'esempio seguente. Sostituisci *us-east-1* con la regione in cui risiede il cluster. Per ulteriori informazioni, consulta [Aggiunta di fasi a un cluster utilizzando la AWS CLI](https://docs.aws.amazon.com/emr/latest/ManagementGuide/add-step-cli.html). ``` aws emr add-steps --cluster-id MyClusterID --steps Type=CUSTOM_JAR,Name=EMRNotebooksSetup,ActionOnFailure=CONTINUE,Jar=s3://us-east-1.elasticmapreduce/libs/script-runner/script-runner.jar,Args=["s3://awssupportdatasvcs.com/bootstrap-actions/EMRNotebooksSetup/emr-notebooks-setup.sh"] ``` + **Dimensionamento gestito** Le operazioni di dimensionamento gestito su cluster 5.30.0 e 5.30.1 senza Presto installato possono causare errori delle applicazioni o far sì che un gruppo di istanze o un parco istanze uniforme mantenga lo stato `ARRESTED`, in particolare quando un'operazione di riduzione è seguita rapidamente da un'operazione di aumento. Come soluzione alternativa, scegli Presto come applicazione da installare quando crei un cluster con Amazon EMR rilasci 5.30.0 e 5.30.1, anche se il tuo processo non richiede Presto. + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.30.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.3.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.14.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.13.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.14.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.5.0 | Connettore di EMR S3Select | | emrfs | 2.40.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.10.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-6 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-6 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-6 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-6 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-6 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-6 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-6 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-6 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-6 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-6 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-6 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.6-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.6-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.6-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.6-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.6-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.6-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.6-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.5.2-incubating | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-presto | 0.5.2-incubating | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.6.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.1.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.5.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.64 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.0 | Client a riga di comando Oozie. | | oozie-server | 5.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.232 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.232 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.232 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.3 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.5-amzn-0 | Client a riga di comando Spark. | | spark-history-server | 2.4.5-amzn-0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.5-amzn-0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.5-amzn-0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.14.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.30.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.30.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | hudi-env | Modifica i valori nell'ambiente Hudi. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.30.0 di Amazon EMR emr-5.30.0 ## Versioni dell'applicazione 5.30.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/) [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.30.0 | emr-5.29.0 | emr-5.28.1 | emr-5.28.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.759 | 1,11,682 | 1,11,659 | 1,11,659 | | Python | 2.7, 3.7 | 2,7, 3,6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.10.0 | 1.9.1 | 1.9.0 | 1.9.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.13 | 1.4.10 | 1.4.10 | 1.4.10 | | HCatalog | 2.3.6-amzn-2 | 2.3.6-amzn-1 | 2.3.6-amzn-0 | 2.3.6-amzn-0 | | Hadoop | 2.8.5-amzn-6 | 2.8.5-amzn-5 | 2.8.5-amzn-5 | 2.8.5-amzn-5 | | Hive | 2.3.6-amzn-2 | 2.3.6-amzn-1 | 2.3.6-amzn-0 | 2.3.6-amzn-0 | | Hudi | 0.5.2-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | Hue | 4.6.0 | 4.4.0 | 4.4.0 | 4.4.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.1.0 | 1.0.0 | 1.0.0 | 1.0.0 | | Livy | 0.7.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | | MXNet | 1.5.1 | 1.5.1 | 1.5.1 | 1.5.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.2.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.232 | 0.227 | 0.227 | 0.227 | | Spark | 2.4.5-amzn-0 | 2.4.4 | 2.4.4 | 2.4.4 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.2 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.30.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.30.0. Le modifiche sono relative alla versione 5.29.0. Data del rilascio iniziale: 13 marzo 2020 Ultimo aggiornamento: 25 giugno 2020 **Aggiornamenti** + Aggiornato alla versione 1.11.759 AWS SDK per Java + Amazon SageMaker Spark SDK aggiornato alla versione 1.3.0 + Aggiornato EMR Record Server alla versione 1.6.0 + Flink aggiornato alla versione 1.10.0 + Aggiornato Ganglia alla versione 3.7.2 + Aggiornato alla versione 1.4.13 HBase + Aggiornato Hudi alla versione 0.5.2-incubating + Hue aggiornato alla versione 4.6.0 + Aggiornato alla versione 1.1.0 JupyterHub + Livy aggiornato alla versione 0.7.0-incubating + Aggiornato Oozie alla versione 5.2.0 + Presto aggiornato alla versione 0.232 + Aggiornato Spark alla versione 2.4.5 + Connettori e driver aggiornati: connettore Amazon Glue 1.12.0; connettore Amazon Kinesis 3.5.0; connettore EMR DynamoDB 4.14.0 **Nuove funzionalità** + **EMR Notebooks**: se utilizzato con cluster EMR creati con 5.30.0, i kernel di EMR Notebooks vengono eseguiti sul cluster. Ciò migliora le prestazioni dei notebook e consente di installare e personalizzare i kernel. Puoi anche installare librerie Python sul nodo primario del cluster. Per ulteriori informazioni, consulta l'argomento relativo all'[installazione e l'utilizzo di kernel e librerie](https://docs.aws.amazon.com//emr/latest/ManagementGuide/emr-managed-notebooks-installing-libraries-and-kernels.html) nella *Guida alla gestione di EMR*. + **Dimensionamento gestito**: con la versione 5.30.0 e successive di Amazon EMR, puoi abilitare il dimensionamento gestito da EMR per aumentare o diminuire automaticamente il numero di istanze o unità nel cluster in base al carico di lavoro. Amazon EMR valuta continuamente i parametri dei cluster per prendere decisioni di dimensionamento che ottimizzano i cluster in termini di costi e velocità. Per maggiori informazioni, consulta [Dimensionamento delle risorse del cluster](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-scale-on-demand.html) nella *Guida alla gestione di Amazon EMR*. + **Crittografa i file di log archiviati in Amazon** S3: con Amazon EMR versione 5.30.0 e successive, puoi crittografare i file di log archiviati in Amazon S3 con una chiave gestita dal cliente. AWS KMS Per ulteriori informazioni, consulta [Crittografia dei file di log archiviati in Amazon S3](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-debugging.html#emr-log-encryption) nella *Guida alla gestione di Amazon EMR*. + **Supporto di Amazon Linux 2**: nella versione EMR 5.30.0 e successive, EMR utilizza il sistema operativo Amazon Linux 2. La nuova versione personalizzata AMIs (Amazon Machine Image) deve essere basata sull'AMI Amazon Linux 2. Per ulteriori informazioni, consulta [Utilizzo di un AMI personalizzato](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-custom-ami.html). + **Scalabilità automatica Presto con tolleranza**: i cluster EMR che usano 5.30.0 possono essere impostati con un periodo di timeout di scalabilità automatica che consente alle attività Presto di terminare l'esecuzione prima che il loro nodo venga disattivato. Per ulteriori informazioni, consulta [Utilizzo della scalabilità automatica Presto con disattivazione con tolleranza](presto-graceful-autoscale.md). + **Creazione di parchi istanze con nuova opzione di strategia di allocazione**: una nuova opzione di strategia di allocazione è disponibile in EMR versione 5.12.1 e successive. Offre un provisioning dei cluster più rapido, un'allocazione di istanze Spot più accurata e una minore interruzione delle istanze Spot. Sono necessari aggiornamenti ai ruoli di servizio EMR non predefiniti. Consulta [Configurazione di parchi istanze](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-instance-fleet.html). + **Comandi sudo systemctl stop e sudo systemctl start**: nella versione EMR 5.30.0 e successive, le quali usano il sistema operativo Amazon Linux 2 OS, EMR utilizza i comandi `sudo systemctl stop` e `sudo systemctl start` per riavviare i servizi. Per ulteriori informazioni, consulta [Come riavviare un servizio in Amazon EMR?](https://aws.amazon.com/premiumsupport/knowledge-center/restart-service-emr/). **Modifiche, miglioramenti e problemi risolti** + EMR versione 5.30.0 non installa Ganglia per impostazione predefinita. È possibile selezionare esplicitamente Ganglia da installare quando si crea un cluster. + Ottimizzazione delle prestazioni di Spark. + Ottimizzazione delle prestazioni di Presto. + Python 3 è l'impostazione predefinita per Amazon EMR 5.30.0 e versioni successive. + Il gruppo di sicurezza gestito predefinito per l'accesso al servizio nelle sottoreti private è stato aggiornato con nuove regole. Se si utilizza un gruppo di sicurezza personalizzato per l'accesso al servizio, è necessario includere le stesse regole del gruppo di sicurezza gestito predefinito. Per ulteriori informazioni, consulta [Gruppo di sicurezza gestito da Amazon EMR per l'accesso al servizio (sottoreti private)](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-man-sec-groups.html#emr-sg-elasticmapreduce-sa-private). Se si utilizza un ruolo di servizio personalizzato per Amazon EMR, è necessario concedere l'autorizzazione a `ec2:describeSecurityGroups` per consentire a EMR di convalidare se i gruppi di sicurezza sono stati creati correttamente. Se si utilizza `EMR_DefaultRole`, questa autorizzazione è già inclusa nella policy gestita di default. **Problemi noti** + **Limite «Numero massimo di file aperti» inferiore rispetto alle versioni precedenti AL2 [corretto nelle versioni più recenti].** Versioni di Amazon EMR: emr-5.30.x, emr-5.31.0, emr-5.32.0, emr-6.0.0, emr-6.1.0 ed emr-6.2.0 si basano su versioni precedenti di Amazon Linux 2 (), che hanno un'impostazione ulimit inferiore per «Max open files» quando i cluster Amazon EMR vengono creati con l'AMI predefinita. AL2 Le versioni di Amazon EMR 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 e successive includono una correzione permanente con un'impostazione "Max open files" (Max. file aperti). Le versioni con il limite minimo del file aperto causano l'errore "Too many open files" (Troppi file aperti) durante l'invio del processo Spark. Nelle versioni interessate, l'AMI predefinita di Amazon EMR ha un'impostazione ulimit di default di 4096 per "Max open files" (Max. file aperti), che è inferiore al limite di file 65536 nell'ultima AMI di Amazon Linux 2. L'impostazione ulimit inferiore per "Max open files (Max. file aperti)" causa il fallimento del processo Spark quando il driver e l'executor Spark tentano di aprire più di 4096 file. Per risolvere il problema, Amazon EMR dispone di uno script dell'operazione bootstrap (BA) che regola l'impostazione ulimit durante la creazione del cluster. Se utilizzi una versione di Amazon EMR meno recente che non ha la soluzione permanente per questo problema, la seguente soluzione alternativa consente di impostare esplicitamente l'ulimit del controller dell'istanza su un massimo di 65536 file. **Impostazione di un ulimit esplicito dalla riga di comando** 1. Modifica `/etc/systemd/system/instance-controller.service` per aggiungere i seguenti parametri alla sezione Servizio. `LimitNOFILE=65536` `LimitNPROC=65536` 1. Riavvia InstanceController `$ sudo systemctl daemon-reload` `$ sudo systemctl restart instance-controller` **Impostazione di un ulimit usando l'operazione di bootstrap (BA)** È inoltre possibile utilizzare uno script dell'operazione di bootstrap (BA) per configurare l'ulimit del controller di istanza a 65536 file durante la creazione del cluster. ``` #!/bin/bash for user in hadoop spark hive; do sudo tee /etc/security/limits.d/$user.conf << EOF $user - nofile 65536 $user - nproc 65536 EOF done for proc in instancecontroller logpusher; do sudo mkdir -p /etc/systemd/system/$proc.service.d/ sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF [Service] LimitNOFILE=65536 LimitNPROC=65536 EOF pid=$(pgrep -f aws157.$proc.Main) sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535 done sudo systemctl daemon-reload ``` + **Dimensionamento gestito** Le operazioni di dimensionamento gestito su cluster 5.30.0 e 5.30.1 senza Presto installato possono causare errori delle applicazioni o far sì che un gruppo di istanze o un parco istanze uniforme mantenga lo stato `ARRESTED`, in particolare quando un'operazione di riduzione è seguita rapidamente da un'operazione di aumento. Come soluzione alternativa, scegli Presto come applicazione da installare quando crei un cluster con Amazon EMR rilasci 5.30.0 e 5.30.1, anche se il tuo processo non richiede Presto. + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. + Il motore di database predefinito per Hue 4.6.0 è SQLite, che causa problemi quando si tenta di utilizzare Hue con un database esterno. Per risolvere questo problema, imposta `engine` nella tua classificazione di configurazione `hue-ini` su `mysql`. Questo problema è stato risolto nella versione 5.30.1 di Amazon EMR. + Se utilizzi Spark con la formattazione della posizione delle partizioni Hive per leggere i dati in Amazon S3 ed esegui Spark nei rilasci di Amazon EMR da 5.30.0 a 5.36.0 e da 6.2.0 a 6.9.0, potresti riscontrare un problema che impedisce al cluster di leggere correttamente i dati. Ciò può accadere se le partizioni presentano tutte le seguenti caratteristiche: + Due o più partizioni vengono scansionate dalla stessa tabella. + Almeno un percorso di directory di partizione è il prefisso di almeno un altro percorso della directory di partizione, ad esempio `s3://bucket/table/p=a` è un prefisso di `s3://bucket/table/p=a b`. + Il primo carattere che segue il prefisso nell'altra directory di partizione ha un valore UTF-8 inferiore al carattere `/` (U\$1002F). Ad esempio, rientra in questa categoria il carattere dello spazio (U\$10020) che compare tra a e b in `s3://bucket/table/p=a b`. Tieni presente che esistono altri 14 caratteri non di controllo: `!"#$%&‘()*+,-`. Per ulteriori informazioni, consulta la sezione [UTF-8 encoding table and Unicode characters](https://www.utf8-chartable.de/) (Tabella di codifica UTF-8 e caratteri Unicode). Per ovviare a questo problema, imposta la configurazione di `spark.sql.sources.fastS3PartitionDiscovery.enabled` su `false` nella classificazione di `spark-defaults`. ## Versioni dei componenti 5.30.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.3.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.14.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.13.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.5.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-notebook-env | 1.0.0 | Ambiente Conda per Notebook EMR | | emr-s3-dist-cp | 2.14.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.5.0 | Connettore di EMR S3Select | | emrfs | 2.40.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.10.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-6 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-6 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-6 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-6 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-6 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-6 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-6 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-6 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-6 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-6 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-6 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.13 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.13 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.13 | HBase client da riga di comando. | | hbase-rest-server | 1.4.13 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.13 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.6-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.6-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.6-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.6-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.6-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.6-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.6-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.5.2-incubating | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-presto | 0.5.2-incubating | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.6.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.1.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.7.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.5.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mariadb-server | 5.5.64 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.2.0 | Client a riga di comando Oozie. | | oozie-server | 5.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.232 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.232 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.232 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.3 | The R Project for Statistical Computing | | ranger-kms-server | 1.2.0 | Sistema di gestione delle chiavi Apache Ranger | | spark-client | 2.4.5-amzn-0 | Client a riga di comando Spark. | | spark-history-server | 2.4.5-amzn-0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.5-amzn-0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.5-amzn-0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.14.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.30.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.30.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | hudi-env | Modifica i valori nell'ambiente Hudi. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.29.0 di Amazon EMR emr-5.29.0 ## Versioni dell'applicazione 5.29.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/) [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.29.0 | emr-5.28.1 | emr-5.28.0 | emr-5.27.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.682 | 1,11,659 | 1,11,659 | 1,11,615 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.9.1 | 1.9.0 | 1.9.0 | 1.8.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.10 | 1.4.10 | 1.4.10 | 1.4.10 | | HCatalog | 2.3.6-amzn-1 | 2.3.6-amzn-0 | 2.3.6-amzn-0 | 2.3.5-amzn-1 | | Hadoop | 2.8.5-amzn-5 | 2.8.5-amzn-5 | 2.8.5-amzn-5 | 2.8.5-amzn-4 | | Hive | 2.3.6-amzn-1 | 2.3.6-amzn-0 | 2.3.6-amzn-0 | 2.3.5-amzn-1 | | Hudi | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | - | | Hue | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | | Livy | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | | MXNet | 1.5.1 | 1.5.1 | 1.5.1 | 1.4.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.2- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.227 | 0.227 | 0.227 | 0.224 | | Spark | 2.4.4 | 2.4.4 | 2.4.4 | 2.4.4 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.2 | 0.8.2 | 0.8.1 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note del rilascio 5.29.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.29.0. Le modifiche sono relative alla versione 5.28.1. Data del rilascio iniziale: 17 gennaio 2020 **Aggiornamenti** + Aggiornato alla versione 1.11.682 AWS SDK per Java + Hive aggiornato alla versione 2.3.6 + Flink aggiornato alla versione 1.9.1 + EmrFS aggiornato alla versione 2.38.0 + EMR DynamoDB Connector aggiornato alla versione 4.13.0 **Modifiche, miglioramenti e problemi risolti** + Spark + Ottimizzazione delle prestazioni di Spark. + EMRFS + La Guida alla gestione aggiorna le impostazioni predefinite di emrfs-site.xml per una visualizzazione coerente. **Problemi noti** + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.29.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.6 | SageMaker SDK Amazon Spark | | emr-ddb | 4.13.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.12.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.13.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.4.0 | Connettore di EMR S3Select | | emrfs | 2.38.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.9.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-5 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-5 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-5 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-5 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-5 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-5 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-5 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-5 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-5 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-5 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-5 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.10 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.10 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.10 | HBase client da riga di comando. | | hbase-rest-server | 1.4.10 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.10 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.6-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.6-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.6-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.6-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.6-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.6-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.6-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.5.0-incubating | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-presto | 0.5.0-incubating | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.4.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.0.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.6.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.5.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.227 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.227 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.227 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.4 | Client a riga di comando Spark. | | spark-history-server | 2.4.4 | Interfaccia utente Web per la visualizzazione di eventi registrati per il ciclo di vita di un'applicazione Spark completata. | | spark-on-yarn | 2.4.4 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.4 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.14.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.29.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.29.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.28.1 di Amazon EMR emr-5.28.1 ## Versioni dell'applicazione 5.28.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/) [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.28.1 | emr-5.28.0 | emr-5.27.1 | emr-5.27.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.659 | 1,11,659 | 1,11,615 | 1,11,615 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.9.0 | 1.9.0 | 1.8.1 | 1.8.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.10 | 1.4.10 | 1.4.10 | 1.4.10 | | HCatalog | 2.3.6-amzn-0 | 2.3.6-amzn-0 | 2.3.5-amzn-1 | 2.3.5-amzn-1 | | Hadoop | 2.8.5-amzn-5 | 2.8.5-amzn-5 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | | Hive | 2.3.6-amzn-0 | 2.3.6-amzn-0 | 2.3.5-amzn-1 | 2.3.5-amzn-1 | | Hudi | 0.5.0-incubating | 0.5.0-incubating | - | - | | Hue | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | | Livy | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | | MXNet | 1.5.1 | 1.5.1 | 1.4.0 | 1.4.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.3- -1,4 HBase | 4.14.2- -1,4 HBase | 4.14.2- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.227 | 0.227 | 0.224 | 0.224 | | Spark | 2.4.4 | 2.4.4 | 2.4.4 | 2.4.4 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.14.0 | 1.14.0 | 1.14.0 | 1.14.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.2 | 0.8.1 | 0.8.1 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.28.1 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.28.1. Le modifiche sono relative alla versione 5.28.0. Data del rilascio iniziale: 10 gennaio 2020 **Modifiche, miglioramenti e problemi risolti** + Spark + Risolti i problemi di compatibilità di Spark. + CloudWatch Metriche + È stata corretta la pubblicazione di Amazon CloudWatch Metrics su un cluster EMR con più nodi primari. + Messaggio di log disattivato + Messaggio di falso log disabilitato, "[...] utilizzando la vecchia versione (<4.5.8) del client http Apache". **Problemi noti** + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.28.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.6 | SageMaker SDK Amazon Spark | | emr-ddb | 4.12.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.11.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.13.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.3.0 | Connettore di EMR S3Select | | emrfs | 2.37.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.9.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-5 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-5 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-5 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-5 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-5 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-5 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-5 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-5 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-5 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-5 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-5 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.10 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.10 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.10 | HBase client da riga di comando. | | hbase-rest-server | 1.4.10 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.10 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.6-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.6-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.6-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.6-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.6-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.6-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.6-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.5.0-incubating | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-presto | 0.5.0-incubating | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.4.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.0.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.6.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.5.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.227 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.227 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.227 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.4 | Client a riga di comando Spark. | | spark-history-server | 2.4.4 | Interfaccia utente Web per la visualizzazione di eventi registrati per il ciclo di vita di un'applicazione Spark completata. | | spark-on-yarn | 2.4.4 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.4 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.14.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.28.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.28.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.28.0 di Amazon EMR emr-5.28.0 ## Versioni dell'applicazione 5.28.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/) [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.28.0 | emr-5.27.1 | emr-5.27.0 | emr-5.26.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.659 | 1,11,615 | 1,11,615 | 1,11,595 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.9.0 | 1.8.1 | 1.8.1 | 1.8.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.10 | 1.4.10 | 1.4.10 | 1.4.10 | | HCatalog | 2.3.6-amzn-0 | 2.3.5-amzn-1 | 2.3.5-amzn-1 | 2.3.5-amzn-0 | | Hadoop | 2.8.5-amzn-5 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | | Hive | 2.3.6-amzn-0 | 2.3.5-amzn-1 | 2.3.5-amzn-1 | 2.3.5-amzn-0 | | Hudi | 0.5.0-incubating | - | - | - | | Hue | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.0.0 | 1.0.0 | 1.0.0 | 0.9.6 | | Livy | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | | MXNet | 1.5.1 | 1.4.0 | 1.4.0 | 1.4.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.3- -1,4 HBase | 4.14.2- -1,4 HBase | 4.14.2- -1,4 HBase | 4.14.2- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.227 | 0.224 | 0.224 | 0.220 | | Spark | 2.4.4 | 2.4.4 | 2.4.4 | 2.4.3 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.14.0 | 1.14.0 | 1.14.0 | 1.13.1 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.2 | 0.8.1 | 0.8.1 | 0.8.1 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.28.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.28.0. Le modifiche sono relative alla versione 5.27.0. Data del rilascio iniziale: 12 novembre 2019 **Aggiornamenti** + Flink aggiornato alla versione 1.9.0 + Hive aggiornato alla versione 2.3.6 + Aggiornato alla versione 1.5.1 MXNet + Phoenix aggiornato alla versione 4.14.3 + Presto aggiornato alla versione 0.227 + Zeppelin aggiornato alla versione 0.8.2 **Nuove funzionalità** + [Apache Hudi](https://hudi.apache.org/) è ora disponibile per Amazon EMR per l'installazione durante la creazione di un cluster. Per ulteriori informazioni, consulta [Hudi](emr-hudi.md). + (25 novembre 2019) È ora possibile scegliere di eseguire più fasi in parallelo per migliorare l'utilizzo dei cluster e risparmiare sui costi. È anche possibile annullare sia le fasi in attesa che quelle in esecuzione. Per ulteriori informazioni, consulta [Utilizzare i passaggi utilizzando la console AWS CLI and](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-work-with-steps.html). + (3 dicembre 2019) È ora possibile creare ed eseguire cluster EMR su. AWS Outposts AWS Outposts abilita AWS servizi, infrastrutture e modelli operativi nativi nelle strutture locali. Negli AWS Outposts ambienti, puoi utilizzare gli stessi AWS APIs strumenti e la stessa infrastruttura che usi nel AWS cloud. Per ulteriori informazioni, vedere [Clusters EMR su. AWS Outposts](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-outposts.html) + (11 marzo 2020) A partire dalla versione 5.28.0 di Amazon EMR, puoi creare ed eseguire cluster Amazon EMR su una sottorete Local AWS Zones come estensione logica di una regione che supporta Local Zones. AWS Una zona locale consente alle funzionalità di Amazon EMR e a un sottoinsieme di AWS servizi, come i servizi di elaborazione e storage, di essere posizionati più vicino agli utenti, fornendo un accesso a latenza molto bassa alle applicazioni eseguite localmente. Per un elenco delle zone locali disponibili, consulta [Local Zones AWS](https://aws.amazon.com/about-aws/global-infrastructure/localzones/). Per informazioni sull'accesso alle AWS Local Zones disponibili, vedere [Regions, Availability Zones e Local Zones](https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/using-regions-availability-zones.html). Attualmente, Local Zones non supporta Amazon EMR Notebooks e non supporta connessioni effettuate direttamente ad Amazon EMR utilizzando l'interfaccia endpoint VPC (AWS PrivateLink). **Modifiche, miglioramenti e problemi risolti** + Ampliato il supporto delle applicazioni per i cluster a elevata disponibilità + Per ulteriori informazioni, consulta la sezione [Applicazioni supportate in un cluster EMR con più nodi primari](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-ha-applications.html#emr-plan-ha-applications-list) nella *Guida alla gestione di Amazon EMR*. + Spark + Ottimizzazione delle prestazioni + Hive + Ottimizzazione delle prestazioni + Presto + Ottimizzazione delle prestazioni **Problemi noti** + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.28.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.6 | SageMaker SDK Amazon Spark | | emr-ddb | 4.12.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.11.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.13.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.3.0 | Connettore di EMR S3Select | | emrfs | 2.37.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.9.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-5 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-5 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-5 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-5 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-5 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-5 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-5 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-5 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-5 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-5 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-5 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.10 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.10 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.10 | HBase client da riga di comando. | | hbase-rest-server | 1.4.10 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.10 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.6-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.6-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.6-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.6-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.6-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.6-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.6-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hudi | 0.5.0-incubating | Framework di elaborazione incrementale per alimentare la pipiline dei dati a bassa latenza e alta efficienza. | | hudi-presto | 0.5.0-incubating | Libreria bundle per eseguire Presto con Hudi. | | hue-server | 4.4.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.0.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.6.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.5.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.3- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.3- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.227 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.227 | Servizio per l'esecuzione di parti di una query. | | presto-client | 0.227 | Presto client della riga di comando che viene installato su master di standby di un cluster HA dove server Presto non viene avviato. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.4 | Client a riga di comando Spark. | | spark-history-server | 2.4.4 | Interfaccia utente Web per la visualizzazione di eventi registrati per il ciclo di vita di un'applicazione Spark completata. | | spark-on-yarn | 2.4.4 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.4 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.14.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.28.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.28.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.27.1 di Amazon EMR emr-5.27.1 ## Versioni dell'applicazione 5.27.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.27.1 | emr-5.27.0 | emr-5.26.0 | emr-5.25.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.615 | 1,11,615 | 1,11,595 | 1,11,566 | | Python | 2,7, 3,6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.8.1 | 1.8.1 | 1.8.0 | 1.8.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.10 | 1.4.10 | 1.4.10 | 1.4.9 | | HCatalog | 2.3.5-amzn-1 | 2.3.5-amzn-1 | 2.3.5-amzn-0 | 2.3.5-amzn-0 | | Hadoop | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | | Hive | 2.3.5-amzn-1 | 2.3.5-amzn-1 | 2.3.5-amzn-0 | 2.3.5-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.0.0 | 1.0.0 | 0.9.6 | 0.9.6 | | Livy | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | | MXNet | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.2- -1,4 HBase | 4.14.2- -1,4 HBase | 4.14.2- -1,4 HBase | 4.14.1- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.224 | 0.224 | 0.220 | 0.220 | | Spark | 2.4.4 | 2.4.4 | 2.4.3 | 2.4.3 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.14.0 | 1.14.0 | 1.13.1 | 1.13.1 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | ## Note di rilascio 5.27.1 Questo è un rilascio di patch. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. Stato del supporto di Instance Metadata Service (IMDS) V2: i componenti di Amazon EMR 5.23.1, 5.27.1 e 5.32 o versioni successive vengono utilizzati per tutte le chiamate IMDS. IMDSv2 Per le chiamate IMDS nel codice dell'applicazione, puoi utilizzare entrambi IMDSv1 e IMDSv2 oppure configurare l'IMDS in modo che venga utilizzato solo per una maggiore sicurezza. IMDSv2 Per le altre versioni 5.x EMR, la IMDSv1 disabilitazione causa un errore di avvio del cluster. ## Versioni dei componenti 5.27.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.4 | SageMaker SDK Amazon Spark | | emr-ddb | 4.12.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.11.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.13.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.3.0 | Connettore di EMR S3Select | | emrfs | 2.36.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.8.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-4 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.10 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.10 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.10 | HBase client da riga di comando. | | hbase-rest-server | 1.4.10 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.10 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.5-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.5-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.5-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.5-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.5-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.5-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.5-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.4.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.0.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.6.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.4.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.2- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.2- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.224 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.224 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.4 | Client a riga di comando Spark. | | spark-history-server | 2.4.4 | Interfaccia utente Web per la visualizzazione di eventi registrati per il ciclo di vita di un'applicazione Spark completata. | | spark-on-yarn | 2.4.4 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.4 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.14.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.27.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.27.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.27.0 di Amazon EMR emr-5.27.0 ## Versioni dell'applicazione 5.27.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.27.0 | emr-5.26.0 | emr-5.25.0 | emr-5.24.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.615 | 1,11,595 | 1,11,566 | 1,11,546 | | Python | 2,7, 3,6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.8.1 | 1.8.0 | 1.8.0 | 1.8.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.10 | 1.4.10 | 1.4.9 | 1.4.9 | | HCatalog | 2.3.5-amzn-1 | 2.3.5-amzn-0 | 2.3.5-amzn-0 | 2.3.4-amzn-2 | | Hadoop | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | | Hive | 2.3.5-amzn-1 | 2.3.5-amzn-0 | 2.3.5-amzn-0 | 2.3.4-amzn-2 | | Hudi | - | - | - | - | | Hue | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 1.0.0 | 0.9.6 | 0.9.6 | 0.9.6 | | Livy | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | | MXNet | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.2- -1,4 HBase | 4.14.2- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.224 | 0.220 | 0.220 | 0.219 | | Spark | 2.4.4 | 2.4.3 | 2.4.3 | 2.4.2 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.14.0 | 1.13.1 | 1.13.1 | 1.12.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.13 | ## Note del rilascio 5.27.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.27.0. Le modifiche sono relative alla versione 5.26.0. Data del rilascio iniziale: 23 settembre 2019 **Aggiornamenti** + AWS SDK per Java 1.11.615 + Flink 1.8.1 + JupyterHub 1,0.0 + Spark 2.4.4 + TensorFlow 1.14.0 + Connettori e driver: + DynamoDB Connector 4.12.0 **Nuove funzionalità** + (24 ottobre 2019) Le seguenti nuove caratteristiche in EMR Notebooks sono disponibili con tutte le versioni di Amazon EMR + Ora è possibile associare repository Git ai notebook EMR per archiviare i notebook in un ambiente controllato dalla versione. È possibile condividere il codice con i peer e riutilizzare i notebook Jupyter esistenti tramite repository Git remoti. Per ulteriori informazioni, consulta [Associazione di repository Git ad Amazon EMR Notebooks](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-git-repo.html) nella *Guida alla gestione di Amazon EMR*. + L'[utility nbdime](https://github.com/jupyter/nbdime) è ora disponibile in EMR Notebooks per semplificare il confronto e la fusione di notebook. + I notebook EMR ora supportano. JupyterLab JupyterLab è un ambiente di sviluppo interattivo basato sul Web completamente compatibile con i notebook Jupyter. Ora puoi scegliere di aprire il tuo notebook in uno o nell'editor di notebook Jupyter. JupyterLab + (30 ottobre 2019) Con Amazon EMR versione 5.25.0 e successive, è possibile connettersi all'interfaccia utente di Spark History Server dalla pagina **Summary (Riepilogo)** del cluster o dalla scheda **Application history (Cronologia applicazioni)** nella console. Anziché configurare un proxy Web tramite una connessione SSH, puoi accedere rapidamente all'interfaccia utente del server della cronologia Spark per visualizzare i parametri dell'applicazione e accedere ai file di log pertinenti per cluster attivi e terminati. Per ulteriori informazioni, consulta [Accesso fuori cluster alle interfacce utente dell'applicazione persistente](https://docs.aws.amazon.com/emr/latest/ManagementGuide/app-history-spark-UI.html) nella *Guida alla gestione di Amazon EMR*. **Modifiche, miglioramenti e problemi risolti** + Cluster Amazon EMR con più nodi primari + È possibile installare ed eseguire Flink su un cluster Amazon EMR con più nodi primari. Per ulteriori informazioni, consulta [Applicazioni e funzionalità supportate](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-ha-applications.html). + È possibile configurare la crittografia trasparente HDFS su un cluster Amazon EMR con più nodi primari. Per maggiori informazioni, consulta la sezione [Crittografia trasparente HDFS su cluster EMR con più nodi primari](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-encryption-tdehdfs.html#emr-hadoop-kms-multi-master). + È ora possibile modificare la configurazione delle applicazioni in esecuzione su un cluster Amazon EMR con più nodi primari. Per ulteriori informazioni, consulta [Specifica di una configurazione per un gruppo di istanze in un cluster in esecuzione](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps-running-cluster.html). + Connettore Amazon EMR-DynamoDB + Adesso, il connettore Amazon EMR-DynamoDB supporta i seguenti tipi di dati DynamoDB: booleano, elenco, mappa, elemento, null. Per ulteriori informazioni, consulta [Impostazione di una tabella Hive per l'esecuzione dei comandi Hive](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/EMR_Interactive_Hive.html). **Problemi noti** + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.27.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.4 | SageMaker SDK Amazon Spark | | emr-ddb | 4.12.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.11.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.13.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.3.0 | Connettore di EMR S3Select | | emrfs | 2.36.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.8.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-4 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.10 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.10 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.10 | HBase client da riga di comando. | | hbase-rest-server | 1.4.10 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.10 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.5-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.5-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.5-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.5-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.5-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.5-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.5-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.4.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 1.0.0 | Server multi-utente per notebook Jupyter | | livy-server | 0.6.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.4.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.2- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.2- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.224 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.224 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.4 | Client a riga di comando Spark. | | spark-history-server | 2.4.4 | Interfaccia utente Web per la visualizzazione di eventi registrati per il ciclo di vita di un'applicazione Spark completata. | | spark-on-yarn | 2.4.4 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.4 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.14.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.27.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.27.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | ranger-kms-dbks-site | Modifica i valori nel file dbks-site.xml di Ranger KMS. | | ranger-kms-site | Modifica i valori nel ranger-kms-site file.xml di Ranger KMS. | | ranger-kms-env | Modifica i valori nell'ambiente Ranger KMS. | | ranger-kms-log4j | Modifica i valori nel file kms-log4j.properties di Ranger KMS. | | ranger-kms-db-ca | Modifica i valori per il file CA su S3 per la connessione SSL di MySQL con Ranger KMS. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.26.0 di Amazon EMR emr-5.26.0 ## Versioni dell'applicazione 5.26.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.26.0 | emr-5.25.0 | emr-5.24.1 | emr-5.24.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.595 | 1,11,566 | 1,11,546 | 1,11,546 | | Python | 2,7, 3,6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.8.0 | 1.8.0 | 1.8.0 | 1.8.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.10 | 1.4.9 | 1.4.9 | 1.4.9 | | HCatalog | 2.3.5-amzn-0 | 2.3.5-amzn-0 | 2.3.4-amzn-2 | 2.3.4-amzn-2 | | Hadoop | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | | Hive | 2.3.5-amzn-0 | 2.3.5-amzn-0 | 2.3.4-amzn-2 | 2.3.4-amzn-2 | | Hudi | - | - | - | - | | Hue | 4.4.0 | 4.4.0 | 4.4.0 | 4.4.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.6 | 0.9.6 | 0.9.6 | 0.9.6 | | Livy | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | | MXNet | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.2- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.220 | 0.220 | 0.219 | 0.219 | | Spark | 2.4.3 | 2.4.3 | 2.4.2 | 2.4.2 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.13.1 | 1.13.1 | 1.12.0 | 1.12.0 | | Tez | 0.9.2 | 0.9.2 | 0.9.1 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | ZooKeeper | 3.4.14 | 3.4.14 | 3.4.13 | 3.4.13 | ## Note del rilascio 5.26.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.26.0. Le modifiche sono relative alla versione 5.25.0. Data del rilascio iniziale: 8 agosto 2019 Ultimo aggiornamento: 19 agosto 2019 **Aggiornamenti** + AWS SDK per Java 1,11.595 + HBase 1,4,10 + Phoenix 4.14.2 + Connettori e driver: + DynamoDB Connector 4.11.0 + MariaDB Connector 2.4.2 + Driver JDBC Amazon Redshift 1.2.32.1056 **Nuove funzionalità** + (Beta) Con Amazon EMR 5.26.0 puoi avviare un cluster che si integra con Lake Formation. Questa integrazione fornisce un accesso granulare a livello di colonna a database e tabelle nel Glue Data Catalog. AWS Inoltre, consente l'accesso federato single sign-on agli EMR Notebooks o Apache Zeppelin da un sistema di identità aziendale. Per ulteriori informazioni, consulta [Integrazione di Amazon EMR AWS Lake Formation con (](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-lake-formation.html)Beta). + (19 agosto 2019) Il blocco dell'accesso pubblico in Amazon EMR è ora disponibile con tutti i rilasci di Amazon EMR che supportano i gruppi di sicurezza. Il blocco dell'accesso pubblico è un'impostazione a livello di account applicata a ciascuna regione. AWS Il blocco dell'accesso pubblico impedisce l'avvio di un cluster quando un gruppo di sicurezza associato al cluster dispone di una regola che consente il traffico in entrata da IPv4 0.0.0.0/0 o IPv6 : :/0 (accesso pubblico) su una porta, a meno che una porta non sia specificata come eccezione. La porta 22 è un'eccezione per impostazione predefinita. Per ulteriori informazioni, consulta [Utilizzo del blocco dell'accesso pubblico in Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-block-public-access.html) nella *Guida alla gestione di Amazon EMR*. **Modifiche, miglioramenti e problemi risolti** + Notebook EMR + Con EMR 5.26.0 e versioni successive, EMR Notebooks supporta librerie Python con ambito notebook oltre alle librerie Python predefinite. È possibile installare librerie con ambito notebook dall'editor di notebook senza dover ricreare un cluster o ricollegare un notebook a un cluster. Le librerie con ambito notebook vengono create in un ambiente Python virtuale in modo da essere applicate esclusivamente alla sessione di notebook corrente. Ciò consente di isolare le dipendenze dei notebook. Per ulteriori informazioni, consulta [Utilizzo di librerie con ambito notebook](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-notebooks-custom-libraries-limitations.html) nella *Guida alla gestione di Amazon EMR*. + EMRFS + È possibile abilitare una funzionalità di ETag verifica (Beta) impostando su. `fs.s3.consistent.metadata.etag.verification.enabled` `true` Con questa funzionalità, EMRFS utilizza Amazon ETags S3 per verificare che gli oggetti da leggere siano l'ultima versione disponibile. Questa funzionalità è utile nei casi d' read-after-updateuso in cui i file su Amazon S3 vengono sovrascritti mantenendo lo stesso nome. Questa funzionalità ETag di verifica attualmente non funziona con S3 Select. Per ulteriori informazioni, consulta [Configurazione della visualizzazione coerente](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emrfs-configure-consistent-view.html). + Spark + Le seguenti ottimizzazioni sono ora abilitate per impostazione predefinita: eliminazione dinamica delle partizioni, DISTINCT prima di INTERSECT, miglioramenti nell'inferenza delle statistiche del piano SQL per JOIN seguita da query DISTINCT, appiattimento delle sottoquery scalari, riordino di join ottimizzato e join del filtro Bloom. Per ulteriori informazioni, consulta [Ottimizzazione delle prestazioni Spark](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-performance.html). + Migliorata la generazione del codice della fase per Sort Merge Join. + Migliorato il frammento di query e il riutilizzo delle sottoquery. + Miglioramenti per assegnare preventivamente gli executor all'avvio di Spark. + I join del filtro Bloom non vengono più applicati quando il lato più piccolo del join include un suggerimento per la trasmissione. + Tez + Risolto un problema con Tez. Ora l'interfaccia utente di Tez funziona su un cluster Amazon EMR con più nodi primari. **Problemi noti** + Le funzionalità migliorate di generazione del codice dell'intera fase per Sort Merge Join possono aumentare la pressione della memoria quando abilitate. Questa ottimizzazione migliora le prestazioni, ma può comportare tentativi multipli o errori di processo se `spark.yarn.executor.memoryOverheadFactor` non è regolato per fornire una memoria sufficiente. Per disabilitare questa funzionalità, imposta `spark.sql.sortMergeJoinExec.extendedCodegen.enabled` su false (falso). + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.26.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.4 | SageMaker SDK Amazon Spark | | emr-ddb | 4.11.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.10.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.12.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.3.0 | Connettore di EMR S3Select | | emrfs | 2.35.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.8.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-4 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.10 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.10 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.10 | HBase client da riga di comando. | | hbase-rest-server | 1.4.10 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.10 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.5-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.5-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.5-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.5-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.5-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.5-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.5-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.4.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.6 | Server multi-utente per notebook Jupyter | | livy-server | 0.6.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.4.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.2- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.2- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.220 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.220 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.3 | Client a riga di comando Spark. | | spark-history-server | 2.4.3 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.3 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.3 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.13.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.26.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.26.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.25.0 di Amazon EMR emr-5.25.0 ## Versioni dell'applicazione 5.25.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.25.0 | emr-5.24.1 | emr-5.24.0 | emr-5.23.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.566 | 1,11,546 | 1,11,546 | 1,11,519 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.8.0 | 1.8.0 | 1.8.0 | 1.7.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.9 | 1.4.9 | 1.4.9 | 1.4.9 | | HCatalog | 2.3.5-amzn-0 | 2.3.4-amzn-2 | 2.3.4-amzn-2 | 2.3.4-amzn-1 | | Hadoop | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-3 | | Hive | 2.3.5-amzn-0 | 2.3.4-amzn-2 | 2.3.4-amzn-2 | 2.3.4-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.4.0 | 4.4.0 | 4.4.0 | 4.3.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.6 | 0.9.6 | 0.9.6 | 0.9.4 | | Livy | 0.6.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 0.5.0-incubating | | MXNet | 1.4.0 | 1.4.0 | 1.4.0 | 1.3.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.220 | 0.219 | 0.219 | 0.215 | | Spark | 2.4.3 | 2.4.2 | 2.4.2 | 2.4.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.13.1 | 1.12.0 | 1.12.0 | 1.12.0 | | Tez | 0.9.2 | 0.9.1 | 0.9.1 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | ZooKeeper | 3.4.14 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note del rilascio 5.25.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.25.0. Le modifiche sono relative alla versione 5.24.1 Data del rilascio iniziale: 17 luglio 2019 Ultimo aggiornamento: 30 ottobre 2019 **Amazon EMR 5.25.0** **Aggiornamenti** + AWS SDK per Java 1.11.566 + Hive 2.3.5 + Presto 0.220 + Spark 2.4.3 + TensorFlow 1.13,1 + Tez 0.9.2 + ZooKeeper 3.4.14 **Nuove funzionalità** + (30 ottobre 2019) A partire da Amazon EMR versione 5.25.0, è possibile connettersi all'interfaccia utente di Spark History Server dalla pagina **Summary (Riepilogo)** del cluster o dalla scheda **Application history (Cronologia applicazioni)** nella console. Anziché configurare un proxy Web tramite una connessione SSH, puoi accedere rapidamente all'interfaccia utente del server della cronologia Spark per visualizzare i parametri dell'applicazione e accedere ai file di log pertinenti per cluster attivi e terminati. Per ulteriori informazioni, consulta [Accesso fuori cluster alle interfacce utente dell'applicazione persistente](https://docs.aws.amazon.com/emr/latest/ManagementGuide/app-history-spark-UI.html) nella *Guida alla gestione di Amazon EMR*. **Modifiche, miglioramenti e problemi risolti** + Spark + Migliorate le prestazioni di alcuni join utilizzando i filtri Bloom per pre-filtrare gli input. L'ottimizzazione è disattivata per impostazione predefinita e può essere abilitata impostando il parametro di configurazione Spark `spark.sql.bloomFilterJoin.enabled` su `true`. + Migliorate le prestazioni del raggruppamento per colonne di tipo stringa. + È stata migliorata la configurazione predefinita della memoria e dei core dell'esecutore Spark dei tipi di istanze R4 per i cluster senza installazione. HBase + Risolto un problema precedente correlato alla caratteristica di eliminazione delle partizioni dinamiche in cui la tabella eliminata deve trovarsi sul lato sinistro del join. + Migliorata l'ottimizzazione di DISTINCT prima di INTERSECT da applicare a casi aggiuntivi che coinvolgono alias. + Migliore inferenza delle statistiche del piano SQL per JOIN seguita da query DISTINCT. Questo miglioramento è disattivato per impostazione predefinita e può essere abilitato impostando il parametro di configurazione Spark `spark.sql.statsImprovements.enabled` su `true`. Questa ottimizzazione è richiesta dalla funzionalità Distinct prima di Intersect e verrà abilitata automaticamente quando `spark.sql.optimizer.distinctBeforeIntersect.enabled` è impostato su `true`. + Ordine di join ottimizzato in base alle dimensioni della tabella e ai filtri. Questa ottimizzazione è disattivata per impostazione predefinita e può essere abilitata impostando il parametro di configurazione Spark `spark.sql.optimizer.sizeBasedJoinReorder.enabled` su `true`. Per ulteriori informazioni, consulta [Ottimizzazione delle prestazioni Spark](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-performance.html). + EMRFS + L'impostazione EMRFS, `fs.s3.buckets.create.enabled`, è ora disabilitata per impostazione predefinita. A seguito di alcuni test, abbiamo scoperto che la disattivazione di questa impostazione migliora le prestazioni e impedisce la creazione involontaria di bucket S3. Se l'applicazione si basa su questa funzionalità, è possibile attivarla impostando la proprietà `fs.s3.buckets.create.enabled` su `true` nella classificazione di configurazione `emrfs-site`. Per informazioni, consulta [Specifica di una configurazione durante la creazione di un cluster](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps-create-cluster.html). + Miglioramenti della crittografia del disco locale e della crittografia S3 nelle configurazioni di sicurezza (5 agosto 2019) + Separate le impostazioni di crittografia Amazon S3 dalle impostazioni di crittografia del disco locale nella configurazione della protezione. + Aggiunta un'opzione per abilitare la crittografia EBS con la versione 5.24.0 e successive. Selezionando questa opzione, il volume del dispositivo di root viene crittografato oltre ai volumi di archiviazione. Le versioni precedenti richiedevano l'uso di un'AMI personalizzata per crittografare il volume del dispositivo di root. + Per ulteriori informazioni, consulta [Opzioni di crittografia](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-data-encryption-options.html) nella *Guida alla gestione di Amazon EMR*. **Problemi noti** + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.25.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.4 | SageMaker SDK Amazon Spark | | emr-ddb | 4.10.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.9.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.11.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.3.0 | Connettore di EMR S3Select | | emrfs | 2.34.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.8.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-4 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.9 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.9 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.9 | HBase client da riga di comando. | | hbase-rest-server | 1.4.9 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.9 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.5-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.5-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.5-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.5-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.5-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.5-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.5-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.4.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.6 | Server multi-utente per notebook Jupyter | | livy-server | 0.6.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.4.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.1- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.1- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.220 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.220 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.3 | Client a riga di comando Spark. | | spark-history-server | 2.4.3 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.3 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.3 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.13.1 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.2 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.14 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.14 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.25.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.25.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | recordserver-env | Modifica i valori nell'ambiente EMR. RecordServer | | recordserver-conf | Modificare i valori nel file erver.properties RecordServer di EMR. | | recordserver-log4j | Modifica i valori nel file log4j.properties RecordServer di EMR. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di Sqoop. OraOop | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.24.1 di Amazon EMR emr-5.24.1 ## Versioni dell'applicazione 5.24.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.24.1 | emr-5.24.0 | emr-5.23.1 | emr-5.23.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.546 | 1,11,546 | 1,11,519 | 1,11,519 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.8.0 | 1.8.0 | 1.7.1 | 1.7.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.9 | 1.4.9 | 1.4.9 | 1.4.9 | | HCatalog | 2.3.4-amzn-2 | 2.3.4-amzn-2 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | | Hadoop | 2.8.5-amzn-4 | 2.8.5-amzn-4 | 2.8.5-amzn-3 | 2.8.5-amzn-3 | | Hive | 2.3.4-amzn-2 | 2.3.4-amzn-2 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.4.0 | 4.4.0 | 4.3.0 | 4.3.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.6 | 0.9.6 | 0.9.4 | 0.9.4 | | Livy | 0.6.0-incubating | 0.6.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.4.0 | 1.4.0 | 1.3.1 | 1.3.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.219 | 0.219 | 0.215 | 0.215 | | Spark | 2.4.2 | 2.4.2 | 2.4.0 | 2.4.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | | Tez | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note di rilascio 5.24.1 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.24.1. Le modifiche sono relative alla versione 5.24.0. Data del rilascio iniziale: 26 giugno 2019 **Modifiche, miglioramenti e problemi risolti** + Aggiornata l'AMI predefinita Amazon Linux per Amazon EMR per importanti aggiornamenti di sicurezza del kernel Linux, inclusi i problemi di negazione del servizio TCP SACK ([AWS-2019-005](https://aws.amazon.com/security/security-bulletins/AWS-2019-005/)). **Problemi noti** + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.24.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.9.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.8.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.11.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.3.0 | Connettore di EMR S3Select | | emrfs | 2.33.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.8.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-4 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.9 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.9 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.9 | HBase client da riga di comando. | | hbase-rest-server | 1.4.9 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.9 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.4.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.6 | Server multi-utente per notebook Jupyter | | livy-server | 0.6.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.4.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.1- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.1- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.219 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.219 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.2 | Client a riga di comando Spark. | | spark-history-server | 2.4.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.24.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.24.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.24.0 di Amazon EMR emr-5.24.0 ## Versioni dell'applicazione 5.24.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.24.0 | emr-5.23.1 | emr-5.23.0 | emr-5.22.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.546 | 1,11,519 | 1,11,519 | 1,11,510 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.8.0 | 1.7.1 | 1.7.1 | 1.7.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.9 | 1.4.9 | 1.4.9 | 1.4.9 | | HCatalog | 2.3.4-amzn-2 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | | Hadoop | 2.8.5-amzn-4 | 2.8.5-amzn-3 | 2.8.5-amzn-3 | 2.8.5-amzn-2 | | Hive | 2.3.4-amzn-2 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.4.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.6 | 0.9.4 | 0.9.4 | 0.9.4 | | Livy | 0.6.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.4.0 | 1.3.1 | 1.3.1 | 1.3.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.1.0 | | Phoenix | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.219 | 0.215 | 0.215 | 0.215 | | Spark | 2.4.2 | 2.4.0 | 2.4.0 | 2.4.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | | Tez | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note di rilascio 5.24.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.24.0. Le modifiche sono relative alla versione 5.23.0. Data del rilascio iniziale: 11 giugno 2019 Ultimo aggiornamento: 5 agosto 2019 **Aggiornamenti** + Flink 1.8.0 + Hue 4.4.0 + JupyterHub 0.9.6 + Livy 0.6.0 + MxNet 14,0 + Presto 0.219 + Spark 2.4.2 + AWS SDK per Java 1,11,546 + Connettori e driver: + DynamoDB Connector 4.9.0 + MariaDB Connector 2.4.1 + Driver JDBC Amazon Redshift 1.2.27.1051 **Modifiche, miglioramenti e problemi risolti** + Spark + Aggiunta ottimizzazione per eliminare dinamicamente le partizioni. Per impostazione predefinita, l'ottimizzazione è disabilitata. Per abilitare questa opzione, occorre impostare il parametro di configurazione Spark `spark.sql.dynamicPartitionPruning.enabled` su `true`. + Migliorate le prestazioni delle query `INTERSECT`. Per impostazione predefinita, l'ottimizzazione è disabilitata. Per abilitare questa opzione, occorre impostare il parametro di configurazione Spark `spark.sql.optimizer.distinctBeforeIntersect.enabled` su `true`. + Aggiunta ottimizzazione per appiattire le sottoquery scalari con aggregati che utilizzano la stessa relazione. Per impostazione predefinita, l'ottimizzazione è disabilitata. Per abilitare questa opzione, occorre impostare il parametro di configurazione Spark `spark.sql.optimizer.flattenScalarSubqueriesWithAggregates.enabled` su `true`. + Migliorata la generazione del codice della fase. Per ulteriori informazioni, consulta [Ottimizzazione delle prestazioni Spark](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-performance.html). + Miglioramenti della crittografia del disco locale e della crittografia S3 nelle configurazioni di sicurezza (5 agosto 2019) + Separate le impostazioni di crittografia Amazon S3 dalle impostazioni di crittografia del disco locale nella configurazione della protezione. + Aggiunta un'opzione per abilitare la crittografia EBS. Selezionando questa opzione, il volume del dispositivo di root viene crittografato oltre ai volumi di archiviazione. Le versioni precedenti richiedevano l'uso di un'AMI personalizzata per crittografare il volume del dispositivo di root. + Per ulteriori informazioni, consulta [Opzioni di crittografia](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-data-encryption-options.html) nella *Guida alla gestione di Amazon EMR*. **Problemi noti** + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.24.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.9.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.8.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.11.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.3.0 | Connettore di EMR S3Select | | emrfs | 2.33.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.8.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-4 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.9 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.9 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.9 | HBase client da riga di comando. | | hbase-rest-server | 1.4.9 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.9 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.4.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.6 | Server multi-utente per notebook Jupyter | | livy-server | 0.6.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.4.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.1- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.1- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.219 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.219 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.2 | Client a riga di comando Spark. | | spark-history-server | 2.4.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.24.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.24.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Cambia i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.23.1 di Amazon EMR emr-5.23.1 ## Versioni dell'applicazione 5.23.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.23.1 | emr-5.23.0 | emr-5.22.0 | emr-5.21.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.519 | 1,11,519 | 1,11,510 | 1,11,4479 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.7.1 | 1.7.1 | 1.7.1 | 1.7.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.9 | 1.4.9 | 1.4.9 | 1.4.8 | | HCatalog | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-0 | | Hadoop | 2.8.5-amzn-3 | 2.8.5-amzn-3 | 2.8.5-amzn-2 | 2.8.5-amzn-1 | | Hive | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.1.0 | 5.0.0 | | Phoenix | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.215 | 0.215 | 0.215 | 0.215 | | Spark | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | | Tez | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.0 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note di rilascio 5.23.1 Questo è un rilascio di patch. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. Stato del supporto di Instance Metadata Service (IMDS) V2: i componenti di Amazon EMR 5.23.1, 5.27.1 e 5.32 o versioni successive vengono utilizzati per tutte le chiamate IMDS. IMDSv2 Per le chiamate IMDS nel codice dell'applicazione, puoi utilizzare entrambi IMDSv1 e IMDSv2 oppure configurare l'IMDS in modo che venga utilizzato solo per una maggiore sicurezza. IMDSv2 Per le altre versioni 5.x EMR, la IMDSv1 disabilitazione causa un errore di avvio del cluster. ## Versioni dei componenti 5.23.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.8.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.7.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.11.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.2.0 | Connettore di EMR S3Select | | emrfs | 2.32.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.7.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-3 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.9 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.9 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.9 | HBase client da riga di comando. | | hbase-rest-server | 1.4.9 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.9 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.3.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.1- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.1- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.215 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.215 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.0 | Client a riga di comando Spark. | | spark-history-server | 2.4.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.23.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.23.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Cambia i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.23.0 di Amazon EMR emr-5.23.0 ## Versioni dell'applicazione 5.23.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.23.0 | emr-5.22.0 | emr-5.21.2 | emr-5.21.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.519 | 1,11,510 | 1,11,4479 | 1,11,4479 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.7.1 | 1.7.1 | 1.7.0 | 1.7.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.9 | 1.4.9 | 1.4.8 | 1.4.8 | | HCatalog | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | | Hadoop | 2.8.5-amzn-3 | 2.8.5-amzn-2 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | | Hive | 2.3.4-amzn-1 | 2.3.4-amzn-1 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.1.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.1- -1,4 HBase | 4.14.1- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.215 | 0.215 | 0.215 | 0.215 | | Spark | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | | Tez | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.1 | 0.8.1 | 0.8.0 | 0.8.0 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note del rilascio 5.23.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.23.0. Le modifiche sono relative alla versione 5.22.0. Data del rilascio iniziale: 1° aprile 2019 Ultimo aggiornamento: 30 aprile 2019 **Aggiornamenti** + AWS SDK per Java 1,1,519 **Nuove funzionalità** + (30 aprile 2019) Con Amazon EMR 5.23.0 e versioni successive, puoi avviare un cluster con tre nodi primari per supportare l'elevata disponibilità di applicazioni come YARN Resource Manager, HDFS, Spark, Hive e NameNode Ganglia. Con questa caratteristica, il nodo primario non rappresenta più un potenziale singolo punto di errore. Se uno dei nodi primari ha esito negativo, Amazon EMR esegue automaticamente il failover in un nodo primario in standby e sostituisce il nodo primario guasto con uno nuovo con le medesime operazioni di configurazione e di bootstrap. Per ulteriori informazioni, consulta la sezione [Plan and Configure Primary Nodes](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-ha.html) (Pianificazione e configurazione dei nodi primari). **Problemi noti** + Interfaccia utente Tez (corretta in Amazon EMR rilascio 5.26.0) L'interfaccia utente di Tez non funziona su un cluster EMR con più nodi primari. + Hue (corretto in Amazon EMR rilascio 5.24.0) + Hue in esecuzione su Amazon EMR non supporta Solr. A partire da Amazon EMR rilascio 5.20.0, un problema di configurazione errata causa l'attivazione di Solr e un messaggio di errore innocuo simile al seguente: `Solr server could not be contacted properly: HTTPConnectionPool('host=ip-xx-xx-xx-xx.ec2.internal', port=1978): Max retries exceeded with url: /solr/admin/info/system?user.name=hue&doAs=administrator&wt=json (Caused by NewConnectionError(': Failed to establish a new connection: [Errno 111] Connection refused',))` **Per evitare che venga visualizzato il messaggio di errore Solr:** 1. Effettua la connessione alla linea di comando del nodo primario tramite SSH. 1. Aprire il file `hue.ini` con un editor di testo. Ad esempio: `sudo vim /etc/hue/conf/hue.ini` 1. Cerca il termine `appblacklist` e modifica la riga nel modo seguente: ``` appblacklist = search ``` 1. Salva le modifiche e riavvia Hue come nell'esempio seguente: ``` sudo stop hue; sudo start hue ``` + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.23.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.8.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.7.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.11.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.2.0 | Connettore di EMR S3Select | | emrfs | 2.32.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.7.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-hdfs-journalnode | 2.8.5-amzn-3 | Servizio HDFS per gestire il giornale di registrazione del file system Hadoop su cluster HA. | | hadoop-httpfs-server | 2.8.5-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.9 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.9 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.9 | HBase client da riga di comando. | | hbase-rest-server | 1.4.9 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.9 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.3.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.1- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.1- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.215 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.215 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.0 | Client a riga di comando Spark. | | spark-history-server | 2.4.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.23.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.23.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Cambia i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.22.0 di Amazon EMR emr-5.22.0 ## Versioni dell'applicazione 5.22.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.22.0 | emr-5.21.2 | emr-5.21.1 | emr-5.21.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.510 | 1,11,4479 | 1,11,4479 | 1,11,4479 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.7.1 | 1.7.0 | 1.7.0 | 1.7.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.9 | 1.4.8 | 1.4.8 | 1.4.8 | | HCatalog | 2.3.4-amzn-1 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | | Hadoop | 2.8.5-amzn-2 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | | Hive | 2.3.4-amzn-1 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.1.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.1- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.215 | 0.215 | 0.215 | 0.215 | | Spark | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | | Tez | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.1 | 0.8.0 | 0.8.0 | 0.8.0 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note del rilascio 5.22.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.22.0. Le modifiche sono relative alla versione 5.21.0. **Importante** A partire dalla versione 5.22.0 di Amazon EMR, Amazon EMR AWS utilizza la versione 4 di Signature esclusivamente per autenticare le richieste verso Amazon S3. Le versioni precedenti di Amazon EMR utilizzano in alcuni casi AWS Signature Version 2, a meno che le note di rilascio non indichino che viene utilizzata esclusivamente la versione Signature 4. Per ulteriori informazioni, consulta [Authenticating Requests (AWS Signature Version 4)](https://docs.aws.amazon.com/AmazonS3/latest/API/sig-v4-authenticating-requests.html) e [Authenticating Requests (AWS Signature Version 2) nella](https://docs.aws.amazon.com/AmazonS3/latest/API/auth-request-sig-v2.html) *Amazon Simple Storage* Service Developer Guide. Data del rilascio iniziale: 20 marzo 2019 **Aggiornamenti** + Flink 1.7.1 + HBase 1.4.9 + Oozie 5.1.0 + Phoenix 4.14.1 + Zeppelin 0.8.1 + Connettori e driver: + DynamoDB Connector 4.8.0 + MariaDB Connector 2.2.6 + Driver JDBC Amazon Redshift 1.2.20.1043 **Nuove funzionalità** + Modificata la configurazione EBS predefinita per i tipi di istanza EC2 con archiviazione solo EBS. Quando crei un cluster utilizzando Amazon EMR rilascio 5.22.0 e successivi, la quantità di archiviazione EBS predefinita aumenta in base alle dimensioni dell'istanza. Inoltre, l'archiviazione aumentata viene divisa su più volumi, offrendo migliori prestazioni IOPS. Se desideri utilizzare una configurazione dello storage delle istanze EBS diversa, puoi specificarla al momento della creazione di un cluster EMR o aggiungere nodi a un cluster esistente. Per ulteriori informazioni sulla quantità di archiviazione e sul numero di volumi allocati per impostazione predefinita per ciascun tipo di istanza, consulta [Archiviazione EBS di default per istanze](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-storage.html#emr-plan-storage-ebs-storage-default) nella *Guida alla gestione di Amazon EMR*. **Modifiche, miglioramenti e problemi risolti** + Spark + Introdotta una nuova proprietà di configurazione per Spark su YARN, `spark.yarn.executor.memoryOverheadFactor`. Il valore di questa proprietà è un fattore di scala che imposta il valore del sovraccarico della memoria su una percentuale di memoria dell'executor, con un minimo di 384 MB. Se l'overhead della memoria è impostato esplicitamente utilizzando `spark.yarn.executor.memoryOverhead`, questa proprietà non ha effetto. Il valore predefinito è `0.1875`, che rappresenta il 18,75%. Questo valore predefinito per Amazon EMR lascia più spazio nei container YARN per l'overhead della memoria dell'executor rispetto al 10% predefinito impostato internamente da Spark. L'impostazione predefinita di Amazon EMR del 18,75% ha mostrato un minor numero di errori relativi alla memoria nei benchmark TPC-DS. + Backport di [SPARK-26316](https://issues.apache.org/jira/browse/SPARK-26316) per migliorare le prestazioni. + In Amazon EMR versione 5.19.0, 5.20.0 e 5.21.0, le etichette dei nodi YARN sono memorizzate in una directory HDFS. In alcune situazioni, questo porta a ritardi di startup del nodo principale e quindi causa il timeout del cluster e l'errore di avvio. A partire da Amazon EMR 5.22.0, questo problema è stato risolto. Le etichette dei nodi YARN sono memorizzate sul disco locale di ciascun nodo cluster, evitando dipendenze da HDFS. **Problemi noti** + Hue (corretto in Amazon EMR rilascio 5.24.0) + Hue in esecuzione su Amazon EMR non supporta Solr. A partire da Amazon EMR rilascio 5.20.0, un problema di configurazione errata causa l'attivazione di Solr e un messaggio di errore innocuo simile al seguente: `Solr server could not be contacted properly: HTTPConnectionPool('host=ip-xx-xx-xx-xx.ec2.internal', port=1978): Max retries exceeded with url: /solr/admin/info/system?user.name=hue&doAs=administrator&wt=json (Caused by NewConnectionError(': Failed to establish a new connection: [Errno 111] Connection refused',))` **Per evitare che venga visualizzato il messaggio di errore Solr:** 1. Effettua la connessione alla linea di comando del nodo primario tramite SSH. 1. Aprire il file `hue.ini` con un editor di testo. Ad esempio: `sudo vim /etc/hue/conf/hue.ini` 1. Cerca il termine `appblacklist` e modifica la riga nel modo seguente: ``` appblacklist = search ``` 1. Salva le modifiche e riavvia Hue come nell'esempio seguente: ``` sudo stop hue; sudo start hue ``` + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.22.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.8.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.6.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.11.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.2.0 | Connettore di EMR S3Select | | emrfs | 2.31.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.7.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.5-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.9 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.9 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.9 | HBase client da riga di comando. | | hbase-rest-server | 1.4.9 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.9 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.3.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.1.0 | Client a riga di comando Oozie. | | oozie-server | 5.1.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.1- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.1- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.215 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.215 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.0 | Client a riga di comando Spark. | | spark-history-server | 2.4.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.22.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.22.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Cambia i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.21.2 di Amazon EMR emr-5.21.2 ## Versioni dell'applicazione 5.21.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.21.2 | emr-5.21.1 | emr-5.21.0 | emr-5.20.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.479 | 1,11,4479 | 1,11,4479 | 1,11,461 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.7.0 | 1.7.0 | 1.7.0 | 1.6.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.8 | 1.4.8 | 1.4.8 | 1.4.8 | | HCatalog | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | | Hadoop | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | | Hive | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.215 | 0.215 | 0.215 | 0.214 | | Spark | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | | Tez | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note di rilascio 5.21.2 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.21.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.7.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.1 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.11.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.2.0 | Connettore di EMR S3Select | | emrfs | 2.30.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.7.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.5-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.8 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.8 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.8 | HBase client da riga di comando. | | hbase-rest-server | 1.4.8 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.8 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.3.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.215 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.215 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.0 | Client a riga di comando Spark. | | spark-history-server | 2.4.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.21.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.21.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.21.1 di Amazon EMR emr-5.21.1 ## Versioni dell'applicazione 5.21.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.21.1 | emr-5.21.0 | emr-5.20.1 | emr-5.20.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.479 | 1,11,4479 | 1,11,461 | 1,11,461 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | | Scala | 211,12 | 2,11,12 | 2,11,12 | 2,11,12 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.7.0 | 1.7.0 | 1.6.2 | 1.6.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.8 | 1.4.8 | 1.4.8 | 1.4.8 | | HCatalog | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | | Hadoop | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | | Hive | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.215 | 0.215 | 0.214 | 0.214 | | Spark | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.12.0 | 1.12.0 | 1.12.0 | | Tez | 0.9.1 | 0.9.1 | 0.9.1 | 0.9.1 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note di rilascio 5.21.1 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.21.1. Le modifiche sono relative alla versione 5.21.0. Data del rilascio iniziale: 18 luglio 2019 **Modifiche, miglioramenti e problemi risolti** + Aggiornata l'AMI predefinita Amazon Linux per Amazon EMR per importanti aggiornamenti di sicurezza del kernel Linux, inclusi i problemi di negazione del servizio TCP SACK ([AWS-2019-005](https://aws.amazon.com/security/security-bulletins/AWS-2019-005/)). **Problemi noti** + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.21.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.7.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.1 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.11.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.2.0 | Connettore di EMR S3Select | | emrfs | 2.30.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.7.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.5-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.8 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.8 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.8 | HBase client da riga di comando. | | hbase-rest-server | 1.4.8 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.8 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.3.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.215 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.215 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.0 | Client a riga di comando Spark. | | spark-history-server | 2.4.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.21.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.21.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.21.0 di Amazon EMR emr-5.21.0 ## Versioni dell'applicazione 5.21.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.21.0 | emr-5.20.1 | emr-5.20.0 | emr-5.19.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.479 | 1,11,461 | 1,11,461 | 1,11,433 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2.7, 3.6 | 2,7, 3,4 | | Scala | 2,11,12 | 2,11,12 | 2,11,12 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.7.0 | 1.6.2 | 1.6.2 | 1.6.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.8 | 1.4.8 | 1.4.8 | 1.4.7 | | HCatalog | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.3-amzn-2 | | Hadoop | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-0 | | Hive | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.3-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.3.0 | 4.3.0 | 4.3.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.215 | 0.214 | 0.214 | 0.212 | | Spark | 2.4.0 | 2.4.0 | 2.4.0 | 2.3.2 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.12.0 | 1.12.0 | 1.11.0 | | Tez | 0.9.1 | 0.9.1 | 0.9.1 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note di rilascio 5.21.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.21.0. Le modifiche sono relative alla versione 5.20.0. Data del rilascio iniziale: 18 febbraio 2019 Ultimo aggiornamento: 3 aprile 2019 **Aggiornamenti** + Flink 1.7.0 + Presto 0.215 + AWS SDK per Java 1.11.479 **Nuove funzionalità** + (3 aprile 2019) Con Amazon EMR versione 5.21.0 e successive, puoi sovrascrivere le configurazioni del cluster e specificare classificazioni di configurazione aggiuntive per ogni gruppo di istanze in un cluster in esecuzione. A tale scopo, puoi utilizzare la console Amazon EMR, AWS Command Line Interface (AWS CLI) o l' AWS SDK. Per ulteriori informazioni, consulta [Specifica di una configurazione per un gruppo di istanze in un cluster in esecuzione](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps-running-cluster.html). **Modifiche, miglioramenti e problemi risolti** + Zeppelin + Backport per [ZEPPELIN-3878](https://issues.apache.org/jira/browse/ZEPPELIN-3878). **Problemi noti** + Hue (corretto in Amazon EMR rilascio 5.24.0) + Hue in esecuzione su Amazon EMR non supporta Solr. A partire da Amazon EMR rilascio 5.20.0, un problema di configurazione errata causa l'attivazione di Solr e un messaggio di errore innocuo simile al seguente: `Solr server could not be contacted properly: HTTPConnectionPool('host=ip-xx-xx-xx-xx.ec2.internal', port=1978): Max retries exceeded with url: /solr/admin/info/system?user.name=hue&doAs=administrator&wt=json (Caused by NewConnectionError(': Failed to establish a new connection: [Errno 111] Connection refused',))` **Per evitare che venga visualizzato il messaggio di errore Solr:** 1. Effettua la connessione alla linea di comando del nodo primario tramite SSH. 1. Aprire il file `hue.ini` con un editor di testo. Ad esempio: `sudo vim /etc/hue/conf/hue.ini` 1. Cerca il termine `appblacklist` e modifica la riga nel modo seguente: ``` appblacklist = search ``` 1. Salva le modifiche e riavvia Hue come nell'esempio seguente: ``` sudo stop hue; sudo start hue ``` + Tez + Questo problema è stato risolto in Amazon EMR 5.22.0. Quando ti connetti all'interfaccia utente di Tez all'indirizzo http: //:8080/tez-ui *MasterDNS* tramite una connessione SSH al nodo primario del cluster, viene visualizzato l'errore «Operazione dell'adattatore non riuscita - Il server Timeline (ATS) è fuori portata. Either it is down, or CORS is not enabled (Operazione adattatore fallita: server Timeline (ATS) fuori portata. O è inattivo o CORS non è abilitato)" o le attività mostrano una dicitura N/A inaspettata. Ciò è dovuto al fatto che l'interfaccia utente Tez effettua richieste al server Timeline YARN utilizzando `localhost` anziché il nome host del nodo primario. Come soluzione alternativa, è disponibile uno script da eseguire come operazione o fase di bootstrap. Lo script aggiorna il nome host nel file Tez `configs.env`. Per ulteriori informazioni e per la posizione dello script, consulta [Istruzioni di bootstrap](http://awssupportdatasvcs.com/bootstrap-actions/fix_tez_ui_0-9-1/). + In Amazon EMR versione 5.19.0, 5.20.0 e 5.21.0, le etichette dei nodi YARN sono memorizzate in una directory HDFS. In alcune situazioni, questo porta a ritardi di startup del nodo principale e quindi causa il timeout del cluster e l'errore di avvio. A partire da Amazon EMR 5.22.0, questo problema è stato risolto. Le etichette dei nodi YARN sono memorizzate sul disco locale di ciascun nodo cluster, evitando dipendenze da HDFS. + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.21.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.7.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.1 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.11.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.2.0 | Connettore di EMR S3Select | | emrfs | 2.30.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.7.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.5-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.8 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.8 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.8 | HBase client da riga di comando. | | hbase-rest-server | 1.4.8 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.8 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.3.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.215 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.215 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.0 | Client a riga di comando Spark. | | spark-history-server | 2.4.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.21.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.21.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.20.1 di Amazon EMR emr-5.20.1 ## Versioni dell'applicazione 5.20.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.20.1 | emr-5.20.0 | emr-5.19.1 | emr-5.19.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.461 | 1,11,461 | 1,11,433 | 1,11,433 | | Python | 2.7, 3.6 | 2.7, 3.6 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2,11,12 | 2,11,12 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.6.2 | 1.6.2 | 1.6.1 | 1.6.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.8 | 1.4.8 | 1.4.7 | 1.4.7 | | HCatalog | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.3-amzn-2 | 2.3.3-amzn-2 | | Hadoop | 2.8.5-amzn-1 | 2.8.5-amzn-1 | 2.8.5-amzn-0 | 2.8.5-amzn-0 | | Hive | 2.3.4-amzn-0 | 2.3.4-amzn-0 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.3.0 | 4.3.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.9.4 | 0.9.4 | 0.9.4 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.1 | 1.3.1 | 1.3.0 | 1.3.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.214 | 0.214 | 0.212 | 0.212 | | Spark | 2.4.0 | 2.4.0 | 2.3.2 | 2.3.2 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.12.0 | 1.11.0 | 1.11.0 | | Tez | 0.9.1 | 0.9.1 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.13 | ## Note di rilascio 5.20.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.20.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.7.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.1 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.2.0 | Connettore di EMR S3Select | | emrfs | 2.29.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.6.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.5-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.8 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.8 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.8 | HBase client da riga di comando. | | hbase-rest-server | 1.4.8 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.8 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.3.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.214 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.214 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.0 | Client a riga di comando Spark. | | spark-history-server | 2.4.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.20.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.20.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.20.0 di Amazon EMR emr-5.20.0 ## Versioni dell'applicazione 5.20.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.20.0 | emr-5.19.1 | emr-5.19.0 | emr-5.18.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.461 | 1,11,433 | 1,11,433 | 1,11,3393 | | Python | 2.7, 3.6 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2,11,12 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.6.2 | 1.6.1 | 1.6.1 | 1.6.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.8 | 1.4.7 | 1.4.7 | 1.4.7 | | HCatalog | 2.3.4-amzn-0 | 2.3.3-amzn-2 | 2.3.3-amzn-2 | 2.3.3-amzn-2 | | Hadoop | 2.8.5-amzn-1 | 2.8.5-amzn-0 | 2.8.5-amzn-0 | 2.8.4-amzn-1 | | Hive | 2.3.4-amzn-0 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.3.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.9.4 | 0.9.4 | 0.8.1 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.1 | 1.3.0 | 1.3.0 | 1.2.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.214 | 0.212 | 0.212 | 0.210 | | Spark | 2.4.0 | 2.3.2 | 2.3.2 | 2.3.2 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.12.0 | 1.11.0 | 1.11.0 | 1.9.0 | | Tez | 0.9.1 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.13 | 3.4.12 | ## Note del rilascio 5.20.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.20.0. Le modifiche sono relative alla versione 5.19.0. Data del rilascio iniziale: 18 dicembre 2018 Ultimo aggiornamento: 22 gennaio 2019 **Aggiornamenti** + Flink 1.6.2 + HBase 1.4.8 + Hive 2.3.4 + Hue 4.3.0 + MXNet 1.3.1 + Presto 0.214 + Spark 2.4.0 + TensorFlow 1,12,0 + Tez 0.9.1 + AWS SDK per Java 1,11,461 **Nuove funzionalità** + (22 gennaio 2019) Kerberos in Amazon EMR è stato migliorato per supportare l'autenticazione delle entità principali da un KDC esterno. In questo modo, la gestione dei principali viene centralizzata perché più cluster possono condividere un unico server KDC esterno. Inoltre, il server KDC esterno può avere un trust tra realm con un dominio Active Directory. In questo modo, tutti i cluster possono autenticare i principali da Active Directory. Per ulteriori informazioni, consulta [Utilizzo dell'autenticazione Kerberos](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-kerberos.html) nella *Guida alla gestione di Amazon EMR*. **Modifiche, miglioramenti e problemi risolti** + AMI predefinita di Amazon Linux per Amazon EMR + Il pacchetto Python3 è stato aggiornato da python 3.4 a 3.6. + Il committer ottimizzato S3 EMRFS + Il committer EMRFS ottimizzato per S3 è ora abilitato per impostazione predefinita, il che migliora le prestazioni di scrittura. Per ulteriori informazioni, consulta [Utilizzare il committer ottimizzato S3 EMRFS](emr-spark-s3-optimized-committer.md). + Hive + Backport per [HIVE-16686](https://issues.apache.org/jira/browse/HIVE-16686). + Glue con Spark e Hive + In EMR 5.20.0 o versioni successive, il pruning delle partizioni parallele viene abilitato automaticamente per Spark e Hive quando AWS Glue Data Catalog viene utilizzato come metastore. Questa modifica riduce significativamente i tempi di pianificazione delle query eseguendo più richieste in parallelo per recuperare le partizioni. Il numero totale di segmenti che è possibile eseguire contemporaneamente è compreso tra 1 e 10. Il valore di default è 5, che è l'impostazione consigliata. Puoi modificare questa impostazione specificando la proprietà `aws.glue.partition.num.segments` nella classificazione di configurazione `hive-site`. Se si verifica una limitazione, è possibile disattivare la funzione modificando il valore su 1. Per ulteriori informazioni, consulta [Struttura del segmento AWS Glue](https://docs.aws.amazon.com/glue/latest/dg/aws-glue-api-catalog-partitions.html#aws-glue-api-catalog-partitions-Segment). **Problemi noti** + Hue (corretto in Amazon EMR rilascio 5.24.0) + Hue in esecuzione su Amazon EMR non supporta Solr. A partire da Amazon EMR rilascio 5.20.0, un problema di configurazione errata causa l'attivazione di Solr e un messaggio di errore innocuo simile al seguente: `Solr server could not be contacted properly: HTTPConnectionPool('host=ip-xx-xx-xx-xx.ec2.internal', port=1978): Max retries exceeded with url: /solr/admin/info/system?user.name=hue&doAs=administrator&wt=json (Caused by NewConnectionError(': Failed to establish a new connection: [Errno 111] Connection refused',))` **Per evitare che venga visualizzato il messaggio di errore Solr:** 1. Effettua la connessione alla linea di comando del nodo primario tramite SSH. 1. Aprire il file `hue.ini` con un editor di testo. Ad esempio: `sudo vim /etc/hue/conf/hue.ini` 1. Cerca il termine `appblacklist` e modifica la riga nel modo seguente: ``` appblacklist = search ``` 1. Salva le modifiche e riavvia Hue come nell'esempio seguente: ``` sudo stop hue; sudo start hue ``` + Tez + Questo problema è stato risolto in Amazon EMR 5.22.0. Quando ti connetti all'interfaccia utente di Tez all'indirizzo http: //:8080/tez-ui *MasterDNS* tramite una connessione SSH al nodo primario del cluster, viene visualizzato l'errore «Operazione dell'adattatore non riuscita - Il server Timeline (ATS) è fuori portata. Either it is down, or CORS is not enabled (Operazione adattatore fallita: server Timeline (ATS) fuori portata. O è inattivo o CORS non è abilitato)" o le attività mostrano una dicitura N/A inaspettata. Ciò è dovuto al fatto che l'interfaccia utente Tez effettua richieste al server Timeline YARN utilizzando `localhost` anziché il nome host del nodo primario. Come soluzione alternativa, è disponibile uno script da eseguire come operazione o fase di bootstrap. Lo script aggiorna il nome host nel file Tez `configs.env`. Per ulteriori informazioni e per la posizione dello script, consulta [Istruzioni di bootstrap](http://awssupportdatasvcs.com/bootstrap-actions/fix_tez_ui_0-9-1/). + In Amazon EMR versione 5.19.0, 5.20.0 e 5.21.0, le etichette dei nodi YARN sono memorizzate in una directory HDFS. In alcune situazioni, questo porta a ritardi di startup del nodo principale e quindi causa il timeout del cluster e l'errore di avvio. A partire da Amazon EMR 5.22.0, questo problema è stato risolto. Le etichette dei nodi YARN sono memorizzate sul disco locale di ciascun nodo cluster, evitando dipendenze da HDFS. + Problema noto nei cluster con più nodi primari e autenticazione Kerberos Se esegui cluster con più nodi primari e autenticazione Kerberos nella versione 5.20.0 di Amazon EMR e successivi, è possibile che si verifichino problemi con le operazioni del cluster, quali la riduzione o l'invio di fasi, dopo che il cluster è rimasto in esecuzione per un certo periodo di tempo. Il periodo di tempo dipende dal periodo di validità del ticket Kerberos definito dall'utente. Il problema di dimensionamento verso il basso influisce sia sulle richieste di scalabilità automatica che sulle richieste esplicite di dimensionamento verso il basso inviate dall'utente. Possono essere influenzate anche le operazioni cluster aggiuntive. Soluzione alternativa: + Abilita SSH come utente `hadoop` al primo nodo primario del cluster EMR con più nodi primari. + Esegui il comando seguente per rinnovare il ticket Kerberos per l'utente `hadoop`. ``` kinit -kt ``` In genere, il file keytab si trova in `/etc/hadoop.keytab` e l'entità principale si presenta nella forma di `hadoop/@`. **Nota** Questa soluzione alternativa sarà valida per il periodo di tempo in cui il ticket Kerberos è valido. La durata è di 10 ore per impostazione predefinita, ma può essere configurata dalle impostazioni Kerberos. È necessario eseguire nuovamente il comando sopra indicato una volta scaduto il ticket Kerberos. ## Versioni dei componenti 5.20.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.7.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.1 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.2.0 | Connettore di EMR S3Select | | emrfs | 2.29.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.6.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.5-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.8 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.8 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.8 | HBase client da riga di comando. | | hbase-rest-server | 1.4.8 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.8 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.4-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.4-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.4-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.4-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.4-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.4-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.4-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.3.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.1 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.214 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.214 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.4.0 | Client a riga di comando Spark. | | spark-history-server | 2.4.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.4.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.4.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.12.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.9.1 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.20.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.20.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.19.1 di Amazon EMR emr-5.19.1 ## Versioni dell'applicazione 5.19.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.19.1 | emr-5.19.0 | emr-5.18.1 | emr-5.18.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.433 | 1,11,433 | 1,11,3393 | 1,11,3393 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.6.1 | 1.6.1 | 1.6.0 | 1.6.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | HCatalog | 2.3.3-amzn-2 | 2.3.3-amzn-2 | 2.3.3-amzn-2 | 2.3.3-amzn-2 | | Hadoop | 2.8.5-amzn-0 | 2.8.5-amzn-0 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | | Hive | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.9.4 | 0.8.1 | 0.8.1 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.0 | 1.3.0 | 1.2.0 | 1.2.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.212 | 0.212 | 0.210 | 0.210 | | Spark | 2.3.2 | 2.3.2 | 2.3.2 | 2.3.2 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.11.0 | 1.11.0 | 1.9.0 | 1.9.0 | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.0 | 0.8.0 | 0.8.0 | 0.8.0 | | ZooKeeper | 3.4.13 | 3.4.13 | 3.4.12 | 3.4.12 | ## Note di rilascio 5.19.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.19.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.7.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.1 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.1.0 | Connettore di EMR S3Select | | emrfs | 2.28.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.6.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.5-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.7 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.7 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.7 | HBase client da riga di comando. | | hbase-rest-server | 1.4.7 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.7 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.212 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.212 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.2 | Client a riga di comando Spark. | | spark-history-server | 2.3.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.11.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.19.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.19.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.19.0 di Amazon EMR emr-5.19.0 ## Versioni dell'applicazione 5.19.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.19.0 | emr-5.18.1 | emr-5.18.0 | emr-5.17.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.433 | 1,11,3393 | 1,11,3393 | 1,11336 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.6.1 | 1.6.0 | 1.6.0 | 1.5.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.6 | | HCatalog | 2.3.3-amzn-2 | 2.3.3-amzn-2 | 2.3.3-amzn-2 | 2.3.3-amzn-1 | | Hadoop | 2.8.5-amzn-0 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | | Hive | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.9.4 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.3.0 | 1.2.0 | 1.2.0 | 1.2.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.212 | 0.210 | 0.210 | 0.206 | | Spark | 2.3.2 | 2.3.2 | 2.3.2 | 2.3.1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.11.0 | 1.9.0 | 1.9.0 | 1.9.0 | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.0 | 0.8.0 | 0.8.0 | 0.7.3 | | ZooKeeper | 3.4.13 | 3.4.12 | 3.4.12 | 3.4.12 | ## Note del rilascio 5.19.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.19.0. Le modifiche sono relative alla versione 5.18.0. Data del rilascio iniziale: 7 novembre 2018 Ultimo aggiornamento: 19 novembre 2018 **Aggiornamenti** + Hadoop 2.8.5 + Flink 1.6.1 + JupyterHub 0.9.4 + MXNet 1,3,0 + Presto 0.212 + TensorFlow 1.11.0 + ZooKeeper 3.4.13 + AWS SDK per Java 1,11,433 **Nuove funzionalità** + (19 novembre 2018) EMR Notebooks è un ambiente gestito basato su Jupyter Notebook. Supporta i kernel magici Spark per PySpark, Spark SQL, Spark R e Scala. EMR Notebooks può essere utilizzato con cluster creati utilizzando Amazon EMR rilascio 5.18.0 e successivi. Per ulteriori informazioni, consulta [Utilizzo di EMR Notebooks](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-notebooks.html) nella *Guida alla gestione di Amazon EMR*. + Il committer EMRFS ottimizzato per S3 è disponibile durante la scrittura di file Parquet tramite Spark ed EMRFS. Questo committer migliora le prestazioni di scrittura. Per ulteriori informazioni, consulta [Utilizzare il committer ottimizzato S3 EMRFS](emr-spark-s3-optimized-committer.md). **Modifiche, miglioramenti e problemi risolti** + YARN + Modificata la logica che limita il processo master dell'applicazione all'esecuzione sui nodi principali. Questa funzionalità ora utilizza la caratteristica e le proprietà delle etichette dei nodi YARN nelle classificazioni di configurazione `yarn-site` e `capacity-scheduler`. Per informazioni, consultare, [https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-instances-guidelines.html#emr-plan-spot-YARN.](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-instances-guidelines.html#emr-plan-spot-YARN.) + AMI predefinita di Amazon Linux per Amazon EMR + `ruby18`, `php56` e `gcc48` non vengono più installati per impostazione predefinita. Se lo si desidera, è possibile installarli tramite `yum`. + Il Ruby Gem aws-java-sdk non è più installato per impostazione predefinita. Se lo si desidera, è possibile installarlo tramite `gem install aws-sdk`. Possono anche essere installati componenti specifici. Ad esempio, `gem install aws-sdk-s3`. **Problemi noti** + **EMR Notebooks**: in alcune circostanze, con più editor di notebook aperti, l'editor del notebook potrebbe non essere in grado di connettersi al cluster. In questo caso, cancella i cookie del browser e riapri gli editor dei notebook. + **CloudWatch ContainerPending Scalabilità metrica e automatica**: (Risolto nella versione 5.20.0) Amazon EMR potrebbe emettere un valore negativo per. `ContainerPending` Se `ContainerPending` viene utilizzato in una regola di scalabilità automatica, quest'ultima avrà un comportamento imprevisto. Non utilizzare `ContainerPending` con la scalabilità automatica. + In Amazon EMR versione 5.19.0, 5.20.0 e 5.21.0, le etichette dei nodi YARN sono memorizzate in una directory HDFS. In alcune situazioni, questo porta a ritardi di startup del nodo principale e quindi causa il timeout del cluster e l'errore di avvio. A partire da Amazon EMR 5.22.0, questo problema è stato risolto. Le etichette dei nodi YARN sono memorizzate sul disco locale di ciascun nodo cluster, evitando dipendenze da HDFS. ## Versioni dei componenti 5.19.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.2.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.7.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.1 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.1.0 | Connettore di EMR S3Select | | emrfs | 2.28.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.6.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.5-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.5-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.5-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.5-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.5-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.5-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.5-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.5-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.5-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.5-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.7 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.7 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.7 | HBase client da riga di comando. | | hbase-rest-server | 1.4.7 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.7 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.9.4 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.3.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.212 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.212 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.2 | Client a riga di comando Spark. | | spark-history-server | 2.3.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.11.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.13 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.13 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.19.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.19.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-memory | Modifica i valori nel file memory.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | presto-connector-tpcds | Modifica i valori nel file tpcds.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.18.1 di Amazon EMR emr-5.18.1 ## Versioni dell'applicazione 5.18.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.18.1 | emr-5.18.0 | emr-5.17.2 | emr-5.17.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.393 | 1,11,3393 | 1,11336 | 1,11336 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.6.0 | 1.6.0 | 1.5.2 | 1.5.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.7 | 1.4.7 | 1.4.6 | 1.4.6 | | HCatalog | 2.3.3-amzn-2 | 2.3.3-amzn-2 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hadoop | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | | Hive | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.210 | 0.210 | 0.206 | 0.206 | | Spark | 2.3.2 | 2.3.2 | 2.3.1 | 2.3.1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.9.0 | 1.9.0 | 1.9.0 | 1.9.0 | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.0 | 0.8.0 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | ## Note di rilascio 5.18.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.18.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.1.3 | SageMaker SDK Amazon Spark | | emr-ddb | 4.6.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.1.0 | Connettore di EMR S3Select | | emrfs | 2.27.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.6.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.4-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.4-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.4-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.4-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.4-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.4-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.4-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.4-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.4-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.4-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.7 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.7 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.7 | HBase client da riga di comando. | | hbase-rest-server | 1.4.7 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.7 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.2.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.210 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.210 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.2 | Client a riga di comando Spark. | | spark-history-server | 2.3.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.9.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.12 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.12 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.18.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.18.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.18.0 di Amazon EMR emr-5.18.0 ## Versioni dell'applicazione 5.18.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.18.0 | emr-5.17.2 | emr-5.17.1 | emr-5.17.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.393 | 1,11336 | 1,11336 | 1,11336 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.6.0 | 1.5.2 | 1.5.2 | 1.5.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.7 | 1.4.6 | 1.4.6 | 1.4.6 | | HCatalog | 2.3.3-amzn-2 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hadoop | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | | Hive | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.210 | 0.206 | 0.206 | 0.206 | | Spark | 2.3.2 | 2.3.1 | 2.3.1 | 2.3.1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.9.0 | 1.9.0 | 1.9.0 | 1.9.0 | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.8.0 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | ## Note del rilascio 5.18.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.18.0. Le modifiche sono relative alla versione 5.17.0. Data del rilascio iniziale: 24 ottobre 2018 **Aggiornamenti** + Flink 1.6.0 + HBase 1.4.7 + Presto 0.210 + Spark 2.3.2 + Zeppelin 0.8.0 **Nuove funzionalità** + A partire da Amazon EMR rilascio 5.18.0, è possibile utilizzare i repository degli artefatti di Amazon EMR per creare il codice di processo secondo le versioni esatte di librerie e dipendenze disponibili con rilasci Amazon EMR specifici. Per ulteriori informazioni, consulta [Verifica delle dipendenze mediante il repository degli artifact di Amazon EMR](emr-artifact-repository.md). **Modifiche, miglioramenti e problemi risolti** + Hive + Aggiunto il supporto per S3 Select. Per ulteriori informazioni, consulta [Utilizzo di S3 Select con Hive per migliorare le prestazioni](emr-hive-s3select.md). + Presto + Aggiunto il supporto per [S3 Select](https://aws.amazon.com/blogs/aws/s3-glacier-select/) Pushdown. Per ulteriori informazioni, consulta [Uso di pushdown S3 Select con Presto per migliorare le prestazioni](emr-presto-s3select.md). + Spark + La configurazione predefinita log4j per Spark è stata modificata per eseguire i registri del container ogni ora per i processi di streaming Spark. Ciò consente di impedire l'eliminazione dei registri per i processi di streaming Spark con esecuzione prolungata. ## Versioni dei componenti 5.18.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.1.3 | SageMaker SDK Amazon Spark | | emr-ddb | 4.6.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.1.0 | Connettore di EMR S3Select | | emrfs | 2.27.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.6.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.4-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.4-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.4-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.4-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.4-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.4-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.4-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.4-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.4-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.4-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.7 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.7 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.7 | HBase client da riga di comando. | | hbase-rest-server | 1.4.7 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.7 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | nginx | 1.12.1 | nginx [motore x] è un server proxy inverso e HTTP | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.2.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.210 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.210 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.2 | Client a riga di comando Spark. | | spark-history-server | 2.3.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.9.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.8.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.12 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.12 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.18.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.18.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.17.2 di Amazon EMR emr-5.17.2 ## Versioni dell'applicazione 5.17.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.17.2 | emr-5.17.1 | emr-5.17.0 | emr-5.16.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.336 | 1,11336 | 1,11336 | 1,11336 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.5.2 | 1.5.2 | 1.5.2 | 1.5.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.4 | | HCatalog | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hadoop | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-0 | | Hive | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.206 | 0.206 | 0.206 | 0.203 | | Spark | 2.3.1 | 2.3.1 | 2.3.1 | 2.3.1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.9.0 | 1.9.0 | 1.9.0 | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | ## Note di rilascio 5.17.2 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.17.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.1.3 | SageMaker SDK Amazon Spark | | emr-ddb | 4.6.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.0.0 | Connettore di EMR S3Select | | emrfs | 2.26.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.5.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.4-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.4-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.4-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.4-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.4-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.4-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.4-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.4-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.4-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.4-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.6 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.6 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.6 | HBase client da riga di comando. | | hbase-rest-server | 1.4.6 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.6 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.2.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.206 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.206 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.1 | Client a riga di comando Spark. | | spark-history-server | 2.3.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.9.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.12 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.12 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.17.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.17.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.17.1 di Amazon EMR emr-5.17.1 ## Versioni dell'applicazione 5.17.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.17.1 | emr-5.17.0 | emr-5.16.1 | emr-5.16.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.336 | 1,11336 | 1,11336 | 1,11336 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.5.2 | 1.5.2 | 1.5.0 | 1.5.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.6 | 1.4.6 | 1.4.4 | 1.4.4 | | HCatalog | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hadoop | 2.8.4-amzn-1 | 2.8.4-amzn-1 | 2.8.4-amzn-0 | 2.8.4-amzn-0 | | Hive | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | | MXNet | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.206 | 0.206 | 0.203 | 0.203 | | Spark | 2.3.1 | 2.3.1 | 2.3.1 | 2.3.1 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.9.0 | 1.9.0 | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | ## Note di rilascio 5.17.1 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.17.1. Le modifiche sono relative alla versione 5.17.0. Data del rilascio iniziale: 18 luglio 2019 **Modifiche, miglioramenti e problemi risolti** + Aggiornata l'AMI predefinita Amazon Linux per Amazon EMR per importanti aggiornamenti di sicurezza del kernel Linux, inclusi i problemi di negazione del servizio TCP SACK ([AWS-2019-005](https://aws.amazon.com/security/security-bulletins/AWS-2019-005/)). ## Versioni dei componenti 5.17.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.1.3 | SageMaker SDK Amazon Spark | | emr-ddb | 4.6.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.0.0 | Connettore di EMR S3Select | | emrfs | 2.26.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.5.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.4-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.4-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.4-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.4-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.4-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.4-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.4-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.4-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.4-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.4-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.6 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.6 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.6 | HBase client da riga di comando. | | hbase-rest-server | 1.4.6 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.6 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.2.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.206 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.206 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.1 | Client a riga di comando Spark. | | spark-history-server | 2.3.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.9.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.12 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.12 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.17.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.17.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.17.0 di Amazon EMR emr-5.17.0 ## Versioni dell'applicazione 5.17.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.17.0 | emr-5.16.1 | emr-5.16.0 | emr-5.15.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.336 | 1,11336 | 1,11336 | 1,11333 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.5.2 | 1.5.0 | 1.5.0 | 1.4.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.6 | 1.4.4 | 1.4.4 | 1.4.4 | | HCatalog | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-0 | | Hadoop | 2.8.4-amzn-1 | 2.8.4-amzn-0 | 2.8.4-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.5.0-incubating | 0.4.0-incubating | | MXNet | 1.2.0 | 1.2.0 | 1.2.0 | 1.1.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.206 | 0.203 | 0.203 | 0.194 | | Spark | 2.3.1 | 2.3.1 | 2.3.1 | 2.3.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | 1.9.0 | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | ## Note di rilascio 5.17.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.17.0. Le modifiche sono relative alla versione 5.16.0. Data del rilascio iniziale: 30 agosto 2018 **Aggiornamenti** + Flink 1.5.2 + HBase 1.4.6 + Presto 0.206 **Nuove funzionalità** + Aggiunto il supporto per Tensorflow. Per ulteriori informazioni, consulta [TensorFlow](emr-tensorflow.md). **Modifiche, miglioramenti e problemi risolti** + JupyterHub + Aggiunto il supporto per la persistenza notebook in Amazon S3. Per ulteriori informazioni, consulta [Configurazione della persistenza per i notebook in Amazon S3](emr-jupyterhub-s3.md). + Spark + Aggiunto il supporto per [S3 Select](https://aws.amazon.com/blogs/aws/s3-glacier-select/). Per ulteriori informazioni, consulta [Usare S3 Select con Spark per migliorare le prestazioni delle query](emr-spark-s3select.md). + Risolti i problemi con i parametri Cloudwatch e la funzione di scalabilità automatica in Amazon EMR versione 5.14.0, 5.15.0 o 5.16.0. **Problemi noti** + Quando si crea un cluster che utilizza Kerberos con Livy installato, Livy ha esito negativo e genera un errore a indicare che l'autenticazione semplice non è abilitata. Il riavvio del server Livy risolve il problema. Per ovviare al problema, è possibile aggiungere una fase durante la creazione del cluster che esegue `sudo restart livy-server` sul nodo primario. + Se si utilizza un'AMI Amazon Linux personalizzata basata su un'AMI Amazon Linux con una data di creazione 2018-08-11, il server Oozie non si avvia. Se si utilizza Oozie, è possibile creare un'AMI personalizzata basata su un ID AMI Amazon Linux con una data di creazione diversa. Puoi utilizzare il seguente AWS CLI comando per restituire un elenco di immagini IDs per tutti gli HVM Amazon Linux AMIs con una versione 2018.03, insieme alla data di rilascio, in modo da poter scegliere un'AMI Amazon Linux appropriata come base. MyRegion Sostituiscilo con il tuo identificativo regionale, ad esempio us-west-2. ``` aws ec2 --region MyRegion describe-images --owner amazon --query 'Images[?Name!=`null`]|[?starts_with(Name, `amzn-ami-hvm-2018.03`) == `true`].[CreationDate,ImageId,Name]' --output text | sort -rk1 ``` ## Versioni dei componenti 5.17.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.1.3 | SageMaker SDK Amazon Spark | | emr-ddb | 4.6.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.5.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emr-s3-select | 1.0.0 | Connettore di EMR S3Select | | emrfs | 2.26.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.5.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.4-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.4-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.4-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.4-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.4-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.4-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.4-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.4-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.4-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.4-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.6 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.6 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.6 | HBase client da riga di comando. | | hbase-rest-server | 1.4.6 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.6 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.2.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.206 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.206 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.1 | Client a riga di comando Spark. | | spark-history-server | 2.3.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tensorflow | 1.9.0 | TensorFlow libreria software open source per il calcolo numerico ad alte prestazioni. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.12 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.12 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.17.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.17.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-s3-conf | Configura la persistenza di S3 del notebook Jupyter. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.16.1 di Amazon EMR emr-5.16.1 ## Versioni dell'applicazione 5.16.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.16.1 | emr-5.16.0 | emr-5.15.1 | emr-5.15.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.336 | 1,11336 | 1,11333 | 1,11333 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.5.0 | 1.5.0 | 1.4.2 | 1.4.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.4 | 1.4.4 | 1.4.4 | 1.4.4 | | HCatalog | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-0 | 2.3.3-amzn-0 | | Hadoop | 2.8.4-amzn-0 | 2.8.4-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.3-amzn-1 | 2.3.3-amzn-1 | 2.3.3-amzn-0 | 2.3.3-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.5.0-incubating | 0.5.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.2.0 | 1.2.0 | 1.1.0 | 1.1.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 5.0.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.14.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.203 | 0.203 | 0.194 | 0.194 | | Spark | 2.3.1 | 2.3.1 | 2.3.0 | 2.3.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.12 | ## Note di rilascio 5.16.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.16.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.1.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.6.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.25.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.5.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.4-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.4-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.4-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.4-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.4-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.4-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.4-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.4-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.4-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.4-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.4 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.4 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.4 | HBase client da riga di comando. | | hbase-rest-server | 1.4.4 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.4 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.2.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.203 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.203 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.1 | Client a riga di comando Spark. | | spark-history-server | 2.3.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.12 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.12 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.16.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.16.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.16.0 di Amazon EMR emr-5.16.0 ## Versioni dell'applicazione 5.16.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.16.0 | emr-5.15.1 | emr-5.15.0 | emr-5.14.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.336 | 1,11333 | 1,11333 | 1,11,297 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.5.0 | 1.4.2 | 1.4.2 | 1.4.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.4 | 1.4.4 | 1.4.4 | 1.4.2 | | HCatalog | 2.3.3-amzn-1 | 2.3.3-amzn-0 | 2.3.3-amzn-0 | 2.3.2-amzn-2 | | Hadoop | 2.8.4-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.3-amzn-1 | 2.3.3-amzn-0 | 2.3.3-amzn-0 | 2.3.2-amzn-2 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.2.0 | 4.1.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.5.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.2.0 | 1.1.0 | 1.1.0 | 1.1.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 5.0.0 | 4.3.0 | | Phoenix | 4.14.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.203 | 0.194 | 0.194 | 0.194 | | Spark | 2.3.1 | 2.3.0 | 2.3.0 | 2.3.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.12 | 3.4.12 | 3.4.12 | 3.4.10 | ## Note di rilascio 5.16.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.16.0. Le modifiche sono relative alla versione 5.15.0. Data del rilascio iniziale: 19 luglio 2018 **Aggiornamenti** + Hadoop 2.8.4 + Flink 1.5.0 + Livy 0.5.0 + MXNet 1.2.0 + Phoenix 4.14.0 + Presto 0.203 + Spark 2.3.1 + AWS SDK per Java 1,11336 + CUDA 9.2 + Driver JDBC Redshift 1.2.15.1025 **Modifiche, miglioramenti e problemi risolti** + HBase + Backport per [HBASE-20723](https://issues.apache.org/jira/browse/HBASE-20723) + Presto + Modifiche alla configurazione per supportare l'autenticazione LDAP. Per ulteriori informazioni, consulta [Utilizzo dell'autenticazione LDAP con Presto on Amazon EMR](emr-presto-ldap.md). + Spark + Apache Spark versione 2.3.1, disponibile a partire da Amazon EMR rilascio 5.16.0, risolve [CVE-2018-8024](https://nvd.nist.gov/vuln/detail/CVE-2018-8024) e [CVE-2018-1334](https://nvd.nist.gov/vuln/detail/CVE-2018-1334). Si consiglia di eseguire la migrazione delle versioni precedenti di Spark a Spark 2.3.1 o versioni successive. **Problemi noti** + Questa versione non supporta i tipi di istanza c1.medium o m1.small. I cluster che utilizzano uno di questi tipi di istanza non vengono avviati. Come soluzione alternativa, specifica un tipo di istanza diverso o utilizza una versione di rilascio diversa. + Quando si crea un cluster che utilizza Kerberos con Livy installato, Livy ha esito negativo e genera un errore a indicare che l'autenticazione semplice non è abilitata. Il riavvio del server Livy risolve il problema. Per ovviare al problema, è possibile aggiungere una fase durante la creazione del cluster che esegue `sudo restart livy-server` sul nodo primario. + Dopo il riavvio del nodo primario o il riavvio del controller di istanza, i CloudWatch parametri non verranno raccolti e la funzionalità di ridimensionamento automatico non sarà disponibile nelle versioni 5.14.0, 5.15.0 o 5.16.0 di Amazon EMR. Questo problema è stato risolto in Amazon EMR 5.17.0. ## Versioni dei componenti 5.16.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.1.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.6.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.25.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.5.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.4-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.4-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.4-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.4-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.4-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.4-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.4-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.4-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.4-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.4-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.4 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.4 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.4 | HBase client da riga di comando. | | hbase-rest-server | 1.4.4 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.4 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.5.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.2.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.2.88 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.14.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.14.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.203 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.203 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.1 | Client a riga di comando Spark. | | spark-history-server | 2.3.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.12 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.12 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.16.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.16.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-password-authenticator | Modifica i valori nel file password-authenticator.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.15.1 di Amazon EMR emr-5.15.1 ## Versioni dell'applicazione 5.15.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.15.1 | emr-5.15.0 | emr-5.14.2 | emr-5.14.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.333 | 1,11333 | 1,11,297 | 1,11,297 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.4 | 1.4.4 | 1.4.2 | 1.4.2 | | HCatalog | 2.3.3-amzn-0 | 2.3.3-amzn-0 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.3-amzn-0 | 2.3.3-amzn-0 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.2.0 | 4.1.0 | 4.1.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 5.0.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.194 | 0.194 | 0.194 | 0.194 | | Spark | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.12 | 3.4.12 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.15.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.15.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.24.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.4 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.4 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.4 | HBase client da riga di comando. | | hbase-rest-server | 1.4.4 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.4 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.1.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.194 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.194 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.0 | Client a riga di comando Spark. | | spark-history-server | 2.3.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.12 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.12 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.15.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.15.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.15.0 di Amazon EMR emr-5.15.0 ## Versioni dell'applicazione 5.15.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.15.0 | emr-5.14.2 | emr-5.14.1 | emr-5.14.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.333 | 1,11,297 | 1,11,297 | 1,11,297 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.4 | 1.4.2 | 1.4.2 | 1.4.2 | | HCatalog | 2.3.3-amzn-0 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.3-amzn-0 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | | Hudi | - | - | - | - | | Hue | 4.2.0 | 4.1.0 | 4.1.0 | 4.1.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | 0.8.1 | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 5.0.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.194 | 0.194 | 0.194 | 0.194 | | Spark | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.12 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.15.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.15.0. Le modifiche sono relative alla versione 5.14.0. Data del rilascio iniziale: 21 giugno 2018 **Aggiornamenti** + Aggiornato alla versione 1.4.4 HBase + Aggiornato a Hive 2.3.3 + Aggiornato a Hue 4.2.0 + Oozie aggiornato a 5.0.0 + Aggiornato a Zookeeper 3.4.12 + SDK aggiornato AWS a 1.11.333 **Modifiche, miglioramenti e problemi risolti** + Hive + Backport per [HIVE-18069](https://issues.apache.org/jira/browse/HIVE-18069). + Hue + Hue aggiornato per autenticarsi correttamente con Livy quando Kerberos è abilitato. Livy è ora supportato quando si utilizza Kerberos con Amazon EMR. + JupyterHub + Aggiornato JupyterHub in modo che Amazon EMR installi le librerie client LDAP per impostazione predefinita. + Corretto un errore nello script che genera certificati autofirmati. **Problemi noti** + Questa versione non supporta i tipi di istanza c1.medium o m1.small. I cluster che utilizzano uno di questi tipi di istanza non vengono avviati. Come soluzione alternativa, specifica un tipo di istanza diverso o utilizza una versione di rilascio diversa. + Dopo il riavvio del nodo primario o il riavvio del controller di istanza, i CloudWatch parametri non verranno raccolti e la funzionalità di ridimensionamento automatico non sarà disponibile nelle versioni 5.14.0, 5.15.0 o 5.16.0 di Amazon EMR. Questo problema è stato risolto in Amazon EMR 5.17.0. ## Versioni dei componenti 5.15.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.24.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.4 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.4 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.4 | HBase client da riga di comando. | | hbase-rest-server | 1.4.4 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.4 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.3-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.3-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.3-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.3-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.3-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.3-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.3-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.2.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.1.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 5.0.0 | Client a riga di comando Oozie. | | oozie-server | 5.0.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.194 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.194 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.0 | Client a riga di comando Spark. | | spark-history-server | 2.3.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.12 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.12 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.15.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.15.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.14.2 di Amazon EMR emr-5.14.2 ## Versioni dell'applicazione 5.14.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.14.2 | emr-5.14.1 | emr-5.14.0 | emr-5.13.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.297 | 1,11,297 | 1,11,297 | 1,11,297 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.2 | | HCatalog | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | | Hudi | - | - | - | - | | Hue | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | 0.8.1 | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.1.0 | 1.1.0 | 1.1.0 | 1.0.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.194 | 0.194 | 0.194 | 0.194 | | Spark | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.14.2 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.14.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.23.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.2 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.2 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.2 | HBase client da riga di comando. | | hbase-rest-server | 1.4.2 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.2 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.1.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.1.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.194 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.194 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.0 | Client a riga di comando Spark. | | spark-history-server | 2.3.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.14.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.14.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.14.1 di Amazon EMR emr-5.14.1 ## Versioni dell'applicazione 5.14.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.14.1 | emr-5.14.0 | emr-5.13.1 | emr-5.13.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.297 | 1,11,297 | 1,11,297 | 1,11,297 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.2 | 1.4.2 | 1.4.0 | 1.4.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.2 | | HCatalog | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | | Hudi | - | - | - | - | | Hue | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | 0.8.1 | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.1.0 | 1.1.0 | 1.0.0 | 1.0.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.194 | 0.194 | 0.194 | 0.194 | | Spark | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | | Sqoop | 1.4.7 | 1.4.7 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.14.1 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.14.1. Le modifiche sono relative alla versione 5.14.0. Data del rilascio iniziale: 17 ottobre 2018 Aggiornata l'AMI predefinita per Amazon EMR al fine di risolvere potenziali vulnerabilità di sicurezza. ## Versioni dei componenti 5.14.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.23.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.2 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.2 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.2 | HBase client da riga di comando. | | hbase-rest-server | 1.4.2 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.2 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.1.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.1.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.194 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.194 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.0 | Client a riga di comando Spark. | | spark-history-server | 2.3.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.14.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.14.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.14.0 di Amazon EMR emr-5.14.0 ## Versioni dell'applicazione 5.14.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/),, [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/) [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), e [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.14.0 | emr-5.13.1 | emr-5.13.0 | emr-5.12.3 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.297 | 1,11,297 | 1,11,297 | 1,11,267 | | Python | 2.7, 3.4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.2 | 1.4.0 | 1.4.0 | 1.4.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.2 | 1.4.2 | 1.4.2 | 1.4.0 | | HCatalog | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-1 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | 0.8.1 | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.1.0 | 1.0.0 | 1.0.0 | 1.0.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.194 | 0.194 | 0.194 | 0.188 | | Spark | 2.3.0 | 2.3.0 | 2.3.0 | 2.2.1 | | Sqoop | 1.4.7 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.14.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.14.0. Le modifiche sono relative alla versione 5.13.0. Data del rilascio iniziale: 4 giugno 2018 **Aggiornamenti** + Aggiornato ad Apache Flink 1.4.2 + Apache aggiornato alla versione 1.1.0 MXnet + Apache Sqoop aggiornato alla versione 1.4.7 **Nuove funzionalità** + Supporto aggiunto. JupyterHub Per ulteriori informazioni, consulta [JupyterHub](emr-jupyterhub.md). **Modifiche, miglioramenti e problemi risolti** + EMRFS + La stringa userAgent nelle richieste ad Amazon S3 è stata aggiornata per contenere le informazioni sull'utente e sul gruppo dell'entità principale che richiama. Questo può essere utilizzato con AWS CloudTrail i log per un tracciamento più completo delle richieste. + HBase + Include [HBASE-20447](https://issues.apache.org/jira/browse/HBASE-20447), che risolve un problema che potrebbe causare errori di cache, in particolare in caso di Regioni divise. + MXnet + Aggiunte librerie OpenCV. + Spark + Quando Spark scrive file Parquet su una posizione Amazon S3 utilizzando EMRFS, l'algoritmo è stato aggiornato per utilizzare FileOutputCommitter la versione 2 anziché la versione 1. In questo modo viene ridotta la quantità di ridenominazioni, con un conseguente miglioramento delle prestazioni delle applicazioni. Questa modifica non influisce su: + Applicazioni diverse da Spark. + Applicazioni che scrivono su altri file system, come HDFS (che utilizzano ancora la versione 1 di). FileOutputCommitter + Applicazioni che utilizzano altri formati di output, come testo o csv, che già utilizzano la scrittura diretta EMRFS. **Problemi noti** + JupyterHub + L'utilizzo delle classificazioni di configurazione per configurare JupyterHub singoli notebook Jupyter durante la creazione di un cluster non è supportato. Modifica manualmente il file jupyterhub\$1config.py e i file jupyter\$1notebook\$1config.py per ogni utente. Per ulteriori informazioni, consulta [Configurazione JupyterHub](emr-jupyterhub-configure.md). + JupyterHub non riesce ad avviarsi su cluster all'interno di una sottorete privata, con esito negativo con il messaggio. `Error: ENOENT: no such file or directory, open '/etc/jupyter/conf/server.crt' ` Questo problema è causato da un errore nello script che genera certificati autofirmati. Utilizza la seguente soluzione alternativa per generare certificati autofirmati. Tutti i comandi vengono eseguiti mentre si è connessi al nodo primario. 1. Copia lo script di generazione del certificato dal container al nodo primario: ``` sudo docker cp jupyterhub:/tmp/gen_self_signed_cert.sh ./ ``` 1. Utilizza un editor di testo per intervenire sulla riga 23 modificando il nome di host pubblico nel nome di host locale come illustrato di seguito: ``` local hostname=$(curl -s $EC2_METADATA_SERVICE_URI/local-hostname) ``` 1. Esegui lo script per generare certificati autofirmati: ``` sudo bash ./gen_self_signed_cert.sh ``` 1. Sposta i file di certificato generati dallo script nella directory `/etc/jupyter/conf/`: ``` sudo mv /tmp/server.crt /tmp/server.key /etc/jupyter/conf/ ``` È possibile verificare che `tail` il `jupyter.log` file sia stato JupyterHub riavviato e restituisca un codice di risposta 200. Esempio: ``` tail -f /var/log/jupyter/jupyter.log ``` Questo dovrebbe restituire una risposta simile alla seguente: ``` # [I 2018-06-14 18:56:51.356 JupyterHub app:1581] JupyterHub is now running at https://:9443/ # 19:01:51.359 - info: [ConfigProxy] 200 GET /api/routes ``` + Dopo il riavvio del nodo primario o il riavvio del controller di istanza, i CloudWatch parametri non verranno raccolti e la funzionalità di ridimensionamento automatico non sarà disponibile nelle versioni 5.14.0, 5.15.0 o 5.16.0 di Amazon EMR. Questo problema è stato risolto in Amazon EMR 5.17.0. ## Versioni dei componenti 5.14.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.23.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.2 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.2 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.2 | HBase client da riga di comando. | | hbase-rest-server | 1.4.2 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.2 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.1.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | jupyterhub | 0.8.1 | Server multi-utente per notebook Jupyter | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.1.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | opencv | 3.4.0 | Open Source Computer Vision Library. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.194 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.194 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.0 | Client a riga di comando Spark. | | spark-history-server | 2.3.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.7 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.14.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.14.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | container-log4j | Modifica i valori nel file container-log4j.properties di Hadoop YARN. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | jupyter-notebook-conf | Modifica i valori nel file jupyter\$1notebook\$1config.py di Jupyter Notebook. | | jupyter-hub-conf | Cambia i valori nel file jupyterhub\$1config.py JupyterHubs. | | jupyter-sparkmagic-conf | Modifica i valori nel file config.json di Sparkmagic. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell' MapReduce applicazione. | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.13.1 di Amazon EMR emr-5.13.1 ## Versioni dell'applicazione 5.13.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.13.1 | emr-5.13.0 | emr-5.12.3 | emr-5.12.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.297 | 1,11,297 | 1,11,267 | 1,11267 | | Python | 2.7, 3.4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.2 | 1.4.2 | 1.4.0 | 1.4.0 | | HCatalog | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.2-amzn-2 | 2.3.2-amzn-2 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.194 | 0.194 | 0.188 | 0.188 | | Spark | 2.3.0 | 2.3.0 | 2.2.1 | 2.2.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.13.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.13.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.22.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.2 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.2 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.2 | HBase client da riga di comando. | | hbase-rest-server | 1.4.2 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.2 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.1.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.0.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.194 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.194 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.0 | Client a riga di comando Spark. | | spark-history-server | 2.3.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.13.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.13.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.13.0 di Amazon EMR emr-5.13.0 ## Versioni dell'applicazione 5.13.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.13.0 | emr-5.12.3 | emr-5.12.2 | emr-5.12.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.297 | 1,11,67 | 1,11267 | 1,11267 | | Python | 2.7, 3.4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.2 | 1.4.0 | 1.4.0 | 1.4.0 | | HCatalog | 2.3.2-amzn-2 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.2-amzn-2 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.194 | 0.188 | 0.188 | 0.188 | | Spark | 2.3.0 | 2.2.1 | 2.2.1 | 2.2.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.13.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.13.0. Le modifiche sono relative alla versione 5.12.0. **Aggiornamenti** + Spark aggiornato a 2.3.0 + Aggiornato alla versione 1.4.2 HBase + Presto aggiornato a 0.194 + Aggiornato alla versione 1.11.297 AWS SDK per Java **Modifiche, miglioramenti e problemi risolti** + Hive + Backport per [HIVE-15436](https://issues.apache.org/jira/browse/HIVE-15436). Hive migliorato per restituire solo le APIs visualizzazioni. **Problemi noti** + MXNet attualmente non dispone di librerie OpenCV. ## Versioni dei componenti 5.13.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.10.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.22.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.2 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.2 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.2 | HBase client da riga di comando. | | hbase-rest-server | 1.4.2 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.2 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-2 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-2 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-2 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-2 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-2 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-2 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-2 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.1.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.0.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.194 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.194 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | r | 3.4.1 | The R Project for Statistical Computing | | spark-client | 2.3.0 | Client a riga di comando Spark. | | spark-history-server | 2.3.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.3.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.3.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.13.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.13.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.12.3 di Amazon EMR emr-5.12.3 ## Versioni dell'applicazione 5.12.3 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.12.3 | emr-5.12.2 | emr-5.12.1 | emr-5.12.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.267 | 1,11267 | 1,11267 | 1,11267 | | Python | 2.7, 3.4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.0 | 1.4.0 | 1.4.0 | 1.4.0 | | HCatalog | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | | Hive | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | | Hudi | - | - | - | - | | Hue | 4.1.0 | 4.1.0 | 4.1.0 | 4.1.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.188 | 0.188 | 0.188 | 0.188 | | Spark | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.12.3 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.12.3 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.9.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.21.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.0 | HBase client da riga di comando. | | hbase-rest-server | 1.4.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.1.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.0.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.188 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.188 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.1 | Client a riga di comando Spark. | | spark-history-server | 2.2.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.12.3 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.12.3** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.12.2 di Amazon EMR emr-5.12.2 ## Versioni dell'applicazione 5.12.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.12.2 | emr-5.12.1 | emr-5.12.0 | emr-5.11.4 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.267 | 1,11267 | 1,11267 | 1,11238 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.0 | 1.4.0 | 1.4.0 | 1.3.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.0 | 1.4.0 | 1.4.0 | 1.3.1 | | HCatalog | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-0 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.7.3-amzn-6 | | Hive | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.1.0 | 4.1.0 | 4.1.0 | 4.0.1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.0.0 | 1.0.0 | 1.0.0 | 0.12.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.188 | 0.188 | 0.188 | 0.187 | | Spark | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.12.2 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.12.2. Le modifiche sono relative alla versione 5.12.1. Data del rilascio iniziale: 29 agosto 2018 **Modifiche, miglioramenti e problemi risolti** + Questo rilascio risolve una potenziale vulnerabilità di sicurezza. ## Versioni dei componenti 5.12.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.9.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.21.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.0 | HBase client da riga di comando. | | hbase-rest-server | 1.4.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.1.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.0.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.188 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.188 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.1 | Client a riga di comando Spark. | | spark-history-server | 2.2.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.12.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.12.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.12.1 di Amazon EMR emr-5.12.1 ## Versioni dell'applicazione 5.12.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.12.1 | emr-5.12.0 | emr-5.11.4 | emr-5.11.3 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.267 | 1,11267 | 1,11238 | 1,11238 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.0 | 1.4.0 | 1.3.2 | 1.3.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.0 | 1.4.0 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | | Hadoop | 2.8.3-amzn-0 | 2.8.3-amzn-0 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | | Hive | 2.3.2-amzn-1 | 2.3.2-amzn-1 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.1.0 | 4.1.0 | 4.0.1 | 4.0.1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.0.0 | 1.0.0 | 0.12.0 | 0.12.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.13.0- -1,4 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.188 | 0.188 | 0.187 | 0.187 | | Spark | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.12.1 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.12.1. Le modifiche sono relative alla versione 5.12.0. Data del rilascio iniziale: 29 marzo 2018 **Modifiche, miglioramenti e problemi risolti** + Aggiornato il kernel Amazon Linux dell'AMI defaultAmazon Linux per Amazon EMR per risolvere potenziali vulnerabilità. ## Versioni dei componenti 5.12.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.9.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.21.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.0 | HBase client da riga di comando. | | hbase-rest-server | 1.4.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.1.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.0.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.188 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.188 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.1 | Client a riga di comando Spark. | | spark-history-server | 2.2.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.12.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.12.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.12.0 di Amazon EMR emr-5.12.0 ## Versioni dell'applicazione 5.12.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.12.0 | emr-5.11.4 | emr-5.11.3 | emr-5.11.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.267 | 1,11238 | 1,11238 | 1,11238 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.4.0 | 1.3.2 | 1.3.2 | 1.3.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.4.0 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.2-amzn-1 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | | Hadoop | 2.8.3-amzn-0 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | | Hive | 2.3.2-amzn-1 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.1.0 | 4.0.1 | 4.0.1 | 4.0.1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 1.0.0 | 0.12.0 | 0.12.0 | 0.12.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.13.0- -1,4 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.188 | 0.187 | 0.187 | 0.187 | | Spark | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.12.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.12.0. Le modifiche sono relative alla versione 5.11.1. **Aggiornamenti** + AWS SDK per Java 1.11.238 ⇒ 1.11.267. Per ulteriori informazioni, consulta [AWS SDK for Java Change Log GitHub on](https://github.com/aws/aws-sdk-java/blob/master/CHANGELOG.md). + Hadoop 2.7.3 ⇒ 2.8.3. Per ulteriori informazioni, consulta [Rilasci di Apache Hadoop](http://hadoop.apache.org/releases.html). + Flink 1.3.2 ⇒ 1.4.0. Per ulteriori informazioni, consulta l'[Annuncio del rilascio di Apache Flink 1.4.0](https://flink.apache.org/news/2017/12/12/release-1.4.0.html). + HBase 1.3.1 ⇒ 1.4.0. Per ulteriori informazioni, consulta l'annuncio di [HBase rilascio](http://mail-archives.apache.org/mod_mbox/www-announce/201712.mbox/%3CCA+RK=_AU+tB=7SU1HRbeKVEd-sKA5WcJo3oa43vQ6PMB3L9pgQ@mail.gmail.com%3E). + Hue 4.0.1 ⇒ 4.1.0. Per ulteriori informazioni, consulta le [Note di rilascio](https://docs.gethue.com/releases/release-notes-4.10.0/). + MxNet 0.12.0 ⇒ 1.0.0. [Per ulteriori informazioni, vedere Change Log on. MXNet ](https://github.com/apache/incubator-mxnet/releases/tag/1.0.0) GitHub + Presto 0.187 ⇒ 0.188. Per ulteriori informazioni, consulta le [Note di rilascio](https://prestodb.io/docs/current/release/release-0.188.html). **Modifiche, miglioramenti e problemi risolti** + **Hadoop** + La proprietà `yarn.resourcemanager.decommissioning.timeout` è stata modificata in `yarn.resourcemanager.nodemanager-graceful-decommission-timeout-secs`. È possibile utilizzare questa proprietà per personalizzare il dimensionamento verso il basso del cluster. Per maggiori informazioni, consulta [Dimensionamento verso il basso del cluster](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-scaledown-behavior.html) nella *Guida alla gestione di Amazon EMR*. + L'interfaccia CLI di Hadoop ha aggiunto l'opzione `-d` per il comando `cp` (copia), che specifica la copia diretta. Questo comando può essere utilizzato per evitare di creare un file `.COPYING` intermediario, rendendo più veloce la copia dei dati in Amazon S3. Per ulteriori informazioni, consulta [HADOOP-12384](https://issues.apache.org/jira/browse/HADOOP-12384). + **Pig** + È stato aggiunto `pig-env`, che semplifica la configurazione delle proprietà dell'ambiente Pig. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). + **Presto** + Aggiunta la classificazione della configurazione `presto-connector-redshift`, che puoi utilizzare per configurare i valori nel file di configurazione `redshift.properties` di Presto. Per ulteriori informazioni, consulta [Connettore Redshift](https://prestodb.io/docs/current/connector/redshift.html) nella documentazione di Presto e [Configurazione delle applicazioni](emr-configure-apps.md). + Il supporto Presto per EMRFS è stato aggiunto ed è la configurazione predefinita. Le versioni precedenti di Amazon EMR utilizzavano PrestOS3FileSystem, che era l'unica opzione. Per ulteriori informazioni, consulta [Configurazione EMRFS e PrestOS3 FileSystem](emr-presto-considerations.md#emr-presto-prestos3). **Nota** Se esegui una query sui dati sottostanti in Amazon S3 con Amazon EMR versione 5.12.0, possono verificarsi errori di Presto. Questo avviene perché Presto non riesce a raccogliere i valori di classificazione della configurazione da `emrfs-site.xml`. Come soluzione alternativa, crea una sottodirectory `emrfs` in `usr/lib/presto/plugin/hive-hadoop2/` e crea un collegamento simbolico in `usr/lib/presto/plugin/hive-hadoop2/emrfs` sul file `/usr/share/aws/emr/emrfs/conf/emrfs-site.xml` esistente. Quindi riavvia il processo presto-server (`sudo presto-server stop` seguito da `sudo presto-server start`). + **Spark** + [SPARK-22036 con backport: la moltiplicazione a volte restituisce](https://issues.apache.org/jira/browse/SPARK-22036) un valore nullo. BigDecimal **Problemi noti** + MXNet non include le librerie OpenCV. + SparkR non è disponibile per i cluster creati utilizzando un'AMI personalizzata perché R non è installato per impostazione predefinita sui nodi del cluster. ## Versioni dei componenti 5.12.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0.1 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.9.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.21.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.4.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.8.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.8.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.8.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.8.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.8.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.8.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.8.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.8.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.8.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.8.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.4.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.4.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.4.0 | HBase client da riga di comando. | | hbase-rest-server | 1.4.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.4.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-1 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-1 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-1 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-1 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-1 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-1 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-1 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.1.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 1.0.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.1.85 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.13.0- -1,4 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.13.0- -1,4 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.188 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.188 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.1 | Client a riga di comando Spark. | | spark-history-server | 2.2.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.12.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.12.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-env | Change values in the Pig environment. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-redshift | Modifica i valori nel file redshift.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.11.4 di Amazon EMR emr-5.11.4 ## Versioni dell'applicazione 5.11.4 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.11.4 | emr-5.11.3 | emr-5.11.2 | emr-5.11.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.238 | 1,11238 | 1,11238 | 1,11238 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | | Hadoop | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | | Hive | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 0.12.0 | 0.12.0 | 0.12.0 | 0.12.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.187 | 0.187 | 0.187 | 0.187 | | Spark | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.11.4 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.11.4 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.8.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.20.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-6 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-6 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-6 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-6 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-6 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-6 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-6 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-6 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-6 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-6 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.0.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 0.12.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.0.176 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.187 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.187 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.1 | Client a riga di comando Spark. | | spark-history-server | 2.2.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.11.4 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.11.4** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.11.3 di Amazon EMR emr-5.11.3 ## Versioni dell'applicazione 5.11.3 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.11.3 | emr-5.11.2 | emr-5.11.1 | emr-5.11.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.238 | 1,11238 | 1,11238 | 1,11238 | | Python | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | | Hadoop | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | | Hive | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 0.12.0 | 0.12.0 | 0.12.0 | 0.12.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.187 | 0.187 | 0.187 | 0.187 | | Spark | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.11.3 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.11.3. Le modifiche sono relative alla versione 5.11.2. Data del rilascio iniziale: 18 luglio 2019 **Modifiche, miglioramenti e problemi risolti** + Aggiornata l'AMI predefinita Amazon Linux per Amazon EMR per importanti aggiornamenti di sicurezza del kernel Linux, inclusi i problemi di negazione del servizio TCP SACK ([AWS-2019-005](https://aws.amazon.com/security/security-bulletins/AWS-2019-005/)). ## Versioni dei componenti 5.11.3 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.8.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.20.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-6 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-6 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-6 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-6 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-6 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-6 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-6 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-6 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-6 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-6 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.0.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 0.12.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.0.176 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.187 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.187 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.1 | Client a riga di comando Spark. | | spark-history-server | 2.2.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.11.3 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.11.3** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.11.2 di Amazon EMR emr-5.11.2 ## Versioni dell'applicazione 5.11.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.11.2 | emr-5.11.1 | emr-5.11.0 | emr-5.10.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.238 | 1,11238 | 1,11238 | 1,11,221 | | Python | 2.7, 3.4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.1-amzn-0 | | Hadoop | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-5 | | Hive | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 0.12.0 | 0.12.0 | 0.12.0 | 0.12.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.187 | 0.187 | 0.187 | 0.187 | | Spark | 2.2.1 | 2.2.1 | 2.2.1 | 2.2.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.11.2 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.11.2. Le modifiche sono relative alla versione 5.11.1. Data del rilascio iniziale: 29 agosto 2018 **Modifiche, miglioramenti e problemi risolti** + Questo rilascio risolve una potenziale vulnerabilità di sicurezza. ## Versioni dei componenti 5.11.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.8.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.20.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-6 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-6 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-6 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-6 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-6 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-6 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-6 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-6 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-6 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-6 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.0.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 0.12.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.0.176 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.187 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.187 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.1 | Client a riga di comando Spark. | | spark-history-server | 2.2.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.11.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.11.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.11.1 di Amazon EMR emr-5.11.1 ## Versioni dell'applicazione 5.11.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.11.1 | emr-5.11.0 | emr-5.10.1 | emr-5.10.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.238 | 1,11238 | 1,11,221 | 1,11,221 | | Python | 2.7, 3.4 | 2,7, 3,4 | 2,7, 3,4 | 2,7, 3,4 | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.1-amzn-0 | 2.3.1-amzn-0 | | Hadoop | 2.7.3-amzn-6 | 2.7.3-amzn-6 | 2.7.3-amzn-5 | 2.7.3-amzn-5 | | Hive | 2.3.2-amzn-0 | 2.3.2-amzn-0 | 2.3.1-amzn-0 | 2.3.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 0.12.0 | 0.12.0 | 0.12.0 | 0.12.0 | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.187 | 0.187 | 0.187 | 0.187 | | Spark | 2.2.1 | 2.2.1 | 2.2.0 | 2.2.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.3 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.11.1 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.11.1. Le modifiche sono relative al rilascio di Amazon EMR 5.8.0. Data del rilascio iniziale: 22 gennaio 2018 **Modifiche, miglioramenti e problemi risolti** + Aggiornato il kernel Amazon Linux dell'AMI defaultAmazon Linux per Amazon EMR per risolvere le vulnerabilità associate all'esecuzione speculativa (CVE-2017-5715, CVE-2017-5753 e CVE-2017-5754). Per ulteriori informazioni, consulta [https://aws.amazon.com/security/security-bulletins/AWS-2018-013/](https://aws.amazon.com/security/security-bulletins/AWS-2018-013/). ## Versioni dei componenti 5.11.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.8.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.20.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-6 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-6 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-6 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-6 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-6 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-6 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-6 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-6 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-6 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-6 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.0.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 0.12.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.0.176 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.187 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.187 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.1 | Client a riga di comando Spark. | | spark-history-server | 2.2.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.11.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.11.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.11.0 di Amazon EMR emr-5.11.0 ## Versioni dell'applicazione 5.11.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.11.0 | emr-5.10.1 | emr-5.10.0 | emr-5.9.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.238 | 1,11,221 | 1,11,221 | 1,11,183 | | Python | 2.7, 3.4 | 2,7, 3,4 | 2,7, 3,4 | Non monitorato | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.2-amzn-0 | 2.3.1-amzn-0 | 2.3.1-amzn-0 | 2.3.0-amzn-0 | | Hadoop | 2.7.3-amzn-6 | 2.7.3-amzn-5 | 2.7.3-amzn-5 | 2.7.3-amzn-4 | | Hive | 2.3.2-amzn-0 | 2.3.1-amzn-0 | 2.3.1-amzn-0 | 2.3.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 0.12.0 | 0.12.0 | 0.12.0 | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.187 | 0.187 | 0.187 | 0.184 | | Spark | 2.2.1 | 2.2.0 | 2.2.0 | 2.2.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.3 | 0.7.2 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.11.0 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.11.0. Le modifiche sono relative alla versione 5.10.0. **Aggiornamenti** + Hive 2.3.2 + Spark 2.2.1 + SDK per Java: 1.11.238 **Nuove funzionalità** + Spark + Aggiunta l'impostazione `spark.decommissioning.timeout.threshold` che migliora il comportamento di disattivazione di Spark quando si utilizzano istanze Spot. Per ulteriori informazioni, consulta [Configurazione del comportamento di disattivazione di nodi](emr-spark-configure.md#spark-decommissioning). + [È stato aggiunto il `aws-sagemaker-spark-sdk` componente a Spark, che installa Amazon SageMaker Spark e le dipendenze associate per l'integrazione di Spark con Amazon. SageMaker](https://aws.amazon.com/sagemaker/) Puoi usare Amazon SageMaker Spark per creare pipeline di machine learning (ML) Spark utilizzando Amazon Stages. SageMaker *Per ulteriori informazioni, consulta il [Readme di SageMaker Spark](https://github.com/aws/sagemaker-spark/blob/master/README.md) su GitHub e [Using Apache Spark with Amazon SageMaker nella Amazon Developer](https://docs.aws.amazon.com/sagemaker/latest/dg/apache-spark.html) Guide. SageMaker * **Problemi noti** + MXNet non include le librerie OpenCV. + Per impostazione predefinita, Hive 2.3.2 è impostato su `hive.compute.query.using.stats=true`. Questo fa sì che le query individuino i dati dalle statistiche esistenti anziché direttamente dai dati, il che potrebbe creare confusione. Ad esempio, se hai una tabella con `hive.compute.query.using.stats=true` e carichi nuovi file sulla tabella `LOCATION`, se esegui una query `SELECT COUNT(*)` sulla tabella ti restituisce il conto delle statistiche e non tiene in considerazione le righe aggiunte. Una soluzione consiste nell'usare il comando `ANALYZE TABLE` per raccogliere nuove statistiche o impostare `hive.compute.query.using.stats=false`. Per ulteriori informazioni, consulta [Statistiche in Hive](https://cwiki.apache.org/confluence/display/Hive/StatsDev#StatsDev-StatisticsinHive) nella documentazione di Apache Hive. ## Versioni dei componenti 5.11.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | aws-sagemaker-spark-sdk | 1.0 | SageMaker SDK Amazon Spark | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.8.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.20.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-6 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-6 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-6 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-6 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-6 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-6 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-6 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-6 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-6 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-6 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.2-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.2-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.2-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.2-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.2-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.2-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.2-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.0.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 0.12.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.0.176 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.187 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.187 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.1 | Client a riga di comando Spark. | | spark-history-server | 2.2.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.11.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.11.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.10.1 di Amazon EMR emr-5.10.1 ## Versioni dell'applicazione 5.10.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.10.1 | emr-5.10.0 | emr-5.9.1 | emr-5.9.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.221 | 1,11,221 | 1,11,183 | 1,11,183 | | Python | 2.7, 3.4 | 2,7, 3,4 | Non monitorato | Non monitorato | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.2 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.1-amzn-0 | 2.3.1-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hadoop | 2.7.3-amzn-5 | 2.7.3-amzn-5 | 2.7.3-amzn-4 | 2.7.3-amzn-4 | | Hive | 2.3.1-amzn-0 | 2.3.1-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.0.1 | 4.0.1 | 4.0.1 | 4.0.1 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | | MXNet | 0.12.0 | 0.12.0 | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | | Presto | 0.187 | 0.187 | 0.184 | 0.184 | | Spark | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.3 | 0.7.2 | 0.7.2 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.10.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.10.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.7.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.20.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-5 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-5 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-5 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-5 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-5 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-5 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-5 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-5 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-5 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-5 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.0.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 0.12.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.0.176 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.187 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.187 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.0 | Client a riga di comando Spark. | | spark-history-server | 2.2.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.10.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.10.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.10.0 di Amazon EMR emr-5.10.0 ## Versioni dell'applicazione 5.10.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/),, [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), e [http://sqoop.apache.org/](http://sqoop.apache.org/) [https://zookeeper.apache.org](https://zookeeper.apache.org). La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.10.0 | emr-5.9.1 | emr-5.9.0 | emr-5.8.3 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.221 | 1,11,183 | 1,11,183 | 1,11,160 | | Python | 2,7, 3,4 | Non monitorato | Non monitorato | Non monitorato | | Scala | 2.11,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.2 | 1.3.2 | 1.3.2 | 1.3.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.1-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hadoop | 2.7.3-amzn-5 | 2.7.3-amzn-4 | 2.7.3-amzn-4 | 2.7.3-amzn-3 | | Hive | 2.3.1-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.0.1 | 4.0.1 | 4.0.1 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | 0.4.0-incubating | - | | MXNet | 0.12.0 | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.16.0-amzn-1 | | Presto | 0.187 | 0.184 | 0.184 | 0.170 | | Spark | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.3 | 0.7.2 | 0.7.2 | 0.7.2 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.10.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.10.0. Le modifiche sono relative al rilascio di Amazon EMR 5.9.0. **Aggiornamenti** + AWS SDK per Java 1.11.221 + Hive 2.3.1 + Presto 0.187 **Nuove funzionalità** + Aggiunto supporto per l'autenticazione Kerberos. Per ulteriori informazioni, consulta [Utilizzo dell'autenticazione Kerberos](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-kerberos.html) nella *Guida alla gestione di Amazon EMR* + Aggiunto supporto per i ruoli IAM per EMRFS. Per ulteriori informazioni, consulta [Configurazione dei ruoli IAM per le richieste EMRFS ad Amazon S3](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-emrfs-iam-role.html) nella *Guida alla gestione di Amazon EMR* + Aggiunto supporto per i tipi di istanza P2 e P3 basati su GPU. Per ulteriori informazioni, consulta [Istanze P2 di Amazon EC2](https://aws.amazon.com/ec2/instance-types/p2/) e [Istanze P3 di Amazon EC2](https://aws.amazon.com/ec2/instance-types/p3/). NVIDIA driver 384.81 e CUDA driver 9.0.176 sono installati su questi tipi di istanza per impostazione predefinita. + Aggiunta del supporto per [Apache MXNet](emr-mxnet.md). **Modifiche, miglioramenti e problemi risolti** + Presto + È stato aggiunto il supporto per l'utilizzo di AWS Glue Data Catalog come metastore Hive predefinito. Per ulteriori informazioni, consulta [Usare Presto con il AWS Glue Data Catalog](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-presto.html#emr-presto-glue). + Aggiunto supporto per [funzioni geospaziali](https://prestodb.io/docs/current/functions/geospatial.html). + Aggiunto supporto [spill to disk](https://prestodb.io/docs/current/admin/spill.html) per join. + Aggiunto supporto per il [connettore Redshift](https://prestodb.io/docs/current/connector/redshift.html). + Spark + Backport per [SPARK-20640](https://issues.apache.org/jira/browse/SPARK-20640), che rende il timeout rcp e i tentativi per i valori di registrazione shuffle configurabili utilizzando le `spark.shuffle.registration.timeout``spark.shuffle.registration.maxAttempts` proprietà. + [SPARK-21549](https://issues.apache.org/jira/browse/SPARK-21549) con backport, che corregge un errore che si verifica durante la scrittura personalizzata su posizioni non HDFS. OutputFormat + Backport per [Hadoop-13270](https://issues.apache.org/jira/browse/HADOOP-13270) + Le librerie Numpy, Scipy e Matplotlib sono state rimosse dall'AMI di base di Amazon EMR. Se hai bisogno di queste librerie per tua applicazione, sono disponibili nella repository dell'applicazione, così potrai usare un'operazione di bootstrap per installarle su tutti i nodi usando `yum install`. + L'AMI di base Amazon EMR non dispone più dei pacchetti RPM di applicazione inclusi, per cui i pacchetti RPM non sono più presenti sui nodi cluster. Custom AMIs e l'AMI di base Amazon EMR ora fanno riferimento al repository di pacchetti RPM in Amazon S3. + A causa dell'introduzione della fatturazione al secondo in Amazon EC2, il valore predefinito **Scale down behavior (Comportamento di dimensionamento verso il basso)** è diventato **Terminate at task completion (Termina al completamento dell'attività)** anziché **Terminate at instance hour (Termina all'ora dell'istanza)**. Per maggiori informazioni, vedi [Configura il ridimensionamento del cluster](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-scaledown-behavior.html). **Problemi noti** + MXNet non include le librerie OpenCV. + Per impostazione predefinita, Hive 2.3.1 è impostato su `hive.compute.query.using.stats=true`. Questo fa sì che le query individuino i dati dalle statistiche esistenti anziché direttamente dai dati, il che potrebbe creare confusione. Ad esempio, se hai una tabella con `hive.compute.query.using.stats=true` e carichi nuovi file sulla tabella `LOCATION`, se esegui una query `SELECT COUNT(*)` sulla tabella ti restituisce il conto delle statistiche e non tiene in considerazione le righe aggiunte. Una soluzione consiste nell'usare il comando `ANALYZE TABLE` per raccogliere nuove statistiche o impostare `hive.compute.query.using.stats=false`. Per ulteriori informazioni, consulta [Statistiche in Hive](https://cwiki.apache.org/confluence/display/Hive/StatsDev#StatsDev-StatisticsinHive) nella documentazione di Apache Hive. ## Versioni dei componenti 5.10.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.5.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.7.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.20.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-5 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-5 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-5 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-5 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-5 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-5 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-5 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-5 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-5 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-5 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.0.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mxnet | 0.12.0 | Una libreria flessibile, scalabile ed efficiente per il deep learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | nvidia-cuda | 9.0.176 | Driver Nvidia e kit di strumenti Cuda | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.187 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.187 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.0 | Client a riga di comando Spark. | | spark-history-server | 2.2.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.3 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.10.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.10.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.9.1 di Amazon EMR emr-5.9.1 ## Versioni dell'applicazione 5.9.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.9.1 | emr-5.9.0 | emr-5.8.3 | emr-5.8.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.183 | 1,11,183 | 1,11,160 | 1,11,160 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.2 | 1.3.2 | 1.3.1 | 1.3.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hadoop | 2.7.3-amzn-4 | 2.7.3-amzn-4 | 2.7.3-amzn-3 | 2.7.3-amzn-3 | | Hive | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.0.1 | 4.0.1 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | 0.4.0-incubating | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.17.0 | 0.16.0-amzn-1 | 0.16.0-amzn-1 | | Presto | 0.184 | 0.184 | 0.170 | 0.170 | | Spark | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.9.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.9.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.4.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.7.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.19.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.0-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.0-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.0.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.184 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.184 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.0 | Client a riga di comando Spark. | | spark-history-server | 2.2.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.9.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.9.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Modifica i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.9.0 di Amazon EMR emr-5.9.0 ## Versioni dell'applicazione 5.9.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [http://mahout.apache.org/](http://mahout.apache.org/),, [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.9.0 | emr-5.8.3 | emr-5.8.2 | emr-5.8.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.183 | 1,11,160 | 1,11,160 | 1,11,160 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.2 | 1.3.1 | 1.3.1 | 1.3.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hadoop | 2.7.3-amzn-4 | 2.7.3-amzn-3 | 2.7.3-amzn-3 | 2.7.3-amzn-3 | | Hive | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 4.0.1 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | 0.4.0-incubating | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.17.0 | 0.16.0-amzn-1 | 0.16.0-amzn-1 | 0.16.0-amzn-1 | | Presto | 0.184 | 0.170 | 0.170 | 0.170 | | Spark | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.9.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.9.0. Le modifiche sono relative al rilascio di Amazon EMR 5.8.0. Data del rilascio: 5 ottobre 2017 Ultimo aggiornamento della caratteristica: 12 ottobre 2017 **Aggiornamenti** + AWS SDK per Java versione 1.11.183 + Flink 1.3.2 + Hue 4.0.1 + Pig 0.17.0 + Presto 0.184 **Nuove funzionalità** + Aggiunto il supporto per Livy (versione 0.4.0-incubazione). Per ulteriori informazioni, consulta [Apache Livy](emr-livy.md). + Aggiunto il supporto per Hue Notebook per Spark. + Aggiunto supporto per le istanze Amazon EC2 serie i3 (12 ottobre 2017). **Modifiche, miglioramenti e problemi risolti** + Spark + Aggiunto un nuovo set di caratteristiche per garantire che Spark gestisca più elegantemente la terminazione dei nodi a causa di un ridimensionamento manuale o di una richiesta di policy di scalabilità automatica. Per ulteriori informazioni, consulta [Configurazione del comportamento di disattivazione di nodi](emr-spark-configure.md#spark-decommissioning). + Viene utilizzato SSL invece di 3DES per la crittografia in transito del servizio di trasferimento dei blocchi, migliorando così le prestazioni dei tipi di istanza Amazon EC2 con AES-NI. + Backport per [SPARK-21494](https://issues.apache.org/jira/browse/SPARK-21494). + Zeppelin + Backport per [ZEPPELIN-2377](https://issues.apache.org/jira/browse/ZEPPELIN-2377). + HBase + Aggiunta la patch [HBASE-18533](https://issues.apache.org/jira/browse/HBASE-18533), che consente valori aggiuntivi per la configurazione utilizzando la classificazione della configurazione. HBase BucketCache `hbase-site` + Hue + È stato aggiunto il supporto AWS Glue Data Catalog per l'editor di query Hive in Hue. + Per impostazione predefinita, i superuser su Hue possono accedere a tutti i file a cui hanno accesso i ruoli IAM di Amazon EMR. Gli utenti appena creati non dispongono automaticamente delle autorizzazioni per accedere al filebrowser Amazon S3 e devono disporre delle autorizzazioni `filebrowser.s3_access` attivate per il proprio gruppo. + È stato risolto un problema che rendeva inaccessibili i dati JSON sottostanti creati utilizzando AWS Glue Data Catalog. **Problemi noti** + L'avvio del cluster non va a buon fine quando tutte le applicazioni sono installate e la dimensione del volume di root Amazon EBS di default non viene modificata. Come soluzione alternativa, utilizzate il `aws emr create-cluster` comando di AWS CLI e specificate un parametro più grande. `--ebs-root-volume-size` + Per impostazione predefinita, Hive 2.3.0 è impostato su `hive.compute.query.using.stats=true`. Questo fa sì che le query individuino i dati dalle statistiche esistenti anziché direttamente dai dati, il che potrebbe creare confusione. Ad esempio, se hai una tabella con `hive.compute.query.using.stats=true` e carichi nuovi file sulla tabella `LOCATION`, se esegui una query `SELECT COUNT(*)` sulla tabella ti restituisce il conto delle statistiche e non tiene in considerazione le righe aggiunte. Una soluzione consiste nell'usare il comando `ANALYZE TABLE` per raccogliere nuove statistiche o impostare `hive.compute.query.using.stats=false`. Per ulteriori informazioni, consulta [Statistiche in Hive](https://cwiki.apache.org/confluence/display/Hive/StatsDev#StatsDev-StatisticsinHive) nella documentazione di Apache Hive. ## Versioni dei componenti 5.9.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.4.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.7.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.19.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.2 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-4 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-4 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-4 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-4 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-4 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-4 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-4 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-4 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-4 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-4 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.0-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.0-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 4.0.1 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | livy-server | 0.4.0-incubating | Interfaccia REST per l'interazione con Apache Spark | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.184 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.184 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.17.0 | Client a riga di comando Pig. | | spark-client | 2.2.0 | Client a riga di comando Spark. | | spark-history-server | 2.2.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.9.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.9.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Modifica i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | livy-conf | Modifica i valori nel file livy.conf di Livy. | | livy-env | Modifica i valori nell'ambiente Livy. | | livy-log4j | Modifica le impostazioni Livy log4j.properties. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.8.3 di Amazon EMR emr-5.8.3 ## Versioni dell'applicazione 5.8.3 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.8.3 | emr-5.8.2 | emr-5.8.1 | emr-5.8.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.160 | 1,11,160 | 1,11,160 | 1,11,160 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hadoop | 2.7.3-amzn-3 | 2.7.3-amzn-3 | 2.7.3-amzn-3 | 2.7.3-amzn-3 | | Hive | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.16.0-amzn-1 | 0.16.0-amzn-1 | 0.16.0-amzn-1 | 0.16.0-amzn-1 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.8.3 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.8.3 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.4.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.6.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.18.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.0-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.0-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-1 | Client a riga di comando Pig. | | spark-client | 2.2.0 | Client a riga di comando Spark. | | spark-history-server | 2.2.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.8.3 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.8.3** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Modifica i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.8.2 di Amazon EMR emr-5.8.2 ## Versioni dell'applicazione 5.8.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.8.2 | emr-5.8.1 | emr-5.8.0 | emr-5.7.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.160 | 1,11,160 | 1,11,160 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-3 | 2.7.3-amzn-3 | 2.7.3-amzn-3 | 2.7.3-amzn-2 | | Hive | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.16.0-amzn-1 | 0.16.0-amzn-1 | 0.16.0-amzn-1 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.2.0 | 2.2.0 | 2.2.0 | 2.1.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.8.2 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.8.2. Le modifiche sono relative alla versione 5.8.1. Data del rilascio iniziale: 29 marzo 2018 **Modifiche, miglioramenti e problemi risolti** + Aggiornato il kernel Amazon Linux dell'AMI defaultAmazon Linux per Amazon EMR per risolvere potenziali vulnerabilità. ## Versioni dei componenti 5.8.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.4.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.6.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.18.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.0-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.0-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-1 | Client a riga di comando Pig. | | spark-client | 2.2.0 | Client a riga di comando Spark. | | spark-history-server | 2.2.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.8.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.8.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Modifica i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.8.1 di Amazon EMR emr-5.8.1 ## Versioni dell'applicazione 5.8.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.8.1 | emr-5.8.0 | emr-5.7.1 | emr-5.7.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.160 | 1,11,160 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.1 | 1.3.1 | 1.3.0 | 1.3.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.1 | | HCatalog | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-3 | 2.7.3-amzn-3 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | | Hive | 2.3.0-amzn-0 | 2.3.0-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | | Pig | 0.16.0-amzn-1 | 0.16.0-amzn-1 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.2.0 | 2.2.0 | 2.1.1 | 2.1.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.2 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.8.1 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.8.1. Le modifiche sono relative al rilascio di Amazon EMR 5.8.0. Data del rilascio iniziale: 22 gennaio 2018 **Modifiche, miglioramenti e problemi risolti** + Aggiornato il kernel Amazon Linux dell'AMI defaultAmazon Linux per Amazon EMR per risolvere le vulnerabilità associate all'esecuzione speculativa (CVE-2017-5715, CVE-2017-5753 e CVE-2017-5754). Per ulteriori informazioni, consulta [https://aws.amazon.com/security/security-bulletins/AWS-2018-013/](https://aws.amazon.com/security/security-bulletins/AWS-2018-013/). ## Versioni dei componenti 5.8.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.4.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.6.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.18.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.0-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.0-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-1 | Client a riga di comando Pig. | | spark-client | 2.2.0 | Client a riga di comando Spark. | | spark-history-server | 2.2.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.8.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.8.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Modifica i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.8.0 di Amazon EMR emr-5.8.0 ## Versioni dell'applicazione 5.8.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.8.0 | emr-5.7.1 | emr-5.7.0 | emr-5.6.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.11.160 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.1 | 1.3.0 | 1.3.0 | 1.2.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.1 | 1.3.0 | | HCatalog | 2.3.0-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-3 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | | Hive | 2.3.0-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.9.0- -1,2 HBase | | Pig | 0.16.0-amzn-1 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.2.0 | 2.1.1 | 2.1.1 | 2.1.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.2 | 0.7.2 | 0.7.2 | 0.7.1 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.8.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.8.0. Le modifiche sono relative al rilascio di Amazon EMR 5.7.0. Data del rilascio iniziale: 10 agosto 2017 Ultimo aggiornamento della caratteristica: 25 settembre 2017 **Aggiornamenti** + AWS SDK 1.11.160 + Flink 1.3.1 + Hive 2.3.0. Per ulteriori informazioni, consulta [Note di rilascio](https://issues.apache.org/jira/secure/ConfigureReleaseNote.jspa?projectId=12310843&version=12340269) sul sito di Apache Hive. + Spark 2.2.0. Per ulteriori informazioni, consulta [Note di rilascio](https://spark.apache.org/releases/spark-release-2-2-0.html) sul sito di Apache Spark. **Nuove funzionalità** + Aggiunto supporto per la visualizzazione della cronologia dell'applicazione (25 settembre 2017). Per ulteriori informazioni, consulta [Visualizzazione della cronologia dell'applicazione](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-cluster-application-history.html) nella *Guida alla gestione di Amazon EMR*. **Modifiche, miglioramenti e problemi risolti** + **Integrazione con AWS Glue Data Catalog** + È stata aggiunta la possibilità per Hive e Spark SQL di utilizzare AWS Glue Data Catalog come archivio di metadati Hive. Per ulteriori informazioni, consultare [Utilizzo del AWS Glue Data Catalog come metastore per Hive](emr-hive-metastore-glue.md) e [Usa il catalogo AWS Glue Data Catalog con Spark su Amazon EMR](emr-spark-glue.md). + Aggiunto **Application history (Cronologia dell'applicazione)** ai dettagli del cluster, il che ti permette di visualizzare i dati cronologici delle applicazioni YARN e i dettagli aggiuntivi per le applicazioni Spark. Per ulteriori informazioni, consulta [Visualizzazione della cronologia dell'applicazione](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-cluster-application-history.html) nella *Guida alla gestione di Amazon EMR*. + **Oozie** + Backport per [OOZIE-2748](https://issues.apache.org/jira/browse/OOZIE-2748). + **Hue** + Backport per [HUE-5859](https://issues.cloudera.org/browse/HUE-5859) + **HBase** + È stata aggiunta una patch per visualizzare l'ora di avvio del server HBase master tramite Java Management Extensions (JMX) utilizzando. `getMasterInitializedTime` + Aggiunta patch che migliora il tempo di avvio del cluster. **Problemi noti** + L'avvio del cluster non va a buon fine quando tutte le applicazioni sono installate e la dimensione del volume di root Amazon EBS di default non viene modificata. Come soluzione alternativa, utilizzate il `aws emr create-cluster` comando di AWS CLI e specificate un parametro più grande. `--ebs-root-volume-size` + Per impostazione predefinita, Hive 2.3.0 è impostato su `hive.compute.query.using.stats=true`. Questo fa sì che le query individuino i dati dalle statistiche esistenti anziché direttamente dai dati, il che potrebbe creare confusione. Ad esempio, se hai una tabella con `hive.compute.query.using.stats=true` e carichi nuovi file sulla tabella `LOCATION`, se esegui una query `SELECT COUNT(*)` sulla tabella ti restituisce il conto delle statistiche e non tiene in considerazione le righe aggiunte. Una soluzione consiste nell'usare il comando `ANALYZE TABLE` per raccogliere nuove statistiche o impostare `hive.compute.query.using.stats=false`. Per ulteriori informazioni, consulta [Statistiche in Hive](https://cwiki.apache.org/confluence/display/Hive/StatsDev#StatsDev-StatisticsinHive) nella documentazione di Apache Hive. + **Spark**: quando si utilizza Spark, c'è un problema di perdita del gestore di file con il daemon apppusher, che può apparire per un processo Spark a esecuzione prolungata dopo diverse ore o giorni. Per risolvere il problema, connettiti al nodo primario e digita `sudo /etc/init.d/apppusher stop`. Questa azione arresta l'apppusher daemon, che Amazon EMR riavvierà automaticamente. + **Cronologia dell'applicazione** + I dati cronologici per gli executor Spark terminati non sono disponibili. + La cronologia dell'applicazione non è disponibile per i cluster che utilizzano una configurazione di sicurezza per attivare la crittografia in-flight. ## Versioni dei componenti 5.8.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.4.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.4.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.4.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.6.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.18.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.3.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.3.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.3.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.3.0-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.3.0-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.3.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.3.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-1 | Client a riga di comando Pig. | | spark-client | 2.2.0 | Client a riga di comando Spark. | | spark-history-server | 2.2.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.2.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.2.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.8.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.8.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Modifica i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.7.1 di Amazon EMR emr-5.7.1 ## Versioni dell'applicazione 5.7.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.7.1 | emr-5.7.0 | emr-5.6.1 | emr-5.6.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.0 | 1.3.0 | 1.2.1 | 1.2.1 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.1 | 1.3.0 | 1.3.0 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.11.0- -1,3 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.1.1 | 2.1.1 | 2.1.1 | 2.1.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.2 | 0.7.2 | 0.7.1 | 0.7.1 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.7.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.7.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.3.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.3.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.5.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.18.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.1 | Client a riga di comando Spark. | | spark-history-server | 2.1.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.7.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.7.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Modifica i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.7.0 di Amazon EMR emr-5.7.0 ## Versioni dell'applicazione 5.7.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.7.0 | emr-5.6.1 | emr-5.6.0 | emr-5.5.4 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.3.0 | 1.2.1 | 1.2.1 | 1.2.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.1 | 1.3.0 | 1.3.0 | 1.3.0 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.11.0- -1,3 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.1.1 | 2.1.1 | 2.1.1 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.2 | 0.7.1 | 0.7.1 | 0.7.1 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.7.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.7.0. Le modifiche sono relative al rilascio di Amazon EMR 5.6.0. Data del rilascio: 13 luglio 2017 **Aggiornamenti** + Flink 1.3.0 + Phoenix 4.11.0 + Zeppelin 0.7.2 **Nuove funzionalità** + Aggiunta la capacità di specificare un'AMI Amazon Linux quando si crea un cluster. Per ulteriori informazioni, consulta [Utilizzo di un AMI personalizzato](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-custom-ami.html). **Modifiche, miglioramenti e problemi risolti** + **HBase** + Aggiunta la funzionalità di configurazione HBase dei cluster di lettura e replica. Consulta [Utilizzare la replica di lettura al cluster.](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-hbase-s3.html#emr-hbase-s3-read-replica) + Numerosi miglioramenti e correzioni dei bug. + **Presto**: aggiunta la possibilità di configurare `node.properties`. + **YARN**: aggiunta la possibilità di configurare `container-log4j.properties`. + **Sqoop**: backport per [SQOOP-2880](https://issues.apache.org/jira/browse/SQOOP-2880), che introduce un argomento che ti permette di impostare la directory temporanea di Sqoop. ## Versioni dei componenti 5.7.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.3.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.3.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.5.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.18.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.3.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.11.0- -1,3 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.11.0- -1,3 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.1 | Client a riga di comando Spark. | | spark-history-server | 2.1.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.7.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.7.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Modifica i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.6.1 di Amazon EMR emr-5.6.1 ## Versioni dell'applicazione 5.6.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.6.1 | emr-5.6.0 | emr-5.5.4 | emr-5.5.3 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.2.1 | 1.2.1 | 1.2.0 | 1.2.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.13.0 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.1.1 | 2.1.1 | 2.1.0 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.1 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.6.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.6.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.3.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.3.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.5.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.17.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.2.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.9.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.9.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.1 | Client a riga di comando Spark. | | spark-history-server | 2.1.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.6.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.6.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Modifica i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.6.0 di Amazon EMR emr-5.6.0 ## Versioni dell'applicazione 5.6.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.6.0 | emr-5.5.4 | emr-5.5.3 | emr-5.5.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.2.1 | 1.2.0 | 1.2.0 | 1.2.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.13.0 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.1.1 | 2.1.0 | 2.1.0 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.1 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.6.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.6.0. Le modifiche sono relative al rilascio di Amazon EMR 5.5.0. Data del rilascio: 5 giugno 2017 **Aggiornamenti** + Flink 1.2.1 + HBase 1.3.1 + Mahout 0.13.0. Questa è la prima versione di Mahout che supporta Spark 2.x in Amazon EMR versione 5.0 e successive. + Spark 2.1.1 **Modifiche, miglioramenti e problemi risolti** + **Presto** + È stata aggiunta la possibilità di abilitare la comunicazione SSL/TLS sicura tra i nodi Presto abilitando la crittografia in transito utilizzando una configurazione di sicurezza. Per maggiori informazioni, consulta [Cifratura dei dati in transito](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-data-encryption-options.html#emr-encryption-intransit). + Backport per [Presto 7661](https://github.com/prestodb/presto/pull/7661/commits) che aggiunge l'opzione `VERBOSE` all'istruzione `EXPLAIN ANALYZE` per comunicare statistiche più dettagliate di basso livello relative a un piano di query. ## Versioni dei componenti 5.6.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.3.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.3.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.5.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.17.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.2.1 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.1 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.1 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.1 | HBase client da riga di comando. | | hbase-rest-server | 1.3.1 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.1 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.13.0 | Librerie per Machine Learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.9.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.9.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.1 | Client a riga di comando Spark. | | spark-history-server | 2.1.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.6.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.6.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-env | Modifica i valori nel file presto-env.sh di Presto. | | presto-node | Modifica i valori nel file node.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.5.4 di Amazon EMR emr-5.5.4 ## Versioni dell'applicazione 5.5.4 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.5.4 | emr-5.5.3 | emr-5.5.2 | emr-5.5.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.1 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.5.4 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.5.4 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.3.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.3.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.5.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.16.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.2.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.0 | HBase client da riga di comando. | | hbase-rest-server | 1.3.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.9.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.9.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.5.4 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.5.4** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.5.3 di Amazon EMR emr-5.5.3 ## Versioni dell'applicazione 5.5.3 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.5.3 | emr-5.5.2 | emr-5.5.1 | emr-5.5.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.12.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.170 | | Spark | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.1 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.10 | ## Note di rilascio 5.5.3 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.5.3. Le modifiche sono relative alla versione 5.5.2. Data del rilascio iniziale: 29 agosto 2018 **Modifiche, miglioramenti e problemi risolti** + Questo rilascio risolve una potenziale vulnerabilità di sicurezza. ## Versioni dei componenti 5.5.3 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.3.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.3.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.5.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.16.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.2.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.0 | HBase client da riga di comando. | | hbase-rest-server | 1.3.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.9.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.9.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.5.3 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.5.3** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.5.2 di Amazon EMR emr-5.5.2 ## Versioni dell'applicazione 5.5.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.5.2 | emr-5.5.1 | emr-5.5.0 | emr-5.4.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-1 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.12.0 | 3.11.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.170 | 0.166 | | Spark | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.1 | 0.7.1 | 0.7.1 | 0.7.0 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.10 | 3.4.9 | ## Note di rilascio 5.5.2 Le seguenti note di rilascio includono informazioni relative al rilascio di Amazon EMR 5.5.2. Le modifiche sono relative alla versione 5.5.1. Data del rilascio iniziale: 29 marzo 2018 **Modifiche, miglioramenti e problemi risolti** + Aggiornato il kernel Amazon Linux dell'AMI defaultAmazon Linux per Amazon EMR per risolvere potenziali vulnerabilità. ## Versioni dei componenti 5.5.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.3.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.3.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.5.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.16.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.2.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.0 | HBase client da riga di comando. | | hbase-rest-server | 1.3.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.9.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.9.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.5.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.5.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.5.1 di Amazon EMR emr-5.5.1 ## Versioni dell'applicazione 5.5.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.5.1 | emr-5.5.0 | emr-5.4.1 | emr-5.4.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.2.0 | 1.2.0 | 1.2.0 | 1.2.0 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.0 | 1.3.0 | 1.3.0 | 1.3.0 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-2 | 2.7.3-amzn-2 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.12.0 | 3.11.0 | 3.11.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.170 | 0.166 | 0.166 | | Spark | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.1 | 0.7.1 | 0.7.0 | 0.7.0 | | ZooKeeper | 3.4.10 | 3.4.10 | 3.4.9 | 3.4.9 | ## Note di rilascio 5.5.1 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.5.1. Le modifiche sono relative al rilascio di Amazon EMR 5.5.0. Data del rilascio iniziale: 22 gennaio 2018 **Modifiche, miglioramenti e problemi risolti** + Aggiornato il kernel Amazon Linux dell'AMI defaultAmazon Linux per Amazon EMR per risolvere le vulnerabilità associate all'esecuzione speculativa (CVE-2017-5715, CVE-2017-5753 e CVE-2017-5754). Per ulteriori informazioni, consulta [https://aws.amazon.com/security/security-bulletins/AWS-2018-013/](https://aws.amazon.com/security/security-bulletins/AWS-2018-013/). ## Versioni dei componenti 5.5.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.3.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.3.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.5.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.16.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.2.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-2 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.0 | HBase client da riga di comando. | | hbase-rest-server | 1.3.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.9.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.9.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.5.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.5.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.5.0 di Amazon EMR emr-5.5.0 ## Versioni dell'applicazione 5.5.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.5.0 | emr-5.4.1 | emr-5.4.0 | emr-5.3.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.2.0 | 1.2.0 | 1.2.0 | 1.1.4 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.0 | 1.3.0 | 1.3.0 | 1.2.3 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-2 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.12.0 | 3.11.0 | 3.11.0 | 3.11.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.170 | 0.166 | 0.166 | 0.157.1 | | Spark | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.1 | 0.7.0 | 0.7.0 | 0.6.2 | | ZooKeeper | 3.4.10 | 3.4.9 | 3.4.9 | 3.4.9 | ## Note di rilascio 5.5.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.5.0. Le modifiche sono relative al rilascio di Amazon EMR 5.4.0. Data del rilascio: 26 aprile 2017 **Aggiornamenti** + Hue 3.12 + Presto 0.170 + Zeppelin 0.7.1 + ZooKeeper 3,4,10 **Modifiche, miglioramenti e problemi risolti** + **Spark** + Backported Spark Patch [(SPARK-20115) Correzione DAGScheduler per ricalcolare tutti i blocchi shuffle persi quando il servizio shuffle esterno non era disponibile nella versione 2.1.0 di Spark, inclusa](https://issues.apache.org/jira/browse/SPARK-20115) in questa versione. + **Flink** + Flink ora è integrato con Scala 2.11. Se utilizzi le API e le librerie Scala, ti consigliamo di utilizzare Scala 2.11 nei tuoi progetti. + Gestito un problema in cui i valori predefiniti di `HADOOP_CONF_DIR` e `YARN_CONF_DIR` non erano impostati correttamente, per cui `start-scala-shell.sh` non funzionava. Aggiunta inoltre la capacità di impostare tali valori usando `env.hadoop.conf.dir` e `env.yarn.conf.dir` in `/etc/flink/conf/flink-conf.yaml` o la classificazione della configurazione `flink-conf`. + Introdotto un nuovo comando specifico per EMR, `flink-scala-shell` come wrapper per `start-scala-shell.sh`. Ti consigliamo di usare questo comando anziché `start-scala-shell`. Il nuovo comando semplifica l'esecuzione. Ad esempio, `flink-scala-shell -n 2` avvia uno shell Flink Scala con un parallelismo dell'attività di 2. + Introdotto un nuovo comando specifico per EMR, `flink-yarn-session` come wrapper per `yarn-session.sh`. Ti consigliamo di usare questo comando anziché `yarn-session`. Il nuovo comando semplifica l'esecuzione. Ad esempio, `flink-yarn-session -d -n 2` avvia una sessione Flink di lunga durata in uno stato scollegato con due task manager. + Risolto [(FLINK-6125) Commons httpclient non più schermato in Flink 1.2](https://issues.apache.org/jira/browse/FLINK-6125) + **Presto** + Aggiunto supporto per l'autenticazione LDAP. L'utilizzo di LDAP con Presto on Amazon EMR richiede di abilitare l'accesso HTTPS per il coordinatore di Presto (`http-server.https.enabled=true` in `config.properties`). Per dettagli sulla configurazione, consulta [Autenticazione LDAP](https://prestodb.io/docs/current/security/ldap.html) nella documentazione di Presto. + Aggiunta del supporto per `SHOW GRANTS`. + **AMI Linux di base di Amazon EMR** + I rilasci di Amazon EMR sono ora basati su Amazon Linux 2017.03. Per ulteriori informazioni, consulta la sezione relativa alle [note di rilascio dell'AMI Amazon Linux 2017.03](https://aws.amazon.com/amazon-linux-ami/2017.03-release-notes/). + È stato rimosso Python 2.6 dall'immagine Linux di base Amazon EMR. Python 2.7 e 3.4 vengono installati per impostazione predefinita. Puoi installare Python 2.6 manualmente se necessario. ## Versioni dei componenti 5.5.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.3.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.3.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.5.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.16.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.2.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-2 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-2 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-2 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-2 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-2 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-2 | Server di gestione delle chiavi KeyProvider crittografiche basato sull'API di Hadoop. | | hadoop-mapred | 2.7.3-amzn-2 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-2 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-2 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-2 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.0 | HBase client da riga di comando. | | hbase-rest-server | 1.3.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.12.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.9.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.9.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.170 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.170 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.10 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.10 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.5.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.5.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.4.1 di Amazon EMR emr-5.4.1 ## Versioni dell'applicazione 5.4.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.4.1 | emr-5.4.0 | emr-5.3.2 | emr-5.3.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.2.0 | 1.2.0 | 1.1.4 | 1.1.4 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.0 | 1.3.0 | 1.2.3 | 1.2.3 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.11.0 | 3.11.0 | 3.11.0 | 3.11.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.9.0- -1,2 HBase | 4.9.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.166 | 0.166 | 0.157.1 | 0.157.1 | | Spark | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.0 | 0.7.0 | 0.6.2 | 0.6.2 | | ZooKeeper | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | ## Note di rilascio 5.4.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.4.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.2.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.15.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.2.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.0 | HBase client da riga di comando. | | hbase-rest-server | 1.3.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.11.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.9.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.9.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.166 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.166 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.9 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.9 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.4.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.4.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.4.0 di Amazon EMR emr-5.4.0 ## Versioni dell'applicazione 5.4.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.4.0 | emr-5.3.2 | emr-5.3.1 | emr-5.3.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.2.0 | 1.1.4 | 1.1.4 | 1.1.4 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.3.0 | 1.2.3 | 1.2.3 | 1.2.3 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hadoop | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.11.0 | 3.11.0 | 3.11.0 | 3.11.0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.3.0 | | Phoenix | 4.9.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.166 | 0.157.1 | 0.157.1 | 0.157.1 | | Spark | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.7.0 | 0.6.2 | 0.6.2 | 0.6.2 | | ZooKeeper | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | ## Note di rilascio 5.4.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.4.0. Le modifiche sono relative al rilascio di Amazon EMR 5.3.0. Data di rilascio: 08 marzo 2017 **Aggiornamenti** + Aggiornato a Flink 1.2.0 + Aggiornato alla versione 1.3.0 HBase + Aggiornato a Phoenix 4.9.0 **Nota** Se effettui l'aggiornamento da una versione precedente di Amazon EMR ad Amazon EMR versione 5.4.0 o successive e utilizzi un'indicizzazione secondaria, effettua l'aggiornamento degli indici locali come descritto nella documentazione su [Apache Phoenix](https://phoenix.apache.org/secondary_indexing.html#Upgrading_Local_Indexes_created_before_4.8.0). Amazon EMR rimuove le configurazioni richieste dalla classificazione `hbase-site`, ma gli indici devono essere ripopolati. Gli aggiornamenti online e offline degli indici sono supportati. Gli aggiornamenti online sono quelli predefiniti, il che significa che gli indici vengono ripopolati durante la fase di inizializzazione dai client Phoenix della versione 4.8.0 o più grande. Per specificare gli aggiornamenti offline, imposta la configurazione `phoenix.client.localIndexUpgrade` su false nella classificazione `phoenix-site` e poi SSH sul nodo primario per eseguire `psql [zookeeper] -1`. + Aggiornato a Presto 0.166 + Aggiornato a Zeppelin 0.7.0 **Modifiche e miglioramenti** + Aggiunto supporto per le istanze r4. Consulta [Tipi di istanza Amazon EC2](https://aws.amazon.com/ec2/instance-types/). ## Versioni dei componenti 5.4.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.2.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.3.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.15.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.2.0 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.3.0 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.3.0 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.3.0 | HBase client da riga di comando. | | hbase-rest-server | 1.3.0 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.3.0 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-hbase | 2.1.1-amzn-0 | Client Hive-hbase. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server2 | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.11.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.9.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.9.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.166 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.166 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.7.0 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.9 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.9 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.4.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.4.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.3.2 di Amazon EMR emr-5.3.2 ## Versioni dell'applicazione 5.3.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.3.2 | emr-5.3.1 | emr-5.3.0 | emr-5.2.3 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.1.4 | 1.1.4 | 1.1.4 | 1.1.3 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.11.0 | 3.11.0 | 3.11.0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.3.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.157.1 | 0.157.1 | 0.157.1 | 0.157.1 | | Spark | 2.1.0 | 2.1.0 | 2.1.0 | 2.0.2 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | | ZooKeeper | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | ## Note di rilascio 5.3.2 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.3.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.2.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.2.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.14.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.1.4 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.3 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.3 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.3 | HBase client da riga di comando. | | hbase-rest-server | 1.2.3 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.3 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.11.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.157.1 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.157.1 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.6.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.9 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.9 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.3.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.3.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.3.1 di Amazon EMR emr-5.3.1 ## Versioni dell'applicazione 5.3.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.3.1 | emr-5.3.0 | emr-5.2.3 | emr-5.2.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.1.4 | 1.1.4 | 1.1.3 | 1.1.3 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | | HCatalog | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | | Hive | 2.1.1-amzn-0 | 2.1.1-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.11.0 | 3.11.0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.3.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.157.1 | 0.157.1 | 0.157.1 | 0.157.1 | | Spark | 2.1.0 | 2.1.0 | 2.0.2 | 2.0.2 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | | ZooKeeper | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | ## Note di rilascio 5.3.1 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.3.1. Le modifiche sono relative al rilascio di Amazon EMR 5.3.0. Data di rilascio: 7 febbraio 2017 Modifiche minori alle patch Zeppelin di backport e aggiornamento dell'AMI predefinita per Amazon EMR. ## Versioni dei componenti 5.3.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.2.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.2.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.14.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.1.4 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.3 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.3 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.3 | HBase client da riga di comando. | | hbase-rest-server | 1.2.3 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.3 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.11.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.54\$1 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.157.1 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.157.1 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.6.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.9 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.9 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.3.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.3.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.3.0 di Amazon EMR emr-5.3.0 ## Versioni dell'applicazione 5.3.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.3.0 | emr-5.2.3 | emr-5.2.2 | emr-5.2.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.1.4 | 1.1.3 | 1.1.3 | 1.1.3 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | | HCatalog | 2.1.1-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | | Hive | 2.1.1-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.11.0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.3.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.157.1 | 0.157.1 | 0.157.1 | 0.157.1 | | Spark | 2.1.0 | 2.0.2 | 2.0.2 | 2.0.2 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | | ZooKeeper | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.9 | ## Note di rilascio 5.3.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.3.0. Le modifiche sono relative al rilascio di Amazon EMR 5.2.1. Data del rilascio: 26 gennaio 2017 **Aggiornamenti** + Aggiornato a Hive 2.1.1 + Aggiornato a Hue 3.11.0 + Aggiornato a Spark 2.1.0 + Aggiornato a Oozie a 4.3.0 + Aggiornato a Flink 1.1.4 **Modifiche e miglioramenti** + Aggiunta una patch a Hue che ti permette di utilizzare l'impostazione `interpreters_shown_on_wheel` per configurare che interpreti mostrare per primi sulla ruota di selezione Notebook, indipendentemente dall'ordine nel file `hue.ini`. + Aggiunta la classificazione della configurazione `hive-parquet-logging`, che puoi utilizzare per configurare i valori nel file `parquet-logging.properties` di Hive. ## Versioni dei componenti 5.3.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.2.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.2.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.14.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.1.4 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.3 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.3 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.3 | HBase client da riga di comando. | | hbase-rest-server | 1.2.3 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.3 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.1-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.1-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.1-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.1-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.1-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.1-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.11.0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.52 | Server di database MySQL. | | oozie-client | 4.3.0 | Client a riga di comando Oozie. | | oozie-server | 4.3.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.157.1 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.157.1 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.1.0 | Client a riga di comando Spark. | | spark-history-server | 2.1.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.1.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.1.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.25\$1 | Server Apache HTTP. | | zeppelin-server | 0.6.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.9 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.9 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.3.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.3.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-parquet-logging | Modifica i valori nel file parquet-logging.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.2.3 di Amazon EMR emr-5.2.3 ## Versioni dell'applicazione 5.2.3 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.2.3 | emr-5.2.2 | emr-5.2.1 | emr-5.2.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.1.3 | 1.1.3 | 1.1.3 | 1.1.3 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-0 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.157.1 | 0.157.1 | 0.157.1 | 0.152.3 | | Spark | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | | ZooKeeper | 3.4.9 | 3.4.9 | 3.4.9 | 3.4.8 | ## Note di rilascio 5.2.3 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.2.3 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.2.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.2.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.13.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.1.3 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.3 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.3 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.3 | HBase client da riga di comando. | | hbase-rest-server | 1.2.3 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.3 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.52 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.157.1 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.157.1 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.2 | Client a riga di comando Spark. | | spark-history-server | 2.0.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.9 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.9 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.2.3 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.2.3** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.2.2 di Amazon EMR emr-5.2.2 ## Versioni dell'applicazione 5.2.2 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.2.2 | emr-5.2.1 | emr-5.2.0 | emr-5.1.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.1.3 | 1.1.3 | 1.1.3 | 1.1.3 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-1 | 2.7.3-amzn-1 | 2.7.3-amzn-0 | 2.7.3-amzn-0 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.157.1 | 0.157.1 | 0.152.3 | 0.152.3 | | Spark | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | | ZooKeeper | 3.4.9 | 3.4.9 | 3.4.8 | 3.4.8 | ## Note di rilascio 5.2.2 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.2.2. Le modifiche sono relative al rilascio di Amazon EMR 5.2.1. Data di rilascio: 2 maggio 2017 **Problemi noti risolti dai rilasci precedenti** + [SPARK-194459](https://issues.apache.org/jira/browse/SPARK-19459) con backport, che risolve un problema a causa del quale la lettura da una tabella ORC con colonne può avere esito negativo. char/varchar ## Versioni dei componenti 5.2.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.2.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.2.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.13.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.1.3 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.3 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.3 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.3 | HBase client da riga di comando. | | hbase-rest-server | 1.2.3 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.3 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.52 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.157.1 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.157.1 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.2 | Client a riga di comando Spark. | | spark-history-server | 2.0.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.9 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.9 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.2.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.2.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.2.1 di Amazon EMR emr-5.2.1 ## Versioni dell'applicazione 5.2.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.2.1 | emr-5.2.0 | emr-5.1.1 | emr-5.1.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.1.3 | 1.1.3 | 1.1.3 | 1.1.3 | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.3 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-1 | 2.7.3-amzn-0 | 2.7.3-amzn-0 | 2.7.3-amzn-0 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.157.1 | 0.152.3 | 0.152.3 | 0.152.3 | | Spark | 2.0.2 | 2.0.2 | 2.0.1 | 2.0.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.2 | | ZooKeeper | 3.4.9 | 3.4.8 | 3.4.8 | 3.4.8 | ## Note di rilascio 5.2.1 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.2.1. Le modifiche sono relative al rilascio di Amazon EMR 5.2.0. Data del rilascio: 29 dicembre 2016 **Aggiornamenti** + Aggiornato a Presto 0.157.1. Per ulteriori informazioni, consulta la sezione delle [note di rilascio di Presto](https://prestodb.io/docs/current/release/release-0.157.1.html) nella documentazione di Presto. + Aggiornato a Zookeeper 3.4.9. Per ulteriori informazioni, consulta le [note di ZooKeeper rilascio](https://zookeeper.apache.org/doc/r3.4.9/releasenotes.html) nella documentazione di Apache. ZooKeeper **Modifiche e miglioramenti** + Aggiunto supporto per il tipo di istanza Amazon EC2 m4.16xlarge in Amazon EMR versione 4.8.3 e successive, escluse 5.0.0, 5.0.3 e 5.2.0. + I rilasci di Amazon EMR sono ora basati su Amazon Linux 2016.09. Per ulteriori informazioni, consulta [https://aws.amazon.com/amazon-linux-ami/2016.09-release-notes/](https://aws.amazon.com/amazon-linux-ami/2016.09-release-notes/). + La posizione dei percorsi di configurazione Flink e YARN è ora impostata per default in `/etc/default/flink` e non occorre impostare le variabili di ambiente `FLINK_CONF_DIR` e `HADOOP_CONF_DIR` quando si eseguono gli script dei driver `flink` o `yarn-session.sh` per avviare processi Flink. + È stato aggiunto il supporto per la FlinkKinesisConsumer classe. **Problemi noti risolti dai rilasci precedenti** + È stato risolto un problema in Hadoop a causa del quale il ReplicationMonitor thread poteva rimanere bloccato a lungo a causa di una corsa tra la replica e l'eliminazione dello stesso file in un cluster di grandi dimensioni. + È stato risolto un problema a causa ControlledJob del quale \$1toString non funzionava con un'eccezione Null Pointer Exception (NPE) quando lo stato del lavoro non veniva aggiornato correttamente. ## Versioni dei componenti 5.2.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.2.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.2.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.13.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.1.3 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-1 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-1 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-1 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-1 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-1 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-1 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-1 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-1 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-1 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-1 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.3 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.3 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.3 | HBase client da riga di comando. | | hbase-rest-server | 1.2.3 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.3 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.52 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.157.1 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.157.1 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.2 | Client a riga di comando Spark. | | spark-history-server | 2.0.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.9 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.9 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.2.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.2.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.2.0 di Amazon EMR emr-5.2.0 ## Versioni dell'applicazione 5.2.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.2.0 | emr-5.1.1 | emr-5.1.0 | emr-5.0.3 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.1.3 | 1.1.3 | 1.1.3 | - | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.3 | 1.2.3 | 1.2.3 | 1.2.2 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-0 | 2.7.3-amzn-0 | 2.7.3-amzn-0 | 2.7.3-amzn-0 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.152.3 | 0.152.3 | 0.152.3 | 0.152.3 | | Spark | 2.0.2 | 2.0.1 | 2.0.1 | 2.0.1 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.2 | 0.6.2 | 0.6.2 | 0.6.1 | | ZooKeeper | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | ## Note di rilascio 5.2.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.2.0. Le modifiche sono relative al rilascio di Amazon EMR 5.1.0. Data del rilascio: 21 novembre 2016 **Modifiche e miglioramenti** + Aggiunta la modalità di storage Amazon S3 per. HBase + Consente di specificare una posizione Amazon S3 per rootdir. HBase Per ulteriori informazioni, consulta [HBase Amazon S3](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-hbase-s3.html). **Aggiornamenti** + Aggiornato a Spark 2.0.2 **Problemi noti risolti dai rilasci precedenti** + Risolto un problema con /mnt vincolato a 2 TB sui tipi di istanza solo EBS. + Risolto un problema con il controller dell'istanza e i log logpusher che venivano indirizzati ai file .out corrispondenti anziché ai normali file .log log4j-configured, che ruotano ogni ora. I file .out non ruotano e questo determinerà il riempimento della partizione /emr. Questo problema interessa soltanto i tipi di istanza hardware virtual machine (HVM). ## Versioni dei componenti 5.2.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.1.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.1.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.12.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.1.3 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.3 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.3 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.3 | HBase client da riga di comando. | | hbase-rest-server | 1.2.3 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.3 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.52 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.152.3 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.152.3 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.2 | Client a riga di comando Spark. | | spark-history-server | 2.0.2 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.2 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.2 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.8 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.8 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.2.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.2.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase | Impostazioni curate da Amazon EMR per Apache. HBase | | hbase-env | Modifica i valori nell'ambiente. HBase | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.1.1 di Amazon EMR emr-5.1.1 ## Versioni dell'applicazione 5.1.1 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.1.1 | emr-5.1.0 | emr-5.0.3 | emr-5.0.2 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.1.3 | 1.1.3 | - | - | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.3 | 1.2.3 | 1.2.2 | 1.2.2 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-0 | 2.7.3-amzn-0 | 2.7.3-amzn-0 | 2.7.2-amzn-3 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.152.3 | 0.152.3 | 0.152.3 | 0.150 | | Spark | 2.0.1 | 2.0.1 | 2.0.1 | 2.0.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.2 | 0.6.2 | 0.6.1 | 0.6.1-SNAPSHOT | | ZooKeeper | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | ## Note di rilascio 5.1.1 Questa è una versione di patch per aggiungere l'autenticazione AWS Signature Version 4 per le richieste ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR. **Importante** In questa versione di rilascio, Amazon EMR utilizza la versione 4 di AWS Signature esclusivamente per autenticare le richieste verso Amazon S3. Per ulteriori informazioni, consulta [Novità](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html). ## Versioni dei componenti 5.1.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.1.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.1.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.11.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.1.3 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.3 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.3 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.3 | HBase client da riga di comando. | | hbase-rest-server | 1.2.3 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.3 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.52 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.152.3 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.152.3 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.1 | Client a riga di comando Spark. | | spark-history-server | 2.0.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.8 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.8 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.1.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.1.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase-env | Modifica i valori nell'ambiente HBase. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.1.0 di Amazon EMR emr-5.1.0 ## Versioni dell'applicazione 5.1.0 Questa versione include le seguenti applicazioni: [https://flink.apache.org/](https://flink.apache.org/),, [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.1.0 | emr-5.0.3 | emr-5.0.2 | emr-5.0.1 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | 1.1.3 | - | - | - | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.3 | 1.2.2 | 1.2.2 | 1.2.2 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-0 | 2.7.3-amzn-0 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.152.3 | 0.152.3 | 0.150 | 0.150 | | Spark | 2.0.1 | 2.0.1 | 2.0.0 | 2.0.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.2 | 0.6.1 | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | | ZooKeeper | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | ## Note di rilascio 5.1.0 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.1.0. Le modifiche sono relative al rilascio di Amazon EMR 5.0.3. Data del rilascio: 03 novembre 2016 **Modifiche e miglioramenti** + Aggiunto supporto per Flink 1.1.3. + Presto è stato aggiunto come opzione nella sezione notebook di Hue. **Aggiornamenti** + Aggiornato alla versione 1.2.3 HBase + Aggiornato a Zeppelin 0.6.2 **Problemi noti risolti dai rilasci precedenti** + Risolto un problema con le query Tez su Amazon S3 con i file ORC: la query non veniva eseguita correttamente come nelle precedenti versioni di Amazon EMR 4.x. ## Versioni dei componenti 5.1.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.1.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.1.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.11.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | flink-client | 1.1.3 | Applicazioni e script client a riga di comando Apache Flink. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.3 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.3 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.3 | HBase client da riga di comando. | | hbase-rest-server | 1.2.3 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.3 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.52 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.152.3 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.152.3 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.1 | Client a riga di comando Spark. | | spark-history-server | 2.0.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.2 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.8 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.8 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.1.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.1.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | flink-conf | Modifica le impostazione flink-conf.yaml. | | flink-log4j | Modifica le impostazioni Flink log4j.properties. | | flink-log4j-yarn-session | Modifica le impostazioni di Flink log4 j-yarn-session .properties. | | flink-log4j-cli | Modifica le impostazioni Flink log4j-cli.properties. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase-env | Modifica i valori nell'ambiente HBase. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.0.3 di Amazon EMR emr-5.0.3 ## Versioni dell'applicazione 5.0.3 Questa versione include le seguenti applicazioni: [http://ganglia.info](http://ganglia.info),, [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.0.3 | emr-5.0.2 | emr-5.0.1 | emr-5.0.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | - | - | - | - | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.2 | 1.2.2 | 1.2.2 | 1.2.2 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-0 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.152.3 | 0.150 | 0.150 | 0.150 | | Spark | 2.0.1 | 2.0.0 | 2.0.0 | 2.0.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.1 | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | | ZooKeeper | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | ## Note di rilascio 5.0.3 Le seguenti note di rilascio includono informazioni per il rilascio di Amazon EMR 5.0.3. Le modifiche sono relative al rilascio di Amazon EMR 5.0.0. Data del rilascio: 24 ottobre 2016 **Aggiornamenti** + Aggiornato a Hadoop 2.7.3 + Aggiornato a Presto 0.152.3, che include il supporto per l'interfaccia Web di Presto. Puoi accedere all'interfaccia Web di Presto sulla porta di utilizzo del coordinatore di Presto 8889. Per ulteriori informazioni sull'interfaccia Web di Presto, consulta [Interfaccia Web](https://prestodb.io/docs/current/admin/web-interface.html) nella documentazione di Presto. + Aggiornato a Spark 2.0.1 + I rilasci di Amazon EMR sono ora basati su Amazon Linux 2016.09. Per ulteriori informazioni, consulta [https://aws.amazon.com/amazon-linux-ami/2016.09-release-notes/](https://aws.amazon.com/amazon-linux-ami/2016.09-release-notes/). ## Versioni dei componenti 5.0.3 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.1.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.1.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.10.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.3-amzn-0 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.3-amzn-0 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.3-amzn-0 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.3-amzn-0 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.3-amzn-0 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.3-amzn-0 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.3-amzn-0 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.3-amzn-0 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.3-amzn-0 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.3-amzn-0 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.2 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.2 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.2 | HBase client da riga di comando. | | hbase-rest-server | 1.2.2 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.2 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.52 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.152.3 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.152.3 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.1 | Client a riga di comando Spark. | | spark-history-server | 2.0.1 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.1 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.1 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.1 | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.8 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.8 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.0.3 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.0.3** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase-env | Modifica i valori nell' HBaseambiente. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.0.2 di Amazon EMR emr-5.0.2 ## Versioni dell'applicazione 5.0.2 Questa versione include le seguenti applicazioni: [http://ganglia.info](http://ganglia.info),, [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.0.3 | emr-5.0.2 | emr-5.0.1 | emr-5.0.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | - | - | - | - | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.2 | 1.2.2 | 1.2.2 | 1.2.2 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-0 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.152.3 | 0.150 | 0.150 | 0.150 | | Spark | 2.0.1 | 2.0.0 | 2.0.0 | 2.0.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.1 | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | | ZooKeeper | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | ## Note di rilascio 5.0.2 ## Versioni dei componenti 5.0.2 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.0.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.1.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.9.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.2-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.2-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.2-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.2-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.2-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.2-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.2-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.2-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.2-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.2-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.2 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.2 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.2 | HBase client da riga di comando. | | hbase-rest-server | 1.2.2 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.2 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.46 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.150 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.150 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.0 | Client a riga di comando Spark. | | spark-history-server | 2.0.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.1-SNAPSHOT | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.8 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.8 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.0.2 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.0.2** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase-env | Modifica i valori nell' HBaseambiente. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.0.1 di Amazon EMR emr-5.0.1 ## Versioni dell'applicazione 5.0.1 Questa versione include le seguenti applicazioni: [http://ganglia.info](http://ganglia.info),, [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.0.3 | emr-5.0.2 | emr-5.0.1 | emr-5.0.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | - | - | - | - | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.2 | 1.2.2 | 1.2.2 | 1.2.2 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-0 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.152.3 | 0.150 | 0.150 | 0.150 | | Spark | 2.0.1 | 2.0.0 | 2.0.0 | 2.0.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.1 | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | | ZooKeeper | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | ## Note di rilascio 5.0.1 ## Versioni dei componenti 5.0.1 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.0.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.1.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.9.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.2-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.2-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.2-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.2-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.2-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.2-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.2-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.2-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.2-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.2-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.2 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.2 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.2 | HBase client da riga di comando. | | hbase-rest-server | 1.2.2 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.2 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.46 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.150 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.150 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.0 | Client a riga di comando Spark. | | spark-history-server | 2.0.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.1-SNAPSHOT | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.8 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.8 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.0.1 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.0.1** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase-env | Modifica i valori nell' HBaseambiente. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. | # Rilascio 5.0.0 di Amazon EMR emr-5.0.0 ## Versioni dell'applicazione 5.0.0 Questa versione include le seguenti applicazioni: [http://ganglia.info](http://ganglia.info),, [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [http://gethue.com/](http://gethue.com/), [http://mahout.apache.org/](http://mahout.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/),, [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://tez.apache.org/](https://tez.apache.org/)e. [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/) La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile). Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti: + [Versioni dell'applicazione nei rilasci di Amazon EMR 7.x](emr-release-app-versions-7.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 6.x](emr-release-app-versions-6.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 5.x](emr-release-app-versions-5.x.md) + [Versioni dell'applicazione nei rilasci di Amazon EMR 4.x](emr-release-app-versions-4.x.md) **Informazioni sulla versione dell'applicazione** | | emr-5.0.3 | emr-5.0.2 | emr-5.0.1 | emr-5.0.0 | | --- | --- | --- | --- | --- | | AWS SDK per Java | 1.10.75 | 1,10,75 | 1,10,75 | 1,10,75 | | Python | Non monitorato | Non monitorato | Non monitorato | Non monitorato | | Scala | 211,8 | 211,8 | 211,8 | 211,8 | | AmazonCloudWatchAgent | - | - | - | - | | Delta | - | - | - | - | | Flink | - | - | - | - | | Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | | HBase | 1.2.2 | 1.2.2 | 1.2.2 | 1.2.2 | | HCatalog | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hadoop | 2.7.3-amzn-0 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | 2.7.2-amzn-3 | | Hive | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | 2.1.0-amzn-0 | | Hudi | - | - | - | - | | Hue | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | 3.10.0-amzn-0 | | Iceberg | - | - | - | - | | JupyterEnterpriseGateway | - | - | - | - | | JupyterHub | - | - | - | - | | Livy | - | - | - | - | | MXNet | - | - | - | - | | Mahout | 0.12.2 | 0.12.2 | 0.12.2 | 0.12.2 | | Oozie | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | | Phoenix | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | 4.7.0- -1,2 HBase | | Pig | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | 0.16.0-amzn-0 | | Presto | 0.152.3 | 0.150 | 0.150 | 0.150 | | Spark | 2.0.1 | 2.0.0 | 2.0.0 | 2.0.0 | | Sqoop | 1.4.6 | 1.4.6 | 1.4.6 | 1.4.6 | | TensorFlow | - | - | - | - | | Tez | 0.8.4 | 0.8.4 | 0.8.4 | 0.8.4 | | Trino (PrestoSQL) | - | - | - | - | | Zeppelin | 0.6.1 | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | 0.6.1-SNAPSHOT | | ZooKeeper | 3.4.8 | 3.4.8 | 3.4.8 | 3.4.8 | ## Note di rilascio 5.0.0 Data del rilascio: 27 luglio 2016 **Aggiornamenti** + Aggiornato a Hive 2.1 + Aggiornato a Presto 0.150 + Aggiornato a Spark 2.0 + Aggiornato a Hue 3.10.0 + Aggiornato a Pig 0.16.0 + Aggiornato a Tez 0.8.4 + Aggiornato a Zeppelin 0.6.1 **Modifiche e miglioramenti** + Amazon EMR supporta le ultime versioni open source di Hive (versione 2.1) e di Pig (versione 0.16.0). Se in passato hai utilizzato Hive o Pig su Amazon EMR, questo potrebbe interessare alcuni casi d'uso. Per ulteriori informazioni, consulta [Hive](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-hive.html) e [Pig](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-pig.html). + Il motore di esecuzione di default per Hive e Pig ora è Tez. Per modificarlo, devi cambiare i valori appropriati nelle classificazioni della configurazione rispettivamente di `hive-site` e `pig-properties`. + Una caratteristica di debugging della fase potenziata è stata aggiunta per permetterti di vedere la causa sottostante degli errori della fase se il servizio è in grado di determinare la causa. Per ulteriori informazioni, consulta [Debug migliorato delle fasi](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-enhanced-step-debugging.html) nella Guida alla gestione di Amazon EMR. + Le applicazioni che in precedenza terminavano con "-Sandbox" non avranno più quel suffisso. Questo potrebbe spezzare la tua automazione, ad esempio, se stai utilizzando gli script per lanciare i cluster con queste applicazioni. La seguente tabella mostra i nomi dell'applicazione in Amazon EMR 4.7.2 rispetto ad Amazon EMR 5.0.0. **Modifiche al nome dell'applicazione** [\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/it_it/emr/latest/ReleaseGuide/emr-500-release.html) + Spark è compilato per Scala 2.11. + Java 8 è il JVM di default. Tutte le applicazioni vengono eseguite utilizzando il runtime di Java 8. Non ci sono modifiche al target del bytecode dell'applicazione. La maggior parte delle applicazioni continua a scegliere come target Java 7. + Zeppelin ora include le caratteristiche di autenticazione. Per ulteriori informazioni, consulta [Zeppelin](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-zeppelin.html). + Aggiunto supporto per le configurazioni di sicurezza che ti permettono di creare e applicare le opzioni di cifratura più facilmente. Per ulteriori informazioni, consulta [Cifratura dei dati](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-data-encryption.html). ## Versioni dei componenti 5.0.0 I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con `emr` o `aws`. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile. Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo `CommunityVersion-amzn-EmrVersion`. `EmrVersion` inizia da 0. Ad esempio, se un componente della community open source denominato `myapp-component` con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come `2.2-amzn-2`. | Componente | Versione | Description | | --- | --- | --- | | emr-ddb | 4.0.0 | Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop. | | emr-goodies | 2.1.0 | Librerie utili per l'ecosistema Hadoop. | | emr-kinesis | 3.2.0 | Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop. | | emr-s3-dist-cp | 2.4.0 | Applicazione di copia distribuita ottimizzata per Amazon S3. | | emrfs | 2.9.0 | Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop. | | ganglia-monitor | 3.7.2 | Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia. | | ganglia-metadata-collector | 3.7.2 | Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia. | | ganglia-web | 3.7.1 | Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia. | | hadoop-client | 2.7.2-amzn-3 | Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn". | | hadoop-hdfs-datanode | 2.7.2-amzn-3 | Servizio a livello di nodo HDFS per lo storage di blocchi. | | hadoop-hdfs-library | 2.7.2-amzn-3 | Libreria e client di riga di comando HDFS | | hadoop-hdfs-namenode | 2.7.2-amzn-3 | Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi. | | hadoop-httpfs-server | 2.7.2-amzn-3 | Endpoint HTTP per le operazioni HDFS. | | hadoop-kms-server | 2.7.2-amzn-3 | Server di gestione delle chiavi crittografiche basato sull'API di Hadoop. KeyProvider | | hadoop-mapred | 2.7.2-amzn-3 | MapReduce librerie di motori di esecuzione per l'esecuzione di un'applicazione. MapReduce | | hadoop-yarn-nodemanager | 2.7.2-amzn-3 | Servizio YARN per la gestione di container su un singolo nodo. | | hadoop-yarn-resourcemanager | 2.7.2-amzn-3 | Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite. | | hadoop-yarn-timeline-server | 2.7.2-amzn-3 | Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN. | | hbase-hmaster | 1.2.2 | Servizio per un HBase cluster responsabile del coordinamento delle regioni e dell'esecuzione dei comandi amministrativi. | | hbase-region-server | 1.2.2 | Servizio per servire una o più HBase regioni. | | hbase-client | 1.2.2 | HBase client da riga di comando. | | hbase-rest-server | 1.2.2 | Servizio che fornisce un endpoint RESTful HTTP per. HBase | | hbase-thrift-server | 1.2.2 | Servizio che fornisce un endpoint Thrift a. HBase | | hcatalog-client | 2.1.0-amzn-0 | Client a riga di comando "hcat" per la manipolazione del server hcatalog. | | hcatalog-server | 2.1.0-amzn-0 | Fornitura di servizi HCatalog, un livello di gestione delle tabelle e dello storage per applicazioni distribuite. | | hcatalog-webhcat-server | 2.1.0-amzn-0 | Endpoint HTTP che fornisce un'interfaccia REST a HCatalog. | | hive-client | 2.1.0-amzn-0 | Client a riga di comando Hive. | | hive-metastore-server | 2.1.0-amzn-0 | Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop. | | hive-server | 2.1.0-amzn-0 | Servizio per l'accettazione di query Hive come richieste Web. | | hue-server | 3.10.0-amzn-0 | Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop | | mahout-client | 0.12.2 | Librerie per machine learning. | | mysql-server | 5.5.46 | Server di database MySQL. | | oozie-client | 4.2.0 | Client a riga di comando Oozie. | | oozie-server | 4.2.0 | Servizio per l'accettazione delle richieste di flusso di lavoro Oozie. | | phoenix-library | 4.7.0- -1,2 HBase | Le librerie Phoenix per server e client | | phoenix-query-server | 4.7.0- -1,2 HBase | Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica | | presto-coordinator | 0.150 | Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker. | | presto-worker | 0.150 | Servizio per l'esecuzione di parti di una query. | | pig-client | 0.16.0-amzn-0 | Client a riga di comando Pig. | | spark-client | 2.0.0 | Client a riga di comando Spark. | | spark-history-server | 2.0.0 | Interfaccia utente Web per la visualizzazione di eventi registrati per la durata di un'applicazione Spark completata. | | spark-on-yarn | 2.0.0 | Motore di esecuzione in memoria per YARN. | | spark-yarn-slave | 2.0.0 | Librerie Apache Spark necessarie per gli slave YARN. | | sqoop-client | 1.4.6 | Client a riga di comando Apache Sqoop. | | tez-on-yarn | 0.8.4 | L'applicazione e le librerie tez YARN. | | webserver | 2.4.23 | Server Apache HTTP. | | zeppelin-server | 0.6.1-SNAPSHOT | Notebook basato sul Web che consente l'analisi di dati interattiva. | | zookeeper-server | 3.4.8 | Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo. | | zookeeper-client | 3.4.8 | ZooKeeper client a riga di comando. | ## Classificazioni di configurazione 5.0.0 Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio `hive-site.xml`. Per ulteriori informazioni, consulta [Configurazione delle applicazioni](emr-configure-apps.md). **Classificazioni emr-5.0.0** | Classificazioni | Description | | --- | --- | | capacity-scheduler | Modifica i valori nel file capacity-scheduler.xml di Hadoop. | | core-site | Modifica i valori nel file core-site.xml di Hadoop. | | emrfs-site | Modifica le impostazioni EMRFS. | | hadoop-env | Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop. | | hadoop-log4j | Modifica i valori nel file log4j.properties di Hadoop. | | hadoop-ssl-server | Modifica la configurazione server ssl hadoop | | hadoop-ssl-client | Modifica la configurazione client ssl hadoop | | hbase-env | Modifica i valori nell' HBaseambiente. | | hbase-log4j | Modifica i valori nel file HBase hbase-log4j.properties. | | hbase-metrics | Cambia i valori nel file hadoop-metrics2-hbaase.properties. HBase | | hbase-policy | Cambia i valori nel HBase file hbase-policy.xml. | | hbase-site | Modifica i valori nel HBase file hbase-site.xml. | | hdfs-encryption-zones | Configura le zone di crittografia HDFS. | | hdfs-site | Modifica i valori nel file hdfs-site.xml di HDFS. | | hcatalog-env | Cambia i valori nell' HCatalogambiente. | | hcatalog-server-jndi | Cambia i valori in HCatalog jndi.properties. | | hcatalog-server-proto-hive-site | Cambia i valori nel file .xml HCatalog. proto-hive-site | | hcatalog-webhcat-env | Modifica i valori nell'ambiente HCatalog HCat Web. | | hcatalog-webhcat-log4j2 | Modifica i valori nelle proprietà HCatalog HCat log4j2.properties di Web. | | hcatalog-webhcat-site | Modificare i valori nel file webhcat-site.xml di HCatalog WebHCat. | | hive-beeline-log4j2 | Modifica i valori nel file beeline-log4j2.properties di Hive. | | hive-env | Modifica i valori nell'ambiente Hive. | | hive-exec-log4j2 | Modifica i valori nel file hive-exec-log 4j2.properties di Hive. | | hive-llap-daemon-log4j2 | Modifica i valori nel file 4j2.properties di Hive. llap-daemon-log | | hive-log4j2 | Modifica i valori nel file hive-log4j2.properties di Hive. | | hive-site | Modifica i valori nel file hive-site.xml di Hive | | hiveserver2-site | Modifica i valori nel file hiveserver2-site.xml di Hive Server2 | | hue-ini | Modifica i valori nel file ini di Hue | | httpfs-env | Modifica i valori nell'ambiente HTTPFS. | | httpfs-site | Modifica i valori nel file httpfs-site.xml di Hadoop. | | hadoop-kms-acls | Modifica i valori nel file kms-acls.xml di Hadoop. | | hadoop-kms-env | Modifica i valori nell'ambiente Hadoop KMS. | | hadoop-kms-log4j | Modifica i valori nel file kms-log4j.properties di Hadoop. | | hadoop-kms-site | Modifica i valori nel file kms-site.xml di Hadoop. | | mapred-env | Modifica i valori nell'ambiente dell'applicazione. MapReduce | | mapred-site | Modificate i valori nel file mapred-site.xml dell' MapReduce applicazione. | | oozie-env | Modifica i valori nell'ambiente di Oozie. | | oozie-log4j | Modifica i valori nel file oozie-log4j.properties di Oozie. | | oozie-site | Modifica i valori nel file oozie-site.xml di Oozie. | | phoenix-hbase-metrics | Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix. | | phoenix-hbase-site | Modifica i valori nel file hbase-site.xml di Phoenix. | | phoenix-log4j | Modifica i valori nel file log4j.properties di Phoenix. | | phoenix-metrics | Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix. | | pig-properties | Modifica i valori nel file pig.properties di Pig. | | pig-log4j | Modifica i valori nel file log4j.properties di Pig. | | presto-log | Modifica i valori nel file log.properties di Presto. | | presto-config | Modifica i valori nel file config.properties di Presto. | | presto-connector-blackhole | Modifica i valori nel file blackhole.properties di Presto. | | presto-connector-cassandra | Modifica i valori nel file cassandra.properties di Presto. | | presto-connector-hive | Modifica i valori nel file hive.properties di Presto. | | presto-connector-jmx | Modifica i valori nel file jmx.properties di Presto. | | presto-connector-kafka | Modifica i valori nel file kafka.properties di Presto. | | presto-connector-localfile | Modifica i valori nel file localfile.properties di Presto. | | presto-connector-mongodb | Modifica i valori nel file mongodb.properties di Presto. | | presto-connector-mysql | Modifica i valori nel file mysql.properties di Presto. | | presto-connector-postgresql | Modifica i valori nel file postgresql.properties di Presto. | | presto-connector-raptor | Modifica i valori nel file raptor.properties di Presto. | | presto-connector-redis | Modifica i valori nel file redis.properties di Presto. | | presto-connector-tpch | Modifica i valori nel file tpch.properties di Presto. | | spark | Impostazioni Amazon EMR per Apache Spark. | | spark-defaults | Modifica i valori nel file spark-defaults.conf di Spark. | | spark-env | Modifica i valori nell'ambiente Spark. | | spark-hive-site | Modifica i valori nel file hive-site.xml di Spark | | spark-log4j | Modifica i valori nel file log4j.properties di Spark. | | spark-metrics | Modifica i valori nel file metrics.properties di Spark. | | sqoop-env | Modifica i valori nell'ambiente di Sqoop. | | sqoop-oraoop-site | Modifica i valori nel file oraoop-site.xml di OraOop Sqoop. | | sqoop-site | Modifica i valori nel file sqoop-site.xml di Sqoop. | | tez-site | Modifica i valori nel file tez-site.xml file di Tez. | | yarn-env | Modifica i valori nell'ambiente YARN. | | yarn-site | Modifica i valori nel file yarn-site.xml di YARN. | | zeppelin-env | Modifica i valori nell'ambiente Zeppelin. | | zookeeper-config | Cambia i valori nel ZooKeeper file zoo.cfg. | | zookeeper-log4j | Modifica i valori nel file ZooKeeper log4j.properties. |