View a markdown version of this page

Uso del formato de columnas al almacenar en caché - AWS Orientación prescriptiva

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Uso del formato de columnas al almacenar en caché

Spark SQLtiene la capacidad de almacenar en memoria las tablas en un formato de columnas. spark.catalog.cacheTable("tableName")o las llamadas a dataFrame.cache() funciones se pueden usar para almacenar en caché las tablas en un formato de columnas en memoria. A continuación, el Spark SQL motor escanea solo las columnas necesarias y ajusta automáticamente la compresión para reducir el uso de memoria y CPU. Puede utilizar spark.catalog.uncacheTable("tableName") o dataFrame.unpersist() eliminar la tabla de la memoria.