Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.
Verwendung von Spaltenformaten für eine bessere Abfrageleistung
Sparkkann verschiedene Eingabedateiformate wie Apache ParquetOptimized Row Columnar (ORC), und CSV verwenden. ParquetFunktioniert jedoch am besten innerhalbSpark SQL. Es bietet schnellere Laufzeiten, einen höheren Scandurchsatz, weniger Festplatten-I/O und niedrigere Betriebskosten. Sparkkann nutzlose Daten automatisch filtern, indem statistische Parquet Dateidaten mithilfe von Push-down-Filtern wie Min-Max-Statistiken verwendet werden. Auf der anderen Seite können Sie den vektorisierten Parquet-Reader so Spark einrichten, dass er Dateien stapelweise liest. Parquet Wenn Sie Daten verarbeitenSpark SQL, empfehlen wir, wenn möglich Parquet Dateiformate zu verwenden.
