Datenformate für AWS Clean Rooms - AWS Clean Rooms

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Datenformate für AWS Clean Rooms

Um Daten zu analysieren, müssen die Datensätze in einem Format vorliegen, das dies AWS Clean Rooms unterstützt.

Unterstützte Datenformate für Jobs PySpark

AWS Clean Roomsunterstützt die folgenden strukturierten Formate für die Ausführung von PySpark Jobs.

  • Parquet

  • OpenCSV

  • JSON

Unterstützte Datenformate für SQL-Abfragen

AWS Clean Roomsunterstützt verschiedene strukturierte Formate für die Ausführung von SQL-Abfragen

Spark SQL analytics engine
Anmerkung

Ein timestamp Wert in einer Textdatei muss das folgende Format yyyy-MM-dd HH:mm:ss.SSSSSS haben. Zum Beispiel:2017-05-01 11:30:59.000000.

Wir empfehlen die Verwendung eines spaltenförmigen Speicherdateiformats wieApache Parquet. Mit einem spaltenbasierten Speicherdateiformat können Sie Datenbewegungen minimieren, indem Sie nur die Spalten auswählen, die Sie benötigen. Für eine optimale Leistung sollten große Objekte in Objekte mit einer Größe von 100 MB bis 1 GB aufgeteilt werden.

Unterstützte Datentypen

AWS Clean Roomsunterstützt verschiedene Typen.

  • ARRAY

  • BIGINT

  • BOOLEAN

  • BYTE

  • CHAR

  • DATE

  • DECIMAL

  • FLOAT

  • INTEGER

  • INTERVAL

  • LONG

  • MAP

  • REAL

  • SHORT

  • SMALLINT

  • STRUCT

  • TIME

  • TIMESTAMP_LTZ

  • TIMESTAMP_NTZ

  • TINYINT

  • VARCHAR

Weitere Informationen finden Sie unter Datentypen in der SQL-Referenz. AWS Clean Rooms

Arten der Dateikomprimierung für AWS Clean Rooms

Um Speicherplatz zu reduzieren, die Leistung zu verbessern und die Kosten zu minimieren, empfehlen wir dringend, Ihre Datensätze zu komprimieren.

AWS Clean Roomserkennt Dateikomprimierungstypen anhand der Dateierweiterung und unterstützt die in der folgenden Tabelle aufgeführten Komprimierungstypen und -erweiterungen.

Komprimierungsalgorithmus Dateierweiterung
GZIP .gz
Bzip2 .bz2
Snappy .snappy

Sie können die Komprimierung auf verschiedenen Ebenen anwenden. Zumeist komprimieren Sie eine ganze Datei oder einzelne Blöcke innerhalb einer Datei. Das Komprimieren von Spaltenformaten auf Dateiebene bringt keine Leistungsvorteile.

Serverseitige Verschlüsselung für AWS Clean Rooms

Anmerkung

Die serverseitige Verschlüsselung ersetzt nicht die kryptografische Datenverarbeitung in den Anwendungsfällen, in denen sie erforderlich ist.

AWS Clean Roomsentschlüsselt transparent Datensätze, die mit den folgenden Verschlüsselungsoptionen verschlüsselt wurden:

  • SSE-S3 — Serverseitige Verschlüsselung mit einem AES-256-Verschlüsselungsschlüssel, der von Amazon S3 verwaltet wird

  • SSE-KMS — Serverseitige Verschlüsselung mit Schlüsseln, die verwaltet werden von AWS Key Management Service

Um SSE-S3 verwenden zu können, muss die AWS Clean Rooms Servicerolle, die verwendet wird, um die konfigurierte Tabelle der Kollaboration zuzuordnen, über KMS-Decrypt-Berechtigungen verfügen. Um SSE-KMS verwenden zu können, muss die KMS-Schlüsselrichtlinie auch die Entschlüsselung der Servicerolle zulassen. AWS Clean Rooms

AWS Clean Roomsunterstützt keine clientseitige Amazon S3 S3-Verschlüsselung. Weitere Informationen zur serverseitigen Verschlüsselung finden Sie unter Schützen von Daten mithilfe serverseitiger Verschlüsselung im Amazon Simple Storage Service-Benutzerhandbuch.