Lecture à partir d' PayPal entités - AWS Glue
Requêtes de partitionnement

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Lecture à partir d' PayPal entités

Prérequis

Un PayPal objet que vous aimeriez lire. Vous aurez besoin du nom de l'objet,transaction.

Entités prises en charge pour la source :

Entité Peut être filtré Limite de supports Supporte Order by Supporte Select * Supporte le partitionnement
transaction Oui Oui Non Oui Oui

Exemple :

paypal_read = glueContext.create_dynamic_frame.from_options(
    connection_type="paypal",
    connection_options={
        "connectionName": "connectionName",
        "ENTITY_NAME": "transaction",
        "API_VERSION": "v1",
        "INSTANCE_URL": "https://api-m.paypal.com"
    }

PayPal détails de l'entité et du champ :

Entités avec métadonnées statiques :

Entité Champ Type de données Opérateurs pris en charge
transaction date_initiation_de_transaction DateTime Entre
date_heure de la dernière actualisation Chaîne N/A
type_d'instrument de paiement Chaîne =
balance_affecting_records_only Chaîne =
identifiant du magasin Chaîne =
identifiant_terminal Chaîne =
monnaie_de transaction Chaîne =
transaction_id Chaîne N/A
état_de la transaction Chaîne N/A
transaction_type Chaîne N/A
information_transaction Struct N/A
info_payeur Struct N/A
information_d'expédition Struct N/A
info_panier Struct N/A
info_boutique Struct N/A
info_vente Struct N/A
information_incitative Struct N/A

Requêtes de partitionnement

Vous pouvez fournir les options supplémentaires de Spark PARTITION_FIELDLOWER_BOUND,UPPER_BOUND, et NUM_PARTITIONS si vous souhaitez utiliser la simultanéité dans Spark. Avec ces paramètres, la requête d'origine serait divisée en NUM_PARTITIONS plusieurs sous-requêtes pouvant être exécutées simultanément par les tâches Spark.

  • PARTITION_FIELD: le nom du champ à utiliser pour partitionner la requête.

  • LOWER_BOUND: une valeur inférieure inclusive du champ de partition choisi.

    Pour le champ Datetime, nous acceptons la valeur au format ISO.

    Exemples de valeurs valides :

    "2024-07-01T00:00:00.000Z"

  • UPPER_BOUND: une valeur limite supérieure exclusive du champ de partition choisi.

  • NUM_PARTITIONS: le nombre de partitions.

Le champ suivant est pris en charge pour le partitionnement par entité :

Nom de l'entité Champs de partitionnement Type de données
transaction date_initiation_de_transaction DateTime

Exemple : 

paypal_read = glueContext.create_dynamic_frame.from_options(
    connection_type="paypal",
    connection_options={
        "connectionName": "connectionName",
        "ENTITY_NAME": "transaction",
        "API_VERSION": "v1",
        "PARTITION_FIELD": "transaction_initiation_date"
        "LOWER_BOUND": "2024-07-01T00:00:00.000Z"
        "UPPER_BOUND": "2024-07-02T00:00:00.000Z"
        "NUM_PARTITIONS": "10"
    }