Konektor Amazon Athena Microsoft SQL Server

Konektor Amazon Athena untuk Microsoft SQL Server memungkinkan Amazon Athena menjalankan kueri SQL pada data Anda yang disimpan di Microsoft SQL Server menggunakan JDBC.

Konektor ini dapat didaftarkan dengan Glue Data Catalog sebagai katalog federasi. Ini mendukung kontrol akses data yang didefinisikan dalam Lake Formation di katalog, database, tabel, kolom, baris, dan tingkat tag. Konektor ini menggunakan Glue Connections untuk memusatkan properti konfigurasi di Glue.

Prasyarat

Batasan

Ketentuan

Parameter

Gunakan parameter di bagian ini untuk mengkonfigurasi konektor SQL Server.

aws glue describe-connection-type --connection-type SQLSERVER

sqlserver://${jdbc_connection_string}

sqlserver://jdbc:sqlserver://hostname:port;databaseName=<database_name>;${secret_name}

sqlserver://jdbc:sqlserver://hostname:port;databaseName=<database_name>;user=<user>;password=<password>

Dukungan tipe data

Tabel berikut menunjukkan tipe data yang sesuai untuk SQL Server dan Apache Arrow.

Partisi dan split

Partisi diwakili oleh kolom partisi tunggal tipevarchar. Dalam kasus konektor SQL Server, fungsi partisi menentukan bagaimana partisi diterapkan di atas meja. Fungsi partisi dan informasi nama kolom diambil dari tabel metadata SQL Server. Kueri kustom kemudian mendapatkan partisi. Pemisahan dibuat berdasarkan jumlah partisi berbeda yang diterima.

Performa

Memilih subset kolom secara signifikan mempercepat runtime kueri dan mengurangi data yang dipindai. Konektor SQL Server tahan terhadap throttling karena konkurensi.

Konektor Athena SQL Server melakukan pushdown predikat untuk mengurangi data yang dipindai oleh kueri. Predikat sederhana dan ekspresi kompleks didorong ke konektor untuk mengurangi jumlah data yang dipindai dan mengurangi waktu eksekusi kueri.

Predikat

Predikat adalah ekspresi dalam WHERE klausa query SQL yang mengevaluasi nilai Boolean dan menyaring baris berdasarkan beberapa kondisi. Konektor Athena SQL Server dapat menggabungkan ekspresi ini dan mendorongnya langsung ke SQL Server untuk fungsionalitas yang ditingkatkan dan untuk mengurangi jumlah data yang dipindai.

Operator konektor Athena SQL Server berikut mendukung pushdown predikat:

Contoh pushdown gabungan

Untuk kemampuan kueri yang ditingkatkan, gabungkan jenis pushdown, seperti pada contoh berikut:

SELECT * 
FROM my_table 
WHERE col_a > 10 
    AND ((col_a + col_b) > (col_c % col_d)) 
    AND (col_e IN ('val1', 'val2', 'val3') OR col_f LIKE '%pattern%');

Kueri passthrough

Konektor SQL Server mendukung kueri passthrough. Kueri passthrough menggunakan fungsi tabel untuk mendorong kueri lengkap Anda ke sumber data untuk dieksekusi.

Untuk menggunakan kueri passthrough dengan SQL Server, Anda dapat menggunakan sintaks berikut:

SELECT * FROM TABLE(
        system.query(
            query => 'query string'
        ))

Contoh query berikut mendorong ke bawah query ke sumber data di SQL Server. Kueri memilih semua kolom dalam customer tabel, membatasi hasilnya menjadi 10.

SELECT * FROM TABLE(
        system.query(
            query => 'SELECT * FROM customer LIMIT 10'
        ))

Informasi lisensi

Dengan menggunakan konektor ini, Anda mengakui penyertaan komponen pihak ketiga, daftar yang dapat ditemukan dalam file pom.xml untuk konektor ini, dan menyetujui persyaratan dalam masing-masing lisensi pihak ketiga yang disediakan dalam file LICENSE.txt di .com. GitHub

Sumber daya tambahan

Untuk informasi versi driver JDBC terbaru, lihat file pom.xml untuk konektor SQL Server di.com. GitHub

Untuk informasi tambahan tentang konektor ini, kunjungi situs terkait GitHub di.com.