Amazon menghadirkan kontrol yang lebih halus ke AWS Lake Formation
Cloud

Amazon menghadirkan kontrol yang lebih halus ke AWS Lake Formation

Amazon Web Services pada hari Selasa mengumumkan ketersediaan umum alat yang membawa kontrol lebih halus ke pengelolaan data lake.

Pertama, Keamanan Baris dan Tingkat Sel untuk Lake Formation “menempatkan data yang tepat di tangan orang yang tepat,” kata CEO AWS Adam Selipsky selama pidato utama AWS re:Invent.

Lake Formation sudah memungkinkan pelanggan untuk memindahkan data ke data lake S3, membersihkan, dan mengklasifikasikannya menggunakan pembelajaran mesin dan akses yang aman ke data sensitif. Alat baru sekarang memungkinkan pelanggan menerapkan kontrol akses untuk baris dan sel individual. Alih-alih membuat beberapa tabel untuk setiap pengguna dan mengelola jalur data, pelanggan dapat menentukan serangkaian kebijakan untuk baris tertentu untuk pengguna tertentu. Pelanggan mengontrol akses ke baris dan kolom tertentu dalam hasil kueri dan dalam pekerjaan AWS Glue ETL berdasarkan identitas siapa yang melakukan tindakan tersebut.

Sementara itu, Transaksi untuk Tabel yang Diatur dalam Formasi Danau menghilangkan kebutuhan untuk pembaruan batch. “Data tidak statis,” kata Selipsky. “Semakin banyak data yang ditambahkan dan dipindahkan dengan cepat.”

Sekarang pelanggan dapat membuat tipe tabel baru — tabel yang diatur — dan Lake Formation secara otomatis mengelola konflik dan kesalahan untuk tampilan data yang konsisten. Pengguna akan dapat mengikuti data secara real-time.

Tabel yang diatur mendukung transaksi ACID yang memungkinkan banyak pengguna secara bersamaan dan andal memasukkan dan menghapus data di beberapa tabel yang diatur. Transaksi ACID juga memungkinkan pelanggan menjalankan kueri yang mengembalikan data yang konsisten dan terbaru. Jika terjadi kesalahan dalam proses ETL, atau selama pembaruan, perubahan tidak dilakukan dan tidak akan terlihat.

Pelanggan yang menggunakan tabel yang diatur dapat menggunakan pemadatan otomatis untuk pengoptimalan penyimpanan. Saat opsi ini diaktifkan, Lake Formation secara otomatis memadatkan objek S3 kecil di tabel yang diatur menjadi objek yang lebih besar untuk mengoptimalkan akses melalui mesin analitik, seperti Amazon Athena dan Amazon Redshift Spectrum.

Posted By : hasil hk