Katalog Amazon SageMaker sekarang mengekspor metadata aset sebagai set data yang dapat dikueri
Katalog Amazon SageMaker sekarang mengekspor metadata aset sebagai tabel Apache Iceberg melalui Tabel Amazon S3. Hal ini memungkinkan tim data untuk menanyakan inventaris katalog dan menjawab pertanyaan seperti, "Berapa banyak aset yang terdaftar bulan lalu?", "Aset mana yang diklasifikasikan sebagai rahasia?", atau "Aset mana yang tidak memiliki deskripsi bisnis?" menggunakan SQL standar tanpa membangun infrastruktur ETL khusus untuk pelaporan.
Kemampuan ini secara otomatis mengubah metadata aset katalog menjadi tabel yang dapat dikueri yang dapat diakses dari Amazon Athena, buku catatan SageMaker Unified Studio, agen AI, dan alat analitik dan BI lainnya. Tabel yang diekspor mencakup metadata teknis (seperti resource_id, resource_type), metadata bisnis (seperti asset_name, business_description), detail kepemilikan, dan stempel waktu. Data dipartisi oleh snapshot_date untuk kueri perjalanan waktu dan secara otomatis muncul di Studio Terpadu SageMaker di bawah bucket aws-sagemaker-catalog.
Kemampuan ini tersedia di semua AWS Region di mana Katalog SageMaker didukung tanpa biaya tambahan. Anda hanya membayar untuk layanan dasar termasuk penyimpanan Tabel S3 dan kueri Amazon Athena. Anda dapat mengontrol biaya penyimpanan dengan menetapkan kebijakan penyimpanan pada tabel yang diekspor untuk secara otomatis menghapus catatan yang lebih lama dari periode yang Anda tentukan.
Untuk memulai, aktifkan ekspor set data menggunakan AWS CLI, lalu akses tabel aset melalui Tabel S3 atau tab Data Studio Terpadu SageMaker dalam waktu 24 jam. Kueri menggunakan Amazon Athena, notebook Studio, atau sambungkan alat BI eksternal melalui titik akhir Katalog REST S3 Tables Iceberg. Untuk petunjuk, lihat panduan pengguna Amazon SageMaker.