Amazon SageMaker Catalog ora esporta i metadati delle risorse come i set di dati interrogabili
Amazon SageMaker Catalog ora esporta i metadati delle risorse come tabella Apache Iceberg tramite Tabelle Amazon S3. In questo modo i team di dati possono interrogare l'inventario del catalogo e rispondere a domande come "Quante risorse sono state registrate il mese scorso?", "Quali risorse sono classificate come riservate?" o "Quali risorse sono prive di descrizioni aziendali?" utilizzando SQL standard senza dover costruire un'infrastruttura ETL personalizzata per i report.
Questa funzionalità converte automaticamente i metadati delle risorse del catalogo in una tabella interrogabile accessibile da Amazon Athena, notebook di SageMaker Unified Studio, agenti IA e altri strumenti di analisi e BI. La tabella esportata include metadati tecnici (ad esempio, resource_id, resource_type), metadati aziendali (ad esempio, asset_name, business_description), informazioni sulla proprietà e timestamp. I dati vengono partizionati in base a snapshot_date per consentire query di time travel e sono automaticamente disponibili in SageMaker Unified Studio all'interno del bucket aws-sagemaker-catalog.
La funzionalità è disponibile in tutte le regioni AWS in cui è supportato SageMaker Catalog senza costi aggiuntivi. I costi si limitano ai servizi sottostanti utilizzati, tra cui l'archiviazione delle Tabelle S3 e le query Amazon Athena. È possibile controllare i costi di archiviazione configurando policy di conservazione sulle tabelle esportate per rimuovere automaticamente i record più datati rispetto al periodo specificato.
Per iniziare, attiva l'esportazione dei set di dati utilizzando l'interfaccia a riga di comando di AWS, quindi accedi alla tabella delle risorse tramite Tabelle S3 o la scheda Dati di SageMaker Unified Studio entro 24 ore. È possibile eseguire query con Amazon Athena, notebook di Studio o connettere strumenti BI esterni tramite l'endpoint Iceberg REST Catalog delle Tabelle S3. Per istruzioni, consulta la guida utente di Amazon SageMaker.