Saltar al contenido principal

Amazon S3

Metadatos de Amazon S3

Acelerar la detección de datos con metadatos de objetos casi en tiempo real

Búsqueda y organización de los datos que necesita en Amazon S3

Los metadatos de Amazon S3 aprovechan todo el potencial de sus datos de Amazon S3 al hacer que los metadatos de los objetos sean fáciles de acceder y consultar. Superponga, almacene y consulte metadatos enriquecidos para todos los objetos almacenados en Amazon S3, de modo que pueda encontrar rápidamente los datos que necesita para el análisis empresarial, las aplicaciones de inferencia en tiempo real y mucho más. Los metadatos de S3 admiten metadatos de objetos, que incluyen detalles definidos por el sistema, como el tamaño y el origen del objeto, y metadatos personalizados, que le permiten usar etiquetas para anotar sus objetos con información como el SKU del producto, el ID de transacción o la clasificación del contenido. Metadatos S3 completa automáticamente los metadatos de los objetos nuevos y existentes. De esta forma, se ofrece una visión completa de los datos que además se puede consultar. Lea el blog para obtener más información.

Beneficios

Diseñado para crear y administrar metadatos de todos los objetos en los buckets de S3, tanto los ya existentes como los nuevos cargados, para ofrecer una visión integral de los datos.

Encuentre y recupere con rapidez los datos que necesita entre billones de objetos en Amazon S3. Actualizamos los metadatos cada hora para que pueda comprender con facilidad el estado más reciente del almacenamiento.

Utilice etiquetas de objetos para anotarlos con metadatos específicos del negocio, lo que mejora la organización de los datos y facilita su búsqueda.

Acceda a los metadatos a través de tablas de inventario en tiempo real y tablas de registro, disponibles en Tablas de S3 administradas y con compatibilidad nativa con Apache Iceberg.

Analice los metadatos con productos de AWS conocidos, como Amazon Athena, Redshift y EMR, mediante la integración de tablas S3 con Almacén de lago de Amazon SageMaker. Los metadatos de S3 son compatibles con las herramientas populares de código abierto.

Casos de uso

Utilice metadatos enriquecidos para catalogar todos los datos a fin de facilitar el descubrimiento y la utilización. Obtenga una vista completa de todos los objetos de sus depósitos de S3 para rastrear y comprender su almacenamiento de datos.

Realice un seguimiento y administre los videos generados con IA, incluidos su origen, la hora de creación y el modelo de IA utilizado con Amazon Bedrock.

Analice los metadatos de objetos en todo el entorno de almacenamiento para identificar oportunidades de ahorro de costos y mejoras en el rendimiento.

Identifique y analice rápidamente los conjuntos de datos relevantes para la inteligencia empresarial y la toma de decisiones.

Mejore la organización y el cumplimiento de los datos con anotaciones de metadatos personalizadas.

Clientes

Telemática móvil de Cambridge

Cambridge Mobile Telematics (CMT) es el mayor proveedor de servicios telemáticos del mundo. Su misión es hacer que las carreteras del mundo sean más seguras y que los conductores estén fuera de peligro. La plataforma impulsada por IA de la empresa, DriveWell Fusion®, recopila datos de sensores de millones de dispositivos IoT (incluidos teléfonos inteligentes, etiquetas patentadas, vehículos conectados, cámaras de automóviles y dispositivos de terceros) y los fusiona con datos contextuales para crear una visión unificada del comportamiento del vehículo y del conductor.

«En CMT, almacenamos y analizamos varios petabytes de datos de dispositivos móviles de IoT en todo el mundo para mejorar la seguridad vial y de los conductores. A medida que escalamos, la localización de datos específicos para desarrollar nuevos conocimientos y modelos resulta cada vez más desafiante. S3 Metadata, en particular su capacidad de metadatos personalizados, nos permite anotar todos nuestros datos y mantener los metadatos en una tabla administrada que se puede consultar. Ahora, para encontrar datos relevantes basta con una consulta SQL eficiente y rentable. Esto convierte a S3 Metadata en un punto de inflexión, ya que nos permite ofrecer nuevas capacidades a nuestros clientes. »

Tim Vogel, director de Información de Cambridge Mobile Telematics

Missing alt text value

PayPal

PayPal lleva más de 25 años siendo revolucionario en el comercio mundial. PayPal crea experiencias innovadoras que hacen que mover el dinero, vender y comprar sean acciones sencillas, personalizadas y seguras, y permite a consumidores y empresas de aproximadamente 200 mercados unirse a la economía global y prosperar en ella.

«Los metadatos de S3 nos proporcionan un mecanismo sencillo y directo para analizar billones de objetos de S3 mediante herramientas estándar como Amazon Athena y Amazon QuickSight. Con esta funcionalidad, podemos dedicar nuestro tiempo a tomar decisiones en lugar de crear nuestras complejas canalizaciones de datos para acceder a los metadatos de los objetos de S3 y consultarlos. »

Jon Southall, vicepresidente de Ingeniería de Plataformas para Grandes Empresas de PayPal

Missing alt text value

Roche

Roche es una empresa de biotecnología que combina productos farmacéuticos y diagnósticos para lograr avances en los servicios sanitarios personalizados y mejorar la vida de las personas.

«S3 Metadata acelera nuestras iniciativas de IA generativa. A medida que creamos aplicaciones de LLM, como los chatbots internos, para nuestros equipos, los datos no estructurados, como los PDF, son cada vez más valiosos. Necesitamos incorporar muchos documentos de dominios específicos a una aplicación de generación aumentada por recuperación (RAG) para que el chatbot pueda adaptarse a los contextos empresariales específicos de Roche. Sin embargo, esto también significa que cada vez hay más datos no estructurados que necesitamos administrar. Necesitamos un sistema de metadatos que describa de manera eficiente nuestros datos no estructurados, de modo que nuestros usuarios puedan examinar rápidamente nuestro gran lago de datos e identificar los conjuntos de datos relevantes para la aplicación de IA generativa en particular que están creando. Gracias a S3 Metadata, la creación de un sistema de metadatos sólido se ha simplificado con unos pocos clics en la consola de administración de AWS. A medida que incorporamos cada vez más datos no estructurados, S3 Metadata muestra automáticamente los metadatos y los mantiene actualizados. Además, utilizamos nuestra propia Lambda para extraer metadatos específicos de la empresa, como la clasificación de documentos basada en una taxonomía relevante para Roche, y almacenamos estos metadatos en el mismo catálogo de Glue junto con la tabla de S3 Metadata para que con una simple unión SQL podamos tener todos los metadatos que necesitamos. Los metadatos de S3 nos ayudan a crear aplicaciones de IA generativa con mayor rapidez, lo que nos permite centrarnos en crear nuestros datos en lugar de organizarlos. »

Yannick Misteli, director de Ingeniería Comercial para el Sector Farmacéutico de Roche

The Roche logo in blue text inside a blue hexagon outline on a transparent background.

SmugMug/Flickr

SmugMug y Flickr ofrecen plataformas en línea donde los fotógrafos pueden subir y compartir fotos y videos. La empresa almacena miles de millones de fotos y videos en su aplicación.

«Imagine volar una máquina del tiempo a través de sus datos de Amazon S3. En SmugMug y Flickr, hemos almacenado más de 22 años de fotos de nuestros clientes, cientos de miles de millones de objetos, en S3. La nueva característica de S3 Metadata nos ayuda a explorar fácilmente los metadatos de objetos de S3 de forma sencilla y asequible, mediante la consulta de metadatos como el tamaño de los objetos a lo largo del tiempo para comprender cómo han evolucionado nuestros datos, lo que antes implicaba unir costosas consultas de bases de datos con inventarios de objetos. Comprender cómo nuestros fotógrafos utilizan nuestro almacenamiento ayuda a fomentar nuestro compromiso de construir un mundo mejor a través del poder de la fotografía. »

Andrew Shieh, ingeniero principal de SmugMug

Missing alt text value

Acelere el descubrimiento de datos con metadatos de objetos

Amazon S3 Metadata genera de forma automática metadatos enriquecidos para sus objetos de S3 prácticamente en tiempo real. Observe cómo exploramos y consultamos objetos en función de metadatos personalizados mediante etiquetas de objetos. Ya sea que administre lagos de datos a gran escala u optimice el descubrimiento de datos, obtendrá información práctica sobre la administración de datos basada en metadatos.