Speicheranalysen und Einblicke für Amazon S3

Wenn Sie von Hunderten auf Millionen oder Milliarden von Objekten und von Terabyte auf Petabyte an Daten in Amazon S3 wachsen, wird es immer wichtiger, einen Überblick über Ihre Speichernutzung zu erhalten. Amazon S3 bietet eine Reihe von Funktionen, mit denen Sie Ihren Speicher in großem Maßstab besser verstehen, analysieren und optimieren können.

Amazon S3 Storage Lens

S3 Storage Lens stellt unternehmensweite Sichtbarkeit in Objektspeichernutzung und Aktivitätentrends bereit und spricht umsetzbare Empfehlungen aus, um Kosten zu optimieren und bewährte Methoden des Datenschutzes anzuwenden. S3 Storage Lens ist die erste Cloud-Storage-Analyselösung, die eine einheitliche Ansicht der Objektspeichernutzung und -aktivität über Hunderte oder sogar Tausende von Konten in einem Unternehmen hinweg bietet, mit Aufschlüsselung zur Gewinnung von Erkenntnissen auf mehreren Aggregationsebenen. S3 Storage Lens stützt sich auf mehr als 16 Jahre Erfahrung in der Unterstützung von Kunden bei der Speicheroptimierung und analysiert unternehmensweite Kennzahlen, um kontextbezogene Empfehlungen zu geben, die es einfach machen, sofort Maßnahmen zu ergreifen.

Amazon S3 wird zur Speicherung großer, gemeinsam genutzter Datensätze über Dutzende bis Hunderte von Konten und Buckets, mehrere Regionen und Tausende von Präfixen verwendet. Mit S3 Storage Lens können Sie Ihren Speicher leicht verstehen und analysieren, um Ausreißer zu erkennen. S3 Storage Lens liefert mehr als 60 Metriken (kostenlose Metriken und erweiterte Metriken) zur S3-Speichernutzung und -aktivität in einem interaktiven Dashboard in der S3-Konsole. Kostenlose Metriken stehen allen Kunden kostenlos zur Verfügung. Erweiterte Metriken können gegen eine monatliche Gebühr pro Objekt aktiviert werden, um zusätzliche Metriken, Einblicke auf Präfixebene, erweiterte Datenspeicherung, Empfehlungen und die Option zur Veröffentlichung von Metriken in Amazon CloudWatch zu erhalten.

Maximierung der Transparenz der Speicherkosten mit Amazon S3 Storage Lens (12:00)

So funktioniert S3 Storage Lens

So funktioniert S3 Storage Lens

Alle Amazon S3-Kunden können in der S3-Konsole auf ein interaktives S3-Storage-Lens-Dashboard zugreifen, das vorkonfigurierte Ansichten zur Visualisierung der Speichernutzung und Aktivitätstrends enthält. Die kostenlosen Metriken von S3 Storage Lens bieten Ihnen 28 Metriken in verschiedenen Kategorien auf Bucket-Ebene sowie 14 Tage historische Daten im Dashboard. Sie können Ihr Dashboard nach Zusammenfassung, Kostenoptimierung, Datenschutz, Zugriffsmanagement, Leistung oder Ereignissen filtern, um spezifische Kennzahlen für Ihre geplanten Anwendungsfälle zu analysieren. Zusätzlich zum Dashboard in der S3-Konsole können Sie Metriken im CSV- oder Parquetformat zur weiteren Verwendung in einen S3-Bucket ihrer Wahl exportieren. Um mehr über S3 Storage Lens zu erfahren, lesen Sie die Dokumentation.

Erweiterte Metriken für S3 Storage Lens

Durch ein Upgrade auf die fortgeschrittenen Metriken von Storage Lens erhalten Sie 35 zusätzliche Metriken mit Verlaufsdaten von 15 Monaten. Die erweiterten Metriken bieten Einblicke in Aktivitäten (wie die Anzahl der Anfragen), tiefere Kostenoptimierungen (wie die Anzahl der S3-Lifecycle-Regeln), zusätzlichen Datenschutz (wie die Anzahl der S3-Replikationsregeln) und detaillierte Statuscodes (z. B. 403-Autorisierungsfehler). Sie können auch bis zur Präfixebene aufschlüsseln, um Ihre größten und am schnellsten wachsenden Präfixe innerhalb eines Buckets zu ermitteln. Darüber hinaus können Sie über Amazon CloudWatch auf Metriken von S3 Storage Lens zugreifen, um Alarme zu erstellen, oder über die CloudWatch-API, um Metriken an integrierte Observability-Partner zu senden. Erweiterte Erkenntnisse können genutzt werden, um die Nutzung von Lifecycle-Regeln zu erweitern, um die Kosten zu optimieren, Buckets mit unzureichenden Datenschutzrichtlinien zu identifizieren und die Leistung Ihrer Anwendungsworkloads zu verbessern. Preisdetails für erweiterte Metriken finden Sie auf der Preisseite für Amazon S3.

S3 Storage Lens – Vertiefung und Demo

Verschaffen Sie sich mit Amazon S3 Storage Lens Einblicke in die Speichernutzung in großem Maßstab (51:07)
Amazon S3 Storage Lens: Demo-Tutorial (2:47)

Kunden von S3 Storage Lens

Upstox

Upstox ist ein führender indischer Discount-Broker, der mehr als 11 Millionen Kunden finanzielle Bildung und eine digitale Plattform für Investitionen bietet. 

„Der Weg in die Zukunft besteht darin, weiterhin Amazon S3 Storage Lens zu verwenden, um unsere Speichernutzung genauer zu verfolgen und die Kosteneffizienz weiter zu verbessern. Mit dem interaktiven Dashboard von S3 Storage Lens können wir die S3-Präfix-Hotspots, an denen die Kosten steigen, leicht ausfindig machen und sie mit den richtigen Aufbewahrungsrichtlinien und der S3-Speicherklasse optimieren, um die Kosteneffizienz weiter zu verbessern.“

Indranil Chandra, Principal ML & Data Engineer – Upstox

Upstox spart mit Amazon S3 Storage Lens jährlich 1 Million US-Dollar »
Pinterest

Pinterest ist eine visuelle Entdeckungsmaschine, die mehr als 400 Millionen Menschen jeden Monat nutzen, um Inspirationen für ihr Leben zu finden.

„S3 Storage Lens wird unseren Überblick über unsere Speichernutzung verbessern und uns helfen, unsere Speicherkosten kontinuierlich zu optimieren. Wir verwenden die unternehmensweite Ansicht, um die aggregierte Speichernutzung für unsere Teams in mehreren Regionen zu sehen, und brechen es dann herunter, um das Speicherwachstum auf Bucket- oder sogar Präfixebene zu verstehen.
 
Mithilfe von S3 Storage Lens können wir dann verschiedene Dashboards für verschiedene interne Teams erstellen, sodass diese selbst nach Möglichkeiten suchen, die Speicherkosten zu optimieren, indem sie eine Lifecyle-Richtlinie anwenden oder Daten auf eine kostengünstigere Speicherklasse umstellen.“

Yi Yin, Software Engineer – Pinterest

Snowflake

Snowflake liefert die Data Cloud – ein globales Netzwerk, in dem Tausende von Unternehmen Daten mit nahezu unbegrenzter Skalierung, Gleichzeitigkeit und Leistung mobilisieren.

„Die Möglichkeit, Metriken auf der Grundlage von Präfixen zu verwenden, wird für uns von unschätzbarem Wert sein. Wir werden bessere Einblicke in die Verwendung bestimmter Präfixe erhalten, einschließlich des Gesamtspeichers, der Anzahl der Objekte, der durchschnittlichen Objektgröße und der Aufschlüsselung nach aktuellen und nicht aktuellen Versionen, was uns helfen kann, Fehler zu debuggen und Betriebstrends auf wirtschaftliche Weise zu erkennen. Dies war ohne S3 Storage Lens bisher nicht möglich.“

Ju-Yi Kuo, Senior Software Engineer - Snowflake

Veeva

Veeva Systems Inc. ist ein führender Anbieter von Cloud-Lösungen – einschließlich Daten, Software und Services – für die globale Life-Sciences-Branche.

„S3 Storage Lens ist sehr einfach einzurichten und zu konfigurieren. Wir erhielten gute Einblicke in unsere S3-Nutzung, was es uns ermöglichte, Aktionspläne zur Kostenoptimierung in S3 umzusetzen. Wir sparen jetzt Tausende von Dollar pro Monat, indem wir die Speicherung von Objekten in S3 optimieren.“

Dan Soble, Vice President of Technical Operations - Veeva

S3 Storage Class Analysis

Mit S3 Storage Class Analysis können Sie Zugriffsmuster objektübergreifend überwachen. Dies hilft Ihnen zu entscheiden, wann Daten auf die richtige Speicherklasse übertragen werden sollen, um Kosten zu sparen. Anhand dieser Informationen können Sie eine S3-Lebenszyklusrichtlinie konfigurieren, die die Datenübertragung veranlasst. S3-Lebenszyklusrichtlinien können auch verwendet werden, um Objekte am Ende ihres Lebenszyklus ablaufen zu lassen. Wenn Sie feststellen, dass sich Ihre Zugriffsmuster häufig ändern, können Sie S3 Intelligent-Tiering verwenden, das Ihre Daten automatisch auf der Grundlage sich ändernder Zugriffsmuster zwischen 4 Zugriffsebenen verschiebt, zu denen eine Stufe für häufigen Zugriff, eine kostengünstigere Stufe für seltenen Zugriff, eine Archivzugriffsebene und eine Stufe mit tiefem Archivzugriff gehören, um Kosten zu sparen. Zudem ermöglicht die Speicherklassenanalyse tägliche grafische Darstellungen Ihrer Speichernutzung in der AWS-Managementkonsole. Sie können diese in einen S3-Bucket exportieren und dort für die Tools für intelligente Geschäftsanalysen Ihrer Wahl wie beispielsweise Amazon QuickSight nutzen. Weitere Informationen zu Speicherklassenanalyse finden Sie im Dokumentationsleitfaden zu Speicherklassenanalyse.

Amazon S3 Inventory

Amazon S3 Inventory ist eine Funktion, mit der Sie Ihren Speicher verwalten können. S3 Inventory erstellt täglich oder wöchentlich einen Bericht über Ihre Objekte und die zugehörigen Metadaten für einen S3-Bucket oder ein Präfix. Dieser Bericht kann dazu beitragen, geschäftliche, rechtliche und regulatorische Anforderungen zu erfüllen, indem der Verschlüsselungs- und Replikationsstatus Ihrer Objekte überprüft wird. Sie können auch S3-Inventory-Berichte verwenden, um Geschäftsabläufe und Big-Data-Aufträge zu beschleunigen.

S3-Inventory-Berichte enthalten unter anderem entsprechende Metadaten wie Bucket-Namen, Schlüsselnamen, Datum der letzten Änderung, Objektgröße, Speicherklasse, Replikations- oder Verschlüsselungsstatus. S3-Inventory-Berichte können täglich oder wöchentlich bereitgestellt und können zum Schutz vertraulicher Daten verschlüsselt werden. Es kann auch so konfiguriert werden, dass mehrere Berichte mit verschiedenen Arten von Metadaten bereitgestellt werden, die für Ihre spezifischen Anforderungen relevant sind. Es bietet eine Liste Ihrer Objekte und der entsprechenden Metadaten für einen S3-Bucket oder ein gemeinsames Präfix, die für die Analyse Ihres Speichers auf Objektebene verwendet werden können. 

Mit Amazon S3 Inventory können Sie den Verschlüsselungsstatus von Objekten auf Sicherheit und Konformität überprüfen, den Replikationsstatus von Objekten in einen anderen S3-Bucket verfolgen, Geschäftsabläufe und Big-Data-Aufträge beschleunigen und Zielobjekte für S3-Batch-Operationen identifizieren.

Das Potenzial von S3 Inventory: Erweiterte Anwendungsfälle und bewährte Methoden (23:14)

Sind Sie startbereit?

Erfahren Sie mehr über die Preise für S3
Weitere Informationen zu den Preisen für S3

Sie zahlen nur für das, was Sie nutzen. Es gibt keine Mindestgebühr.

Weitere Informationen 
Für ein kostenloses Konto registrieren
Registrieren Sie sich und erhalten Sie ein kostenloses Konto

Erhalten Sie sofort Zugang zum kostenlosen Kontingent für AWS und beginnen Sie mit dem Experimentieren mit Amazon S3. 

Registrieren 
Beginnen Sie die Entwicklung mit S3
Beginnen Sie mit der Entwicklung in der Konsole

Fangen Sie an, mit Amazon S3 in der AWS-Konsole zu entwickeln.

Erste Schritte