AWS DataSync-Funktionen

AWS DataSync ist ein Online-Service zur Datenverschiebung und -erkennung, der die Datenmigration zu AWS vereinfacht und beschleunigt und Ihnen dabei hilft, Daten schnell und sicher zwischen lokalem Speicher, Edge-Standorten, anderen Clouds und AWS Storage zu verschieben.

AWS DataSync Discovery hilft Ihnen, die Migrationsplanung zu vereinfachen und die Datenmigration zu AWS zu beschleunigen, indem es Ihnen Einblick in die Leistung und Auslastung Ihres On-Premises-Speichers gibt und Empfehlungen für die Migration Ihrer Daten zu AWS Storage Services wie Amazon FSx für NetApp ONTAP, Amazon FSx für Windows File Server und Amazon Elastic File System (EFS) bereitstellt. DataSync Discovery ermöglicht es Ihnen, Ihre On-Premises-Speicherleistung und Kapazitätsnutzung durch automatisierte Datenerfassung und -analyse besser zu verstehen. So können Sie die zu migrierenden Daten schnell identifizieren und die generierten Empfehlungen nutzen, um AWS-Speicherservices auszuwählen, die Ihren Leistungs- und Kapzitätsanforderungen entsprechen.

Für Online-Datenübertragungen, vereinfacht, automatisiert und beschleunigt AWS DataSync das Kopieren großer Datenmengen zwischen On-Premises-Speicher, Edge-Standorten oder anderen Clouds und AWS-Speicherservices sowie zwischen AWS-Speicherservices. DataSync kann Daten zwischen Network File System (NFS)-Freigaben, Server Message Block (SMB)-Freigaben, Hadoop Distributed File Systems (HDFS), selbstverwaltetem Objektspeicher, Google Cloud Storage, Azure Files, AWS Snowcone, Amazon-S3-kompatibler Speicher auf Snow, Amazon Simple Storage Service (Amazon S3), Amazon Elastic File System (Amazon EFS)-Dateisystemen, Amazon FSx für Windows File Server-Dateisystemen, Amazon FSx für Lustre-Dateisystemen und Amazon FSx für OpenZFS-Dateisystemen und Amazon FSx für NetApp ONTAP-Dateisystemen kopieren.

AWS DataSync bietet die folgenden Funktionen für die Datenverlagerung.

AWS DataSync verwendet ein von AWS entwickeltes Übertragungsprotokoll, das vom Speicherprotokoll entkoppelt ist, um die Datenübertragung zu beschleunigen. Das Protokoll optimiert die Art und Weise, wie, wann und welche Daten über das Netzwerk gesendet werden. Die Netzwerkwerkoptimierung durch DataSync umfasst neben inkrementeller Übertragung, Inline-Komprimierung und Erkennung von Dateien mit geringer Dichte auch Inline-Validierung und Verschlüsselung von Daten.

Verbindungen zwischen dem lokalen DataSync-Agenten und den Cloud-internen Service-Komponenten werden parallel genutzt (multi-thread), um die Leistung über das Wide Area Network (WAN) zu maximieren. Eine einzelne DataSync-Aufgabe ist in der Lage, 10 Gbit/s über eine Netzwerkverbindung zwischen Ihrer On-Premises-Umgebung und AWS vollständig zu nutzen.

Die Übertragung von heißen oder kalten Daten sollte Ihr Unternehmen nicht behindern. DataSync verfügt über genaue Kontrollen zur Optimierung des Bandbreitenverbrauchs. Drosseln Sie die Übertragungsgeschwindigkeiten auf bis zu 10 Gbit/s außerhalb der Geschäftszeiten und setzen Sie Grenzen, wenn die Netzwerkverfügbarkeit anderweitig benötigt wird.

DataSync verfügt über einen integrierten Zeitplanungsmechanismus, mit dem Sie regelmäßig Datentransferaufgaben ausführen können, um Änderungen von Ihrem Quellspeichersystem zu erkennen und auf das Zielsystem zu kopieren. Sie können Ihre Aufgaben mit der AWS-DataSync-Konsole oder der AWS Command Line Interface (CLI) planen, ohne Skripte zur Verwaltung wiederholter Übertragungen zu schreiben. Die Aufgabenplanung führt automatisch Aufgaben nach dem von Ihnen konfigurierten Zeitplan aus, wobei die Optionen stündlich, täglich oder wöchentlich direkt in der AWS-Konsole zur Verfügung stehen.

Alle Ihre Daten werden bei der Übertragung zwischen dem DataSync Kundendienstmitarbeiter und dem DataSync-Dienst mit Transport Layer Security (TLS) verschlüsselt. DataSync unterstützt die Verwendung der Standardverschlüsselung im Ruhezustand für Amazon-S3-Buckets. DataSync unterstützt auch die Verschlüsselung von Daten im Ruhezustand und übetragenen Darten für Amazon EFS und Amazon FSx.

DataSync stellt sicher, dass Ihre Daten intakt ankommen. Der Service führt im Rahmen jeder Übertragung und im Speicher Integritätsprüfungen durch. Diese Prüfungen stellen sicher, dass die in Ihr Ziel geschriebenen Daten mit den von Ihrer Quelle gelesenen Daten übereinstimmen und somit die Kontinuität gewährleistet ist.

Der DataSync-Agent stellt über die branchenüblichen NFS- und SMB-Protokolle eine Verbindung zu Ihren vorhandenen Speichersystemen her, zu Ihrem Hadoop-Cluster als HDFS-Client, zu Ihrem selbst verwalteten Objektspeicher oder zu Google Cloud Storage über die Amazon-S3-Anwendungsprogrammierschnittstelle (API) oder zu Azure Blob Storage über die Blob-API (Vorschau). Der Agent überträgt Daten schnell und schreibt sie in den angegebenen Amazon-S3-Bucket, das Amazon-EFS-Dateisystem, das Amazon-FSx-für-Windows-File-Server-Dateisystem oder das Amazon-FSx-Dateisystem.

Dateiberechtigungen und Metadaten werden beim Kopieren von Objekten und/oder Daten zwischen Amazon S3, Amazon EFS, Amazon FSx für Windows File Server, Amazon FSx für Lustre, oder Amazon FSx für OpenZFS oder Amazon FSx für NetApp ONTAP aufbewahrt.

Beim Kopieren von Daten in Amazon S3 konvertiert DataSync automatisch jede Datei in ein einzelnes S3-Objekt in einer 1:1-Beziehung und bewahrt POSIX-Metadaten von NFS-Freigaben oder HDFS als Amazon-S3-Objekt-Metadaten auf. Wenn Sie Objekte mit Dateisystem-Metadaten wieder zurück in Dateiformate kopieren, werden die ursprünglichen Dateimetadaten (die DataSync in S3 kopiert hat) wiederhergestellt.

DataSync arbeitet systemeigen mit AWS-Sicherheits-, Überwachungs- und Prüfungsservices, um die Datenbewegung zu vereinfachen und Ihren IT-, Speicher- und DevOps-Teams ein konsistentes Verwaltungserlebnis zu bieten. Zusätzlich zu den Integrationen mit Amazon S3, Amazon EFS und Amazon FSx unterstützt DataSync AWS Virtual Private Cloud (VPC)-Endpunkte (powered by AWS PrivateLink), um Dateien direkt in Ihre Amazon VPC zu verschieben. Wie andere AWS Services können Sie AWS Identity and Access Management (IAM) verwenden, um den Zugriff auf DataSync sicher zu verwalten. In ähnlicher Weise können Sie eine IAM-Rolle konfigurieren, um die Services, die auf Ihren Amazon S3-Bucket zugreifen, zu kontrollieren.

Mit Amazon CloudWatch können Sie den Status aller laufenden DataSync-Übertragungen überwachen und den Verlauf früherer Datenübertragungen überprüfen. Mit CloudWatch Metrics können Sie die Anzahl der Dateien und die Menge der kopierten Daten sehen. In den CloudWatch-Protokollen finden Sie Informationen über einzelne Dateien, die zu einem bestimmten Zeitpunkt übertragen wurden, sowie die Ergebnisse der DataSync-Integritätsprüfung. Dies vereinfacht die Überwachung, Berichterstattung und Fehlerbehebung und ermöglicht es Ihnen, den Stakeholdern zeitnahe Updates zu liefern. Darüber hinaus werden CloudWatch-Ereignisse ausgelöst, wenn Ihre Übertragungsaufgaben abgeschlossen sind, was die Automatisierung abhängiger Workflows ermöglicht. Für Prüfungszwecke können Sie AWS CloudTrail aufrufen, das alle von DataSync ausgeführten Aktionen protokolliert.

Bei AWS DataSync zahlen Sie nur für die Daten, die der Service kopiert, und zwar zu einem Pauschalpreis pro Gigabyte. Es sind keine Softwarelizenzen, Verträge, Wartungsgebühren, Entwicklungszyklen oder Hardware erforderlich. Im Vergleich zum manuellen Entwickeln, Betreiben und Optimieren eigener hochleistungsfähiger skriptgesteuerter Übertragungen sind die Gesamtbetriebskosten (TCO) geringer, und auch die Gesamtkosten sind niedriger als beim Kauf und Betrieb kommerzieller Übertragungstools.

Mit AWS DataSync Discovery können Sie Discovery-Aufträge bis zu 31 Tage lang ausführen und erhalten kostenlose Empfehlungen. DataSync Discovery speichert die gesammelten Daten und die damit verbundenen Empfehlungen für 60 Tage nach Abschluss des Auftrags.