Fonctionnalités d'AWS DataSync 

Les connexions entre l’agent local DataSync et les composants du service en cloud sont multithread, mettant en parallèle les fichiers volumineux afin d’améliorer les performances au niveau du réseau étendu (WAN). Par ailleurs, DataSync met automatiquement à l’échelle les ressources du cloud de manière à prendre en charge des transferts plus volumineux et à simplifier l’ajout d’agents locaux, si nécessaire. Le service peut mettre les performances à l’échelle de façon à utiliser intégralement un lien de 10 Gb/s.

Le service utilise un protocole de transfert conçu par AWS et découplé du protocole de stockage pour accélérer le déplacement des données. Ce protocole optimise les opérations en fonction de la manière dont sont envoyées les données sur le réseau, du moment, et de la nature de ces données. Ces optimisations du réseau incluent les transferts incrémentaux, la compression en ligne, la détection de fichiers partiellement alloués, ainsi que la validation des données en ligne et le chiffrement.

Après avoir déployé l’agent DataSync, connectez votre stockage sur site et sélectionnez votre compartiment Amazon S3 ou système de fichiers EFS en tant que destination ou source pour les transferts de données. Le service DataSync gère le reste de l’infrastructure, et notamment les ressources automatiquement mises à l’échelle du cloud. Il simplifie également l’ajout et la gestion de multiples agents locaux. Cela supprime bon nombre des défis liés aux infrastructures et à la gestion qui surviennent lors de l’écriture, de l’optimisation et de la gestion de vos propres scripts ou lors du déploiement et du réglage d’outils de transfert commerciaux lourds.

L’agent DataSync se connecte à vos systèmes de stockage existants via le protocole NFS aux normes du secteur. L’agent transfère rapidement les données et les entrepose dans votre compartiment Amazon S3 ou dans votre système de fichiers EFS. Lors de la copie des données vers Amazon S3, DataSync convertit automatiquement chaque fichier de façon à ce qu’il soit un objet S3 unique d’une relation 1:1, et conserve les métadonnées des fichiers sous forme de métadonnées d’objet Amazon S3. Lors du renvoi d’objets contenant des métadonnées du système de fichiers, les métadonnées des fichiers originaux copiées par DataSync dans S3 sont restaurées. De la même façon, lorsque la destination de vos données est Amazon EFS, DataSync conserve vos structures de répertoire et les métadonnées de fichiers existantes.

Toutes vos données sont chiffrées en transit, via le protocole TLS (Transport Layer Security). DataSync s’intègre à AWS Key Management Service (AWS KMS) de manière à pouvoir chiffrer les données au repos dans AWS. Pour les données d’Amazon S3, vous pouvez également utiliser les clés de chiffrement gérées spécifiques (SSE-S3). DataSync s’assure également que vos données arrivent intactes. Lors de chaque transfert, le service effectue des vérifications d’intégrité des données en transit et au repos. Ces contrôles permettent d’assurer la cohérence et de garantir que les données écrites dans votre destination correspondent aux données lues dans la source.

Vous payez uniquement pour les données copiées par le service, selon un tarif par gigaoctet unique. Aucune licence de logiciel, aucuns contrat, frais de maintenance, cycle de développement ou matériel ne sont requis. Cela rend le coût total de possession plus faible que si vous essayiez de créer, exploiter et d’optimiser vos propres transferts de scripts haute performance. Ceci est également vrai en comparaison avec l’achat et l’exploitation d’outils de transfert commerciaux.

Afin de simplifier les déplacements de données et d’offrir une expérience de gestion cohérente pour vos équipes DevOps, DataSync fonctionne nativement avec les services de gestion et d’infrastructure d’AWS. En plus de s’intégrer à Amazon EFS, Amazon S3 et AWS KMS, DataSync se connecte également à Amazon VPC pour vous permettre de déplacer directement les fichiers de votre système EFS dans votre VPC. Comme pour les autres services AWS, vous utilisez AWS Identity and access management (IAM) pour gérer de façon sécurisée l’accès à DataSync. Le service accède à votre compartiment Amazon S3 à l’aide du rôle IAM que vous avez configuré.

Grâce à Amazon CloudWatch, surveillez le statut de tous vos transferts DataSync en cours et consultez l’historique des transferts précédents. Les métriques CloudWatch vous permettent de connaître le nombre de fichiers et le volume des données copiées. Vous pouvez consulter CloudWatch Logs pour en savoir plus sur les tâches précédentes. Par ailleurs, les événements CloudWatch sont déclenchés dès que le transfert de vos tâches est terminé, ce qui permet l’automatisation des flux de travail dépendants. À des fins de vérification, vous pouvez consulter AWS CloudTrail où sont consignées toutes les actions de DataSync.