L'Agence spatiale européenne (ESA) est une organisation internationale composée de 20 états membres. Sa mission est de façonner le développement de la capacité spatiale européenne et de s'assurer que l'investissement dans l'espace se poursuit pour en faire profiter les citoyens d'Europe et du reste du monde.

Le programme Data User Elements (DUE), mené à l'Institut européen de recherches spatiales à Frascati, en Italie, est un programme de l'ESA destiné à démontrer l'utilité des produits et services d'observation de la Terre aux utilisateurs finaux à travers le monde. Il fait appel à des satellites pour recueillir des données précieuses sur l'état actuel de la planète.

Le programme DUE fournit ces données à des scientifiques, des organismes publics et des organisations privées du monde entier. Les données sont utilisées à de nombreuses fins, notamment pour surveiller l'environnement, améliorer la précision des observations météorologiques et aider les organismes de secours en cas de catastrophe.

Bien qu'une grande partie du travail du DUE soit réalisée par des satellites, l'infrastructure de calcul et de stockage de données repose en partie sur Amazon Web Services (AWS). Le programme DUE utilise Amazon Simple Storage Service (Amazon S3) pour héberger et récupérer ses images et d'autres produits destinés aux utilisateurs finaux. Pour gérer ses fichiers dans Amazon S3, le programme utilise un outil tiers basé sur s3fs, un système de fichiers FUSE.

Amazon Elastic Compute Cloud (Amazon EC2) exécute un système statistique qui examine l'utilisation des services du programme. Le programme DUE utilise AWStat, un outil tiers, pour l'analyse de journaux. A l'avenir, le programme espère accroître son utilisation d'Amazon EC2 pour inclure d'autres applications de télédétection.

Le programme DUE a choisi AWS en raison de son système de paiement à l'utilisation économique et de sa prise en main rapide. Comme l'indique Jose Ramos, ingénieur en systèmes informatiques spécialisé dans l'observation de la Terre : « Les étapes de mise en œuvre et de déploiement de notre système statistique et de distribution complet ont été, contre toute attente, simples et rapides. On s'attend généralement à des retards lors de l'achat et de l'installation d'un nouveau matériel dédié, mais AWS nous a libéré de cette préoccupation et a respecté notre calendrier serré ».

Le programme DUE profite également de la facilité d'adaptation et de personnalisation des fonctionnalités avec AWS. Cette convivialité évite au programme d'avoir à engager une entreprise externe pour gérer son infrastructure. Jose Ramos explique : « Avec AWS, nous disposons d'un système de stockage d'infrastructure flexible pour nos données qui peut évoluer en fonction de nos besoins. De plus, les solutions proposées par AWS sont simples à utiliser. Nous pouvons donc nous charger nous-mêmes de leur gestion ».

Le programme affirme que pendant les périodes de pointe, AWS l'aide à fournir des images et d'autres produits à plus de 50 000 utilisateurs à travers le monde. Cette utilisation peut atteindre 30 To d'informations à la fois.

Le programme DUE prévoit de poursuivre son partenariat avec AWS tout en se concentrant sur sa mission importante qui consiste à recueillir des données sur la Terre. Ramos réaffirme son enthousiasme pour AWS : « Pouvoir tout implémenter en un temps record et oublier les problèmes de performance est une bénédiction. Nous apprécions beaucoup la facilité d'utilisation et l'évolutivité d'AWS ».

Pour découvrir comment AWS peut vous aider à répondre à vos besoins en matière de collecte et de stockage de données, consultez notre page consacrée au Big Data à l'adresse : http://aws.amazon.com/big-data/.