Soutenir les agences spatiales africaines avec des déploiements locaux d'Open Data Cube

Alors que les données satellitaires, opportunes et exploitables, deviennent de plus en plus un outil puissant pour la gestion des ressources terrestres, aquatiques et environnementales, la capacité d'héberger localement et d'adapter les infrastructures de données d'observation de la Terre apparaît comme une considération importante. Un récent effort de collaboration entre Digital Earth Africa (DE Africa) et Agence Spatiale Kenyane (L'Arabie saoudite) illustre comment les pays peuvent localiser et adapter Open Data Cube (ODC) déploiements pour répondre à des besoins internes et nationaux spécifiques.

L'ODC est un progiciel gratuit et open-source qui simplifie la gestion et l'analyse de grandes quantités d'images satellites et d'autres données d'observation de la Terre. Il permet aux utilisateurs d'accéder, de traiter et d'analyser facilement des décennies de données géographiques pour suivre les changements à la surface de la Terre au fil du temps. L'ODC est conçu pour aider les scientifiques, les chercheurs et les agences gouvernementales à prendre des décisions plus éclairées dans des domaines tels que les questions environnementales, l'utilisation des terres et la gestion des ressources. DE Africa est le plus grand opérateur mondial de l'infrastructure ODC.

Bien que DE Africa offre une infrastructure de données numériques en libre accès permettant à quiconque d'utiliser librement ses ensembles de données d'observation de la Terre, le KSA a exprimé son intérêt pour le développement d'un modèle à double accès : un environnement bac à sable localisé avec des ensembles de données restreints pour les utilisateurs internes autorisés, parallèlement à un espace accessible au public pour les utilisateurs généraux.

Il était envisagé que dans un premier temps, l'environnement bac à sable de l'Agence serait destiné à un accès interne. Cependant, les plans à long terme pourraient potentiellement impliquer une expansion vers un modèle public, tout en maintenant des permissions stratifiées pour différents types d'utilisateurs. Cette approche garantirait la protection des données sensibles ou stratégiques tout en encourageant une utilisation plus large par le public des ensembles de données ouverts.

Soutenir le déploiement

Victoria Neema, data scientist pour DE Africa basée au Kenya, explique que pour soutenir l'initiative, DE Africa a fourni des conseils basés sur son propre cadre “Africa Cube in a Box”. “Il s'agit d'une instance de l'ODC facilement déployable, basée sur un ordinateur portable”, explique Neema, “qui sert de dépôt de base pour les déploiements locaux ou basés sur le cloud, compatible avec les outils et l'infrastructure de Digital Earth Africa. L'Arabie saoudite pourrait utiliser ce modèle de déploiement comme base – soit directement, soit en adaptant des composants sélectionnés – pour s'adapter à leur configuration spécifique.”

Jacques Matara, directeur adjoint de la recherche et de l'innovation spatiales au KSA, déclare que le déploiement de l'Agence suit finalement une voie plus complexe. “ Nous optons pour un environnement de calcul haute performance (HPC) déployé localement plutôt qu'une infrastructure entièrement basée sur le cloud, comme la plateforme basée sur AWS utilisée par DE Africa. Bien que cette approche nécessite une plus grande capacité technique pour être gérée, elle correspond mieux à nos politiques de gouvernance des données et de sécurité dans la gestion des ensembles de données. ”

Surmonter les défis techniques

Avec le soutien de l'équipe DE Africa, l'Agence a surmonté les premiers défis d'intégration. Des différences clés, notamment entre les environnements locaux et cloud, ont fait que les solutions ne pouvaient pas être appliquées en bloc. Cependant, des sessions de travail collaboratives avec l'équipe de scientifiques de DE Africa ont permis d'aligner les exigences techniques et ont favorisé l'échange de connaissances sur des sujets tels que l'indexation de données à distance directement à partir des buckets Amazon S3 au lieu de télécharger des jeux de données complets. Cela a permis à l'agence d'accéder aux données sans encourir de coûts de stockage élevés, une considération essentielle pour l'imagerie satellitaire à grande échelle.

Un modèle évolutif pour les autres ?

Matara a déclaré : “ Le processus en est encore à ses débuts, mais c'est quelque chose que le KSA s'est engagé à poursuivre pour nous permettre de tirer parti des ensembles de données ouverts et prêts à l'analyse de DE Africa dans un environnement propre au Kenya, afin de répondre à nos besoins spécifiques en matière d'analyse et de modélisation de données. ”

Cette initiative pourrait servir de modèle à d'autres organisations ou gouvernements en Afrique cherchant à mettre en œuvre des capacités d'observation de la Terre localisées similaires. Cependant, il est important de noter que chaque mise en œuvre devrait être adaptée aux contraintes et aux objectifs locaux, en particulier lors de l'équilibre entre la performance, l'accessibilité et la gouvernance des données.

Ce projet met en évidence l'adaptabilité de l'ODC telle qu'implémentée par Digital Earth, et souligne la valeur du partage collaboratif des connaissances pour renforcer les capacités locales en matière de prise de décision basée sur les données.