Connecteur Google Cloud Storage : importez les fichiers de vos buckets
Pour qui ?
Organisations qui stockent leurs fichiers métier dans Google Cloud Storage et veulent les publier comme jeux de données sans ressaisie.
Le connecteur Google Cloud Storage importe dans Data Fair les fichiers d'un bucket GCS. La plateforme parcourt les dossiers, recherche un fichier par son nom, télécharge celui que vous choisissez puis le publie comme jeu de données, avec des mises à jour planifiées. La connexion utilise un compte de service Google Cloud.
Ce que permet le connecteur Google Cloud Storage
- Parcourir et rechercher dans le bucket : navigation par dossiers, recherche par nom de fichier et fil d'Ariane ;
- Importer un fichier comme jeu de données : formats tabulaires (CSV, Excel, ODS…) et géographiques (GeoJSON, Shapefile, GeoPackage…) ;
- Se connecter avec un compte de service : la clé JSON du compte de service (rôle
Storage Object Viewer) et le nom du bucket se renseignent dans le back-office ; - Planifier les synchronisations (horaire, quotidienne, hebdomadaire, mensuelle ou manuelle), consulter l'historique des exécutions et recevoir des notifications en cas d'échec ;
- Diffuser ensuite les données en catalogue, API REST, tableaux et cartes interactives.
Cas d'usage
- Import et mise à jour de données : rapatrier des fichiers d'un bucket et les tenir à jour automatiquement ;
- Data marketplace et close data : publier en interne des fichiers déposés dans le cloud ;
- Publication et diffusion de données : exposer les fichiers importés en catalogue et API.
Pour aller plus loin
- Configurer un connecteur Google Cloud Storage : le cours pas à pas (compte de service, bucket) ;
- Créer et gérer un connecteur de catalogue : la mécanique commune à tous les connecteurs ;
- Connecteurs de catalogues et de données : le hub des connecteurs ;
- Import et mise à jour de données : formats, planification et jeux virtuels.