Cet article explique comment utiliser le connecteur Apache Atlas pour DataGalaxy.
Ce connecteur est disponible dans les modes suivants :
| Mode Desktop ✅ | Mode SaaS Online ❌ |
⚠ Le connecteur permet d'extraire uniquement les métadonnées d'Apache Atlas. Pour se connecter à MongoDB Atlas, veuillez utiliser le connecteur Online MongoDB.
Présentation du connecteur
Les objets récupérés et leurs correspondances dans DataGalaxy sont détaillés dans le tableau suivant :
Objet Atlas | Objet DataGalaxy | Commentaires |
| Connexion | Modèle (Conteneur) | Pour une table Hive, la connexion correspondra au chemin HDFS ciblant les fichiers de données sources |
| Table | Table (Structure) | Extraction des entités de type suivant : hbase_table, hive_table et Table |
| Colonne | Colonne |
Etape 1 : Installation
- Télécharger le connecteur DataGalaxy depuis le portail (voir ici)
- Extraire l'archive du connecteur dans le répertoire de votre choix
- Télécharger le plug-in Atlas depuis le portail et le copier dans le répertoire /lib du connecteur
Etape 2 : Exécution du connecteur Atlas
- Après avoir démarré le connecteur, accéder aux connecteurs du Dictionnaire :
- S'il a été correctement installé, le plug-in Atlas apparaît dans la liste
- Les informations suivantes sont demandées :
| Paramètre | Obligatoire | Description |
| Protocole | Oui | Sélection du protocole : HTTP ou HTTPS |
| Serveur | Oui | Nom du serveur Apache Atlas |
| Port | Oui | 9200 par défaut, à modifier si la configuration du serveur est différente |
| Utilisateur | Oui | Nom de l'utilisateur |
| Mot de passe | Oui | Mot de passe de l'utilisateur |
| Chemin | Non | Paramètre qui permet de rajouter un préfixe à l'URL de connexion à Atlas |
Ces paramètres permettront de constituer l'adresse du endpoint API REST Atlas de la manière suivante :
protocol://server:port/path/api/atlas/v2/...
Informations techniques
Le connecteur Apache Atlas utilise les API REST du serveur, plus d'informations disponibles ici : https://atlas.apache.org/api/v2/index.html
Releases
Date | Plugin | DataGalaxy | Desktop Connector | Description |
| 23/08/2024 | 4.0.2 | v3.69.0 | 5.2.3 | Updated the logger to show more information when using verbose mode |
16/07/2024 | 4.0.1 | v3.59.0 | 5.0.1 | Migrated from java 11 to java 17 |