Peut-on mettre les variables de contexte dans les MétaData ?

27 novembre 2007 in Question, SGBD, Talend
Tags: context, metadata, Talend

NB : attention, cet article ne concerne qu’une version de Talend Open Studio, antérieure à la version actuelle. Certaines indications peuvent être obsolètes.

Les variables de contexte permettent de stocker des données sur l’environnement d’exécution d’un job. Ensuite, on peut, par le raccourci CTRL + Espace, récupérer ces valeurs partout dans le job pour avoir un job paramétré au mieux. Par exemple, on pourra générer 10 lignes en contexte “Developpement”, 1000 lignes en contexte “Recette”, et recevoir le nombre de lignes du fichier en contexte “Production”.

Les MétaData servent à stocker des informations sur les ressources utilisées, à la manière de constantes dans le code. Cela me permet d’entrer une seule fois les informations concernant la base de données utilisée, par exemple, et de pouvoir juste sélectionner dans une liste déroulante la base et la table à attaquer.

Dès lors, on aurait envie de fabriquer des variables de contexte qui stockent le nom de la base, l’adresse du serveur de la base, etc. Le but étant ensuite d’utiliser ces variables pour créer des métadata, qui donc seraient variables selon le contexte.
Surtout que les MétaData peuvent être partagées par une équipe avec le TOD (Talend On Demand) ou le TIS (Talend Integration Suite).

Mais ce n’est pas possible directement de créer ses variables de contexte et de les coller dans des MétaData. Pourquoi ?

Voilà une réponse partielle, par la copie d’écran suivante de création de MétaData sur une base de données MySQL.

Déjà on peut prévoir que ces données ne sont pas au bon endroit, mais surtout, après dans les jobs, on voit que ces données sont échappées, pour entrer dans le code (ici en Java). Donc on voit bien que ce n’est pas la bonne méthode à utiliser pour mettre ses données de contexte en Metadata.

Comment faire ?

La manière correcte de procéder en suivant la logique Talend, et en centralisant les MetaData, est la suivante :

1. Créer en MétaData un regroupement de Contextes, avec les contextes de votre choix.
   
2. Utiliser de manière “habituelle” les variables de contexte dans vos jobs : dans les propriétés des composants, par exemple.
   
3. Faire tourner le job (onglet “Run Job”) avec le contexte issu du Repository (ensemble des MetaData) et choisir le contexte adapté (“Dev”, “Prod”, etc.)
   

Edit : l’interface a changé dans les versions suivantes de Talend, mais le principe reste le même.