Talend Open Studio – l’intégration de données

Réf: TOT
Durée: 3 jours

Objectifs de la formation

Talend Open Studio (TOS) est une application libre de type ETL permettant d »effectuer des synchronisations massives d »informations d »une base de données vers une autre. Ce stage vous apprendra à concevoir, modéliser et développer des « jobs » TOS afin de faire face aux différentes problématiques.\r

Contenu de cette formation talend:
Présentation de Talend Open Studio For Data Integration
Modéliser le besoin, concevoir un premier job
-Travailler avec des bases de données
Optimiser le développement des jobs
-Travailler sur des données multisources
-Compléments

 

Programme de Formation

 

Présentation de Talend Open Studio For Data Integration

-L »intégration de données.

 

-Les principales solutions ETL.

 

-Talend Open Studio : philosophie du produit, installation, préférences utilisateur.

 

Travaux pratiques 
Prise en main de l »outil. Présentation du cahier des charges du projet fil rouge.

Modéliser le besoin, concevoir un premier job

 

-Business Modeler : modéliser le métier, identifier les étapes de transformations, formaliser les flux data.

 

-Job Designer : éditeur graphique des jobs, propriétés des composants, définition des connexions.

 

-Conception d »un job à partir d »un exemple.

 

-Visualisation du code généré et exécution d »un job.

 

Exercice 
Développement d »un job assurant le tri d »une source CSV et le stockage du résultat dans un fichier XML.

Travailler avec des bases de données

 

-Panorama des bases de données supportées et leurs principaux composants.

 

-Créer des tables.

 

-Utiliser des composants de transformation simples.

 

-Décomposer un job en sous-jobs, utiliser les types de connexions row et trigger.

 

-Créer des requêtes à l »aide de SQLBuilder.

 

Exercice 
Construction d »un workflow de migration de données entres différentes bases, création de sous-jobs, utilisation de différents triggers.

Optimiser le développement des jobs

 

-Configurer des connexions réutilisables à l »aide des métadonnées.

 

-Mettre à jour les métadonnées et les propager sur les jobs, importer/exporter des métadonnées.

 

-Paramétrer les jobs par des contextes.

 

-Générer des jeux de données de test.

 

Exercice 
Refactorer un job en utilisant méta données et contextes. Générer un jeu de données de test pour ce job.

Travailler sur des données multisources

 

-Présentation du composant tMap.

 

-Configuration des flux d »entrée.

 

-Réaliser des transformations en utilisant variables, expressions et jointures.

 

-Qualifier les données à l »aide de filtres.

 

-Générer des sorties multiples, prendre en compte les rejets.

Exercice 
Consolidation de données multisources et génération d »un entrepôt.

 

Compléments

 

-Lancer les jobs en ligne de commande, organiser leur exécution périodique.

 

-Exécuter un job en mode debug, tracer les statistiques d »exécution.

 

-Les possibilités de reporting.

Exercice 
Génération d »un rapport Jasper Report à partir d »un entrepôt.

 

Méthodes pédagogiques