Talend Open Studio Data Integration

Connaissance de Java

Connaître et Comprendre ses comportements face aux autres
Profiter des différences pour renforcer la coopération au sein de son équipe
Développer la confiance en soi pour mieux s’affirmer dans les relations difficiles

Accessible selon le nombre de places disponibles.
Les participants recevront leur convocation au plus tôt deux semaines avant le début de la formation.

À l’issue de chaque module, le formateur évaluera chacun des participants en fonction des cas pratiques et exercices effectués.

Une attestation de formation vous sera remise.

• Alternance d’exercices, cas pratiques, QCM et de notions théoriques, projet Fil Rouge.
• Evaluations régulières et retour du formateur sur les points moins bien assimilés.
• Les supports de cours seront mis à disposition via notre la plate-forme de téléchargement AJC Classroom.
• Accès à notre plateforme à distance de Classe Virtuelle
  Mêmes possibilités et interactions avec votre formateur que lors d’une formation présentielle. En effet, votre formation se déroulera en connexion continue 7h/7 :
  • • • Echanges directs avec le formateur et l’équipe pédagogique à travers la visioconférence, les forums et chats
      • Vérification de l’avancement de votre travail et évaluation par votre formateur à l’aide d’exercices et de cas pratiques
      • Suivi pédagogique et conseils personnalisés pendant toute la formation

   

  Vous recevrez les informations de connexion par mail dès votre inscription. En cas de problème de connexion, vous pourrez joindre notre équipe à tout moment (avant ou même pendant la formation) au 0182837241 ou par mail à l’adresse hotline@ajc-formation.fr.

Les personnes en situation de handicap sont invitées à nous communiquer leurs besoins spécifiques. Nous ferons tout pour les mettre dans les meilleures conditions de suivi de la formation (compensation, accessibilité…)

Attestation de formation

Administrateur systèmes et Base de données
Chefs de projets
Développeurs

Introduction

• Problématique d’intégration de données
• Intégration Opérationnelle et Décisionnelle
• Outils ETL (Extract Transform Load) disponibles
• Talend Open Studio : présentation, licences, lien avec Eclipse
• Support disponible : documentation, communauté, …

Découvrir l’interface

• Les perspectives et les vues Talend
• Utilisation du Business Modeler
• Les jobs : grille, palette de composants
• Les flux principaux (main)
• La notion de schéma : types des colonnes
• Premiers composants : entrée, sortie, génération de flux

Les principaux composants de Talend

• Composants d’entrée (tFileInput, tMysqlInput, …)
• Génération de contenu (tRowGenerator, tFixedFlowInput, …)
• Sorties et affichage (tLogRow, tFileOutput, tMysqlOutput, …)
• Logique et chaînage des composants
• Suivi pas à pas des traces de l’exécution du job
• Gestion des rejets
• Transformations simples (filtre, tri, remplacement, jointure)

Garantir la pérennité des jobs

• Versions et statuts des jobs
• Les métadonnées : propriétés et schémas.
• La découverte de schéma pour les fichiers CSV
• Récupération des schémas de bases de données
• Mises à jour des jobs depuis les métadonnées

Variables et contextes

• Utiliser des variables dans un job (tSetGlobalVar)
• Mise en place d’un contexte local au job
• Groupes de contexte dans le référentiel
• Les métadonnées comme contextes

Le mappage de données : tMap

• Le composant ETL par excellence
• Gérer les entrées : flux principal, secondaires, nommage des flux
• Gérer les sorties : l’éditeur intégré de la tMap
• Filtrer les données : en entrée, sortie
• Sorties conjointes, capture des rejets de sortie, de jointure interne
• L’éditeur d’expression
• Les performances

Orchestration des jobs, gestion d’erreurs

• Exécutions parallèles de sous-jobs
• Déclencheurs Talend (triggers)
• Enchaînement de sous-jobs et de composants (OnSubjobOK, OnComponentOK)
• Gestion des erreurs de composants, sous-job (OnComponentError, OnSubjobError)
• Composant de départ, et de fin (tPreJob, tPostJob)
• Attraper et lever des erreurs : tWarn, tDie, tLogCatcher

Les flux de programmation : liens iterate

• Différencier les flux principaux des flux iterate
• Boucles et programmation via tLoop, tForeach
• Passer d’un flux principal à un flux iterate, et l’inverse (tFlowToIterate, tIterateToFlow)
• Synchronisation de jobs avec les tWaitForFile, tWaitForSocket, tWaitForSQL

Utilisation avancée

• Utilisation de composants évolués : Java ou expressions régulières
• La spécificité des flux XML dans Talend
• Réutilisation du code : les routines

Déboguage dans Talend

• Rappels sur le débogage de traces
• Utilisation du mode Debug Java : perspective Debug, mode pas à pas
• Visualisation et modification à chaud des variables

Déploiement et industrialisation

• Rappel sur les contextes
• Export des jobs pour exécution sur un serveur
• Passage de contexte entre jobs, à l’exécution
• Utilisation d’un fichier pour charger le contexte (tContextLoad)

Utilisation avancée

• Utilisation de composants évolués : Java ou expressions régulières
• Création de logs spécifiques
• Gestion des flux XML
• Réutilisation du code

Les composants Talend

• Concepts essentiels pour étendre Talend Open Studio
• Création de la maquette du composant avec tJavaFlex / interface graphique
• Découvrir la forge Talend et ses composants communautaires
• Intégration dans Talend Open Studio des plugins créés ou téléchargés