Les Architectures et infrastructures pour le Big Data

Avoir une bonne culture générale des systèmes d’information et plus particulièrement, avoir des connaissances de base des modèles relationnels, des statistiques et des langages de programmation.

Initier la conception d’une architecture et d’une infrastructure Big Data, en disposant d’une vue d’ensemble des différentes solutions dédiées au traitement des données de masse

À l’issue de chaque module, le formateur évaluera chacun des participants en fonction des cas pratiques et exercices effectués.

Une attestation de formation vous sera remise.

• Alternance d’exercices, cas pratiques, QCM et de notions théoriques, projet Fil Rouge.
• Evaluations régulières et retour du formateur sur les points moins bien assimilés.
• Les supports de cours seront mis à disposition via notre la plate-forme de téléchargement AJC Classroom.
• Accès à notre plateforme à distance de Classe Virtuelle
  Mêmes possibilités et interactions avec votre formateur que lors d’une formation présentielle. En effet, votre formation se déroulera en connexion continue 7h/7 :
  • • • Echanges directs avec le formateur et l’équipe pédagogique à travers la visioconférence, les forums et chats
      • Vérification de l’avancement de votre travail et évaluation par votre formateur à l’aide d’exercices et de cas pratiques
      • Suivi pédagogique et conseils personnalisés pendant toute la formation

   

  Vous recevrez les informations de connexion par mail dès votre inscription. En cas de problème de connexion, vous pourrez joindre notre équipe à tout moment (avant ou même pendant la formation) au 0182837241 ou par mail à l’adresse hotline@ajc-formation.fr.

Les personnes en situation de handicap sont invitées à nous communiquer leurs besoins spécifiques. Nous ferons tout pour les mettre dans les meilleures conditions de suivi de la formation (compensation, accessibilité…)

Une attestation de fin de stage sera remise à tous les participants à l’issue de leur parcours.

Chefs de projets, Architectes, Développeurs, Data Scientists ou toute personne souhaitant connaître les outils pour concevoir une architecture Big Data…

Présentation du Big Data

• Introduction au Big Data : de quoi s’agit-il ?
• Perspectives offertes par le Big Data
• Les acteurs du Big Data
• Exemples pratiques
• Démystification du Big Data
• Les technologies concernées
• Les outils Hadoop
• Les différents métiers du Big Data
• Les distributions Big Data

Solutions Big Data

• Projets, applications, plateformes
• Solutions de stockage des données
• Considérations Hardware
  • Stockage
  • CPU
  • Mémoire
  • Réseau
  • Systèmes distribués
• La science et l’art de l’analyse prédictive

Architecture applicative et technique

• Les différentes étapes de gestion des données
• Les outils du marché
• L’ingestion
• Le stockage
• La transformation
• La restitution et la visualisation

Installation et configuration

• Installation d’une plateformeHadoop
  • Définir l’architecture
  • Installation d’Hadoop / HDFS et d’autres composants
  • Installation des principaux composants (Hive, Pig, Impala…)
• Configuration de l’environnement
  • Etude des fichiers de configuration
  • Modes de configuration (ligne de commandes, API Rest, serveur HTTP intégré, API natives)
  • Configuration desservices (HDFS, YARN, logs…)
  • Configuration des droits d’accès

Administration

• Gestion des ressources
• Administration de HDFS
• Administration de MapReduce
• Planification des stratégies de sécurité et de récupération des données

Travaux pratiques: Définir une architecture Hadoop en cluster à plusieurs nœuds.