BIG DATA – Hadoop – Déployer du Big Data

Connaissances en administration système, préalablement Java.

• Objectifs pédagogiques
  • Comprendre le Big Data et ses enjeux
  • Savoir déployer Hadoop et son écosystème
  • Comprendre HDFS, MapReduce
  • Structurer les données ave HBase
  • Écrire des requêtes avec HiveQl
  • Lancer une analyse avec Pig

• Objectifs opérationnels
  • Avoir acquis les connaissances sur le Big Data et Hadoop
  • Savoir mettre en place Hadoop
  • Connaître les intérêts de MapReduce 
  • Travailler en autonomie
  • Maîtriser le module

PLAN PEDAGOGIQUE

• Introduction au Big Data

• • Qu’est-ce que le Big Data ?
  • Source des données : l’homme, la machine
  • La problématique de taille
  • Position de Hadoop dans le paysage

• Introduction à Hadoop

• • L’origine du projet
  • Le système de fichiers HDFS
  • Comprendre l’algorithme MapReduce
  • L’environnement d’Hadoop : HBase, Zookeeper, Hive, Pig…
  • L’APIYARN

• Mettre Hadoop en place : HDFS

• • Du mode autonome au mode complètement distribué en cluster
  • Pré-requis, distributions Hadoop
  • Cluster Hadoop : NameNode, ResourceManager, DataNode,NodeManager
  • Les fichiers de configuration
  • Opérations de base sur le duster HDFS : formatage, démarrage, arrêt

Atelier pratique : installer Hadoop sur 2 nœuds, formater et manipuler

• Travailler avec MapReduce

• • L’intérêt de MapReduce
  • Mappers, reducers, parallélisme et indépendance des traitements
  • Entrées, sorties
  • Soumission d’un job à Hadoop

• Atelier pratique : exécuter une tâche via MapReduce, avec sortie dans HDFS

À l’issue de chaque module, le formateur évaluera chacun des participants en fonction des cas pratiques et exercices effectués

À la fin de la formation tous les participants recevront une attestation de formation.

Les personnes en situation de handicap sont invitées à nous communiquer leurs besoins spécifiques. Nous ferons tout pour les mettre dans les meilleures conditions de suivi de la formation (compensation, accessibilité…)

Prochaines dates :  8 au 11 Avril 2024  

Cette formation peut être organisée en intra. Pour ce faire, merci d’utiliser le formulaire de contact afin que nos équipes organisent avec vous une formation sur mesure selon vos disponibilités et vos besoins.

Inscrivez-vous au moins 10 jours avant le début du cours pour garantir votre place. Ce délai permet une préparation optimale et un accueil de qualité.

Merci de nous contacter au 01 86 95 71 60 ou à l’adresse formation@adbi.fr