Hadoop : Administration

(Réf.100612)

Jour(s)

Payant

Jour entier

Organisé par :

Description

Cette formation se focalise sur la gestion des outils de l'éco-système Hadoop et plus particuliérement les gestions de version les configurations adéquates telles que celles proposées par Hortonworks comme solution clé en main. Un second point porte sur la clusterisation des nœuds Hadoop ou comment placer les services de chacune des applications dont les architectures logicielles ne sont pas communes.

Quels sont les buts de la formation ?

- Installer les services d'un nœud Hadoop - Assembler plusieurs nœuds Hadoop - Déployer une nouvelle application sur un cluster existant - Effectuer une restauration de données suite à une reprise sur incident

Que devez vous connaître pour suivre la formation ?

Connaissances en administration système, préférablement Java

Programme de la formation

Préambule

Qu'est-ce que le Big Data ?
La problématique de taille
Position de Hadoop dans le paysage

Administration de Hadoop

Présentation d’un nœud existant
Organisation des services et étude du séquencement avec YARN

Atelier : modifier la taille des blocs HDFS pour diminuer le nombre de Map/Reduce

Mettre Hadoop en place

Relation entre la plateforme installée et les framework de développement
Proposer de frameworks indépendants pour assurer la compatibilité : Spring Data

Atelier : déployer une application d’accès à HBase au travers d’un mapping O/R Spring Data

Travailler avec MapReduce

Déployer un programme Map/Reduce sur un cluster de nœuds Hadoop
Recherche des logs
Remonter les anomalies aux développeurs
Proposer l’usage de file Kafka

Atelier : utilisation de file d’entrée sortie pour un programme Map/Reduce