Hadoop : Déploiement

Unternehmensübergreifende Weiterbildung

An wen richtet sich die Weiterbildung?

Administrateurs systèmes

Dauer

3,00 Tag(e)

Sprache(n) der Dienstleistung

EN FR

Nächster Termin

06.01.2025
Ort
Strasbourg

Preis

2325,00€

Voraussetzungen

Connaissances en administration système - Connaissances Java

Ziele

Comprendre le Big Data et ses enjeux - Savoir déployer Hadoop et son écosystème - Comprendre HDFS, MapReduce - Structurer les données avec HBase - Ecrire des requêtes avec HiveQL.

Inhalt

Introduction au Big Data

Qu'est-ce que le Big Data?
Source des données: l'homme, la machine
La problématique de taille
Position de Hadoop dans le paysage

Introduction à Hadoop

L'origine du projet
Le système de fichiers HDFS
Comprendre l'algorithme MapReduce
L'environnement d'Hadoop: HBase, ZooKeeper, Hive, Pig…
L'API YARN

Mettre Hadoop en place: HDFS

Du mode autonome au mode complètement distribué en cluster
Pré-requis, distributions Hadoop
Cluster Hadoop: NameNode, ResourceManager, DataNode, NodeManager
Les fichiers de configuration
Opérations de base sur le cluster HDFS: formatage, démarrage, arrêt

Atelier pratique: installer Hadoop sur 2 nœuds, formater et manipuler HDFS

Travailler avec MapReduce

L'intérêt de MapReduce
Mappers, reducers, parallélisme et indépendance des traitements
Entrées, sorties
Soumission d'un job à Hadoop

Atelier pratique: exécuter une tâche via MapReduce, avec sortie dans HDFS

Une base de données distribuée: HBase

L'accès aléatoire, temps réel, lecture-écriture au Big Data
Fonctionnalités de HBase, NoSQL
Pré-requis, configuration
Manipulation via le shell HBase

Atelier pratique: mettre en place HBase sur Hadoop, créer et manipuler une table

Et pourquoi pas un peu de SQL avec Hive?

Présentation de Hive
Gérer le schéma: bases, tables, vues, partitions
Manipulation des données, requêtes et map-reduce avec HiveQL
Audits et journal d'erreurs

Atelier pratique: chargement de données massives dans Hive, requêtes

Aller plus loin avec Hadoop

Gérer les logs et l'audit de tâches Hadoop
Découvrir MRUnit pour les test unitaires dans Hadoop
Débogage en local
Surveillance des perfomances

Atelier pratique: mise en place d'un job MapReduce plus complexe avec traces et tests unitaires

Pädagogische Methoden

Méthodologie basée sur l'Active Learning : 75% de pratique minimum. Chaque point théorique est systématiquement suivi d'exemples et exercices.

Bewertung

Contrôle continu

Zertifikat, Diplom

Attestation de fin de stage mentionnant le résultat des acquis

Nächster Termin

Datum
Stadt
Sprache und Preis
06.01.2025

08.01.2025
Strasbourg
FR 2325,00€
13.01.2025

15.01.2025
Bruxelles
FR 2325,00€
13.01.2025

15.01.2025
Luxembourg
FR 2325,00€
03.03.2025

05.03.2025
Paris
FR 2325,00€
03.03.2025

05.03.2025
A distance
FR 2325,00€
24.03.2025

26.03.2025
Strasbourg
FR 2325,00€
31.03.2025

02.04.2025
Bruxelles
FR 2325,00€
31.03.2025

02.04.2025
Luxembourg
FR 2325,00€
09.06.2025

11.06.2025
Paris
FR 2325,00€
09.06.2025

11.06.2025
A distance
FR 2325,00€
30.06.2025

02.07.2025
Strasbourg
FR 2325,00€
04.08.2025

06.08.2025
Bruxelles
FR 2325,00€
04.08.2025

06.08.2025
Luxembourg
FR 2325,00€
01.09.2025

03.09.2025
Paris
FR 2325,00€
01.09.2025

03.09.2025
A distance
FR 2325,00€
29.09.2025

01.10.2025
Strasbourg
FR 2325,00€
03.11.2025

05.11.2025
Bruxelles
FR 2325,00€
03.11.2025

05.11.2025
Luxembourg
FR 2325,00€
24.11.2025

26.11.2025
Paris
FR 2325,00€
24.11.2025

26.11.2025
A distance
FR 2325,00€
15.12.2025

17.12.2025
Strasbourg
FR 2325,00€

Kontakt für diese Weiterbildung

Dawan - Service commercial

Diese Weiterbildungen könnten Sie interessieren