Formation Hadoop : Déployer du Big Data

Votre devis en 3 clics

  • Un support et les exercices du cours pour chaque stagiaire
  • Un formateur expert ayant suivi une formation à la pédagogie
  • Boissons offertes pendant les pauses en inter-entreprises
  • Salles lumineuses et locaux facilement accessibles
  • Méthodologie basée sur l'Active Learning : 75% de pratique minimum
  • Matériel pour les formations présentielles informatiques : un PC par participant
  • Evaluation de fin de formation : Certification CPF ou mise en situation notée par le formateur
Durée :
4 jours
Public :
Administrateurs systèmes
Pré-requis :
Connaissances en administration système, préférablement Java
Objectifs :
Comprendre le Big Data et ses enjeux - Savoir déployer Hadoop et son écosystème - Comprendre HDFS, MapReduce - Structurer les données avec HBase - Écrire des requêtes avec HiveQL - Lancer une analyse avec Pig
Sanction :
Attestation de fin de stage mentionnant le résultat des acquis
Référence :
BUS869-F
Demandeurs d'emploi :
Contactez-nous pour connaître les remises Pôle Emploi
Téléchargez le PDF

Introduction au Big Data

Qu'est-ce que le Big Data ?
Source des données : l'homme, la machine
La problématique de taille
Position de Hadoop dans le paysage

Introduction à Hadoop

L'origine du projet
Le système de fichiers HDFS
Comprendre l'algorithme MapReduce
L'environnement d'Hadoop : HBase, ZooKeeper, Hive, Pig…
L'API YARN

Mettre Hadoop en place : HDFS

Du mode autonome au mode complètement distribué en cluster
Pré-requis, distributions Hadoop
Cluster Hadoop : NameNode, ResourceManager, DataNode, NodeManager
Les fichiers de configuration
Opérations de base sur le cluster HDFS : formatage, démarrage, arrêt

Atelier pratique : installer Hadoop sur 2 nœuds, formater et manipuler HDFS

Travailler avec MapReduce

L'intérêt de MapReduce
Mappers, reducers, parallélisme et indépendance des traitements
Entrées, sorties
Soumission d'un job à Hadoop

Atelier pratique : exécuter une tâche via MapReduce, avec sortie dans HDFS

Une base de données distribuée : HBase

L'accès aléatoire, temps réel, lecture-écriture au Big Data
Fonctionnalités de HBase, NoSQL
Pré-requis, configuration
Manipulation via le shell HBase

Atelier pratique : mettre en place HBase sur Hadoop, créer et manipuler une table

Et pourquoi pas un peu de SQL avec Hive ?

Présentation de Hive
Gérer le schéma : bases, tables, vues, partitions
Manipulation des données, requêtes et map-reduce avec HiveQL
Audits et journal d'erreurs

Atelier pratique : chargement de données massives dans Hive, requêtes

Analyser les données avec Pig

Présentation, installation du projet Apache Pig
Exécutions de Pig en local, en mode map-reduce
Scripter pour Pig
Le langage Pig Latin
Manipulations de données et stockage avec Pig

Atelier pratique : écrire un script contenant du Pig Latin pour une tâche simple, et l'exécuter en local, puis en mode map reduce.

Aller plus loin avec Hadoop

Gérer les logs et l'audit de tâches Hadoop
Découvrir MRUnit pour les test unitaires dans Hadoop
Débogage en local
Surveillance des perfomances

Atelier pratique : mise en place d'un job MapReduce plus complexe avec traces et tests unitaires

CopyrightDepot Dawan
Dates à Bordeaux

Du 02/12/2019 au 05/12/2019

Dates à Bruxelles

Du 02/12/2019 au 05/12/2019

Dates à Geneve

Du 09/12/2019 au 12/12/2019

Dates à Lille

Du 02/12/2019 au 05/12/2019

Du 13/01/2020 au 16/01/2020

Du 02/03/2020 au 05/03/2020

Du 16/03/2020 au 19/03/2020

Du 21/04/2020 au 24/04/2020

Du 15/06/2020 au 18/06/2020

Du 06/07/2020 au 09/07/2020

Du 10/08/2020 au 13/08/2020

Du 28/09/2020 au 01/10/2020

Du 23/11/2020 au 26/11/2020

Dates à Luxembourg

Du 02/12/2019 au 05/12/2019

Dates à Lyon

Du 09/12/2019 au 12/12/2019

Du 13/01/2020 au 16/01/2020

Du 03/02/2020 au 06/02/2020

Du 23/03/2020 au 26/03/2020

Du 06/04/2020 au 09/04/2020

Du 11/05/2020 au 14/05/2020

Du 29/06/2020 au 02/07/2020

Du 27/07/2020 au 30/07/2020

Du 17/08/2020 au 20/08/2020

Du 05/10/2020 au 08/10/2020

Du 19/10/2020 au 22/10/2020

Du 23/11/2020 au 26/11/2020

Dates à Marseille

Du 09/12/2019 au 12/12/2019

Dates à Montpellier

Du 02/12/2019 au 05/12/2019

Dates à Nantes

Du 02/12/2019 au 05/12/2019

Du 20/01/2020 au 23/01/2020

Du 02/03/2020 au 05/03/2020

Du 09/03/2020 au 12/03/2020

Du 27/04/2020 au 30/04/2020

Du 08/06/2020 au 11/06/2020

Du 15/06/2020 au 18/06/2020

Du 10/08/2020 au 13/08/2020

Du 07/09/2020 au 10/09/2020

Du 28/09/2020 au 01/10/2020

Du 23/11/2020 au 26/11/2020

Du 30/11/2020 au 03/12/2020

Dates à Nice

Du 09/12/2019 au 12/12/2019

Dates à Paris

Du 02/12/2019 au 05/12/2019

Du 06/01/2020 au 09/01/2020

Du 27/01/2020 au 30/01/2020

Du 16/03/2020 au 19/03/2020

Du 30/03/2020 au 02/04/2020

Du 11/05/2020 au 14/05/2020

Du 29/06/2020 au 02/07/2020

Du 20/07/2020 au 23/07/2020

Du 17/08/2020 au 20/08/2020

Du 05/10/2020 au 08/10/2020

Du 12/10/2020 au 15/10/2020

Du 23/11/2020 au 26/11/2020

Dates à Rennes

Du 02/12/2019 au 05/12/2019

Dates à Strasbourg

Du 02/12/2019 au 05/12/2019

Dates à Toulouse

Du 02/12/2019 au 05/12/2019

Transmettre l’envie d'apprendre, de comprendre, de progresser, de partager : c'est ce qui nous motive chaque jour pour améliorer sans cesse l'entreprise, le travail de nos équipes et la satisfaction de nos clients.
C'est pour cela que nous mettons tout en œuvre pour vous accueillir dans le meilleur des cadres, avec les meilleurs contenus, les meilleurs formateurs, des supports constamment renouvelés et une démarche commerciale résolument innovante.

GAGNER EN QUALITE

Depuis 2000, nous progressons continuellement pour faire évoluer notre catalogue, nos cours, nos supports, notre accueil et notre pédagogie. Nous sommes certifiés OPQF depuis la rentrée 2012 et poursuivons notre démarche qualité en formant constamment nos intervenants aux nouvelles techniques pédagogiques et aux évolutions technologiques.

DEVELOPPER NOTRE EQUIPE DE FORMATEURS INTERNES

Nous avons développé une équipe de professionnels de la pédagogie qui interviennent pour notre propre compte ainsi qu'en sous-traitance pour la plupart de nos confrères. Nous bénéficions ainsi d'une très riche expérience de l'enseignement en nous confrontant constamment à la quasi-globalité des contenus et outils pédagogiques du marché de la formation professionnelle.

ASSURER UNE REACTIVITE COMMERCIALE

Notre équipe de commerciaux est parfaitement formée aux nouvelles technologies et saura répondre à tous les besoins en moins de 48h. Disponibilité, programme, coût : vous aurez une réponse appropriée, claire et vraiment rapide.

CREER DES SUPPORTS INNOVANTS

Nous veillons à ce que nos clients soient parfaitement satisfaits des supports que nous offrons. Aussi, nous avons développé des produits internes très efficaces que nous mixons avec les meilleurs supports du marché. A cela s'ajoute un tutorat mail pendant 30 jours pour que chaque stagiaire puisse poser toutes les questions qui lui viennent après le cours.

SOIGNER L'ACCUEIL DE NOS CLIENTS

Nous mettons un point d'honneur à ce que nos clients soient parfaitement accueillis quand ils viennent chez nous : prise en charge dès leur arrivée, boissons et viennoiseries aux pauses, repas avec les autres stagiaires et formateurs, questions/réponses après les cours. Nos formations représentent une étape de progression et de réflexion dans la carrière de nos clients et nous souhaitons qu'elle se fasse dans les meilleures conditions.

DISPOSER D'UN ENVIRONNEMENT PRIVILEGIE

Nous vous accueillons dans des salles parfaitement adaptées à l'apprentissage : des machines très puissantes pour les formations gourmandes en ressources, des salles lumineuses et climatisées, des locaux faciles d'accès en centre ville et à proximité immédiate des gares etc. Tout a été pensé pour votre confort !

PARTAGER NOTRE SENS DU SERVICE

Nous voulons continuer à vous apporter le meilleur service au meilleur coût. Sollicitez Dawan pour vos besoins de formations et vous découvrirez un organisme réellement désireux de participer à la réussite des projets de ses clients.

formation

Datadock

Dawan bénéficie du soutien du FRED

TOSA
logo OPQF
logo FFP