Analyse de donnees en environnement Hadoop

Data Value

Non finançable CPF
Tout public
Présentiel
Public admis
Salarié en poste
Demandeur d'emploi
Entreprise
Étudiant
Prix
2340 €
Durée
Nous contacter
Localité
En présentiel
Découvrez les localités disponibles pour suivre cette formation en présentiel.
En savoir plus sur les localités en présentiel
Cette formation est disponible dans les centres de formation suivants:
  • 75 - Paris 12e
Cette formation peut être dispensée dans votre entreprise dans les localités suivantes :
  • 75 - Paris
  • 77 - Seine-et-Marne
  • 78 - Yvelines
  • 91 - Essonne
  • 92 - Hauts-de-Seine
  • 93 - Seine-Saint-Denis
  • 94 - Val-de-Marne
  • 95 - Val-d'Oise
Objectifs
Connaitre les fonctionnements d'Hadoop Distributed File System (HDFS) et YARN / MapReduce

Savoir explorer HDFS et suivre l'exécution d'une application YARN

Déterminer les fonctionnements et l'utilisation les différents outils de manipulation des données


Compétences visées

- Comprendre ce que sont Hadoop et YARN

- Connaître les différents outils et les Framework dans un environnement Hadoop

- Appréhender MapReduce

- Comprendre comment exécuter une tâche de MapReduce sur YARN

- Exécuter des modifications en masse avec PIG

- Savoir écrire des requêtes pour HIVE afin d'analyser ses données

- Savoir utiliser Sqoop pour transférer les données entre Hadoop et une base de données relationnelle

- Découverte d'autres briques : automatiser vos process avec Oozie

- Utiliser une base de données No-SQL (HBase)
Programme
- Hadoop

  • Comprendre Hadoop et son écosystème

  • Quels impacts de l'arrivée d'Hadoop dans un SI traditionnel ?

  • Le Hadoop Distributed File System (HDFS)

  • Introduction aux données dans HDFS

  • MapReduce Framework et YARN


- Pig

  • Introduction à Pig

  • Programmation Pig avancée

  • Troubleshooting et optimisation avec Pig

  • Résolution des problèmes avec Pig

  • Utiliser l'UI Web d'Hadoop

  • Démo optionnelle : résolution d'un « Failed Job » avec l'UI Web

  • Echantillonnage de données et débogage

  • Vue d'ensemble des performances

  • Comprendre le plan d'exécution

  • Astuces pour améliorer la performance de vos « Pig Jobs »


- Hive

  • Programmation Hive

  • Utilisation de HCatalog

  • Programmation Hive avancée

  • Etendre Hive

  • Transformation de données avec des Scripts personnalisés

  • Fonctions définies par l'utilisateur

  • Paramétrer les requêtes

  • Exercices « Hands-On » : transformation de données avec Hive

  • Programmation Hive avancée (suite)

  • Analyse de données et statistiques


- Sqoop

  • Import/Export avec Sqoop (SGBDR <-> HDFS)

  • Sqoop, fonctions avancées

  • Définition de workflow avec Oozie


- Optionnel : (sous réserve de temps)

  • Introduction à H-Base

  • Exemple d'ingestion de données avec l'ETL Talend

  • Créer son propre cluster Hadoop (plateforme de test)
Ces formations peuvent vous intéresser

Maitrise Power BI sur 8 jours (Pack formation + certification)

PARIS
Centre de formation MYPE
MYPE
Finançable CPF
À distance / En centre / En entreprise
Salarié en poste / Entreprise

DATA MANAGEMENT - formation certifiante à distance

PARIS 11E
Centre de formation DataBird
Avis du centre
DataBird
Finançable CPF
À distance / En centre / En entreprise
Tout public

Power BI : Analyser des données et créer des rapports + Analyse et Modélisation avec le langage DAX

NANTES, STRASBOURG, BORDEAUX ET 8 AUTRE(S) LOCALITÉ(S)
Centre de formation Dawan
Dawan
Finançable CPF
À distance / En centre
Salarié en poste / Demandeur d'emploi / Entreprise

Les formations les plus recherchées

Lyon Toulouse Marseille Montpellier Paris Bordeaux Dijon Mâcon Nantes Rennes Audit CPF Audit en Ligne
Haut de page