Analyse de donnees en environnement Hadoop
Data Value
Salarié en poste
Demandeur d'emploi
Entreprise
Étudiant
En présentiel
Nous contacter
2340 €
Localité
En présentiel
Découvrez les localités disponibles pour suivre cette formation en présentiel.
Objectifs
Connaitre les fonctionnements d'Hadoop Distributed File System (HDFS) et YARN / MapReduce
Savoir explorer HDFS et suivre l'exécution d'une application YARN
Déterminer les fonctionnements et l'utilisation les différents outils de manipulation des données
Compétences visées
- Comprendre ce que sont Hadoop et YARN
- Connaître les différents outils et les Framework dans un environnement Hadoop
- Appréhender MapReduce
- Comprendre comment exécuter une tâche de MapReduce sur YARN
- Exécuter des modifications en masse avec PIG
- Savoir écrire des requêtes pour HIVE afin d'analyser ses données
- Savoir utiliser Sqoop pour transférer les données entre Hadoop et une base de données relationnelle
- Découverte d'autres briques : automatiser vos process avec Oozie
- Utiliser une base de données No-SQL (HBase)
Savoir explorer HDFS et suivre l'exécution d'une application YARN
Déterminer les fonctionnements et l'utilisation les différents outils de manipulation des données
Compétences visées
- Comprendre ce que sont Hadoop et YARN
- Connaître les différents outils et les Framework dans un environnement Hadoop
- Appréhender MapReduce
- Comprendre comment exécuter une tâche de MapReduce sur YARN
- Exécuter des modifications en masse avec PIG
- Savoir écrire des requêtes pour HIVE afin d'analyser ses données
- Savoir utiliser Sqoop pour transférer les données entre Hadoop et une base de données relationnelle
- Découverte d'autres briques : automatiser vos process avec Oozie
- Utiliser une base de données No-SQL (HBase)
Programme
- Hadoop
- Pig
- Hive
- Sqoop
- Optionnel : (sous réserve de temps)
- Comprendre Hadoop et son écosystème
- Quels impacts de l'arrivée d'Hadoop dans un SI traditionnel ?
- Le Hadoop Distributed File System (HDFS)
- Introduction aux données dans HDFS
- MapReduce Framework et YARN
- Pig
- Introduction à Pig
- Programmation Pig avancée
- Troubleshooting et optimisation avec Pig
- Résolution des problèmes avec Pig
- Utiliser l'UI Web d'Hadoop
- Démo optionnelle : résolution d'un « Failed Job » avec l'UI Web
- Echantillonnage de données et débogage
- Vue d'ensemble des performances
- Comprendre le plan d'exécution
- Astuces pour améliorer la performance de vos « Pig Jobs »
- Hive
- Programmation Hive
- Utilisation de HCatalog
- Programmation Hive avancée
- Etendre Hive
- Transformation de données avec des Scripts personnalisés
- Fonctions définies par l'utilisateur
- Paramétrer les requêtes
- Exercices « Hands-On » : transformation de données avec Hive
- Programmation Hive avancée (suite)
- Analyse de données et statistiques
- Sqoop
- Import/Export avec Sqoop (SGBDR <-> HDFS)
- Sqoop, fonctions avancées
- Définition de workflow avec Oozie
- Optionnel : (sous réserve de temps)
- Introduction à H-Base
- Exemple d'ingestion de données avec l'ETL Talend
- Créer son propre cluster Hadoop (plateforme de test)
Ces formations peuvent vous intéresser
LE HAVRE
À distance / En centre / En entreprise
Salarié en poste / Demandeur d'emploi / Entreprise
Non finançable CPF
1350 €
CASTELNAU-LE-LEZ
À distance / En centre / En entreprise
Entreprise
Non finançable CPF
3100 €
PARIS 11E
À distance / En centre
Tout public
Finançable CPF
6890 €
Avis du centre
Malheureusement, vous ne pouvez pas contacter ce centre via Maformation.
Voici des formations similaires :
LAUBACH
À distance / En entreprise
Entreprise
Finançable CPF
1484 €
À DISTANCE
Salarié en poste / Entreprise
Non finançable CPF
450 €
À DISTANCE
Salarié en poste / Demandeur d'emploi / Entreprise
Non finançable CPF
3500 €
Avis du centre
Les formations les plus recherchées
Formation Paris
Formation Puteaux
Formation Évry-Courcouronnes
Formation Boulogne-Billancourt
Formation Saint-Denis
Formation Nanterre
Formation Cergy
Formation Saint-Ouen-sur-Seine
Formation Rueil-Malmaison
Formation Levallois-Perret
Formation Audit CPF
Formation Audit en ligne
Formation Analyste de donnees CPF
Formation Analyste de donnees en ligne
Formation Statisticien
Formation Auditeur qualite
Formation Analyste de donnees Paris
Formation Statisticien Paris
Formation Auditeur qualite Paris
Formation Auditeur qualite Saint-Denis
Formation Analyste de donnees Noisy-le-Grand
Formation Analyste de donnees La Défense
Formation Statisticien La Défense
Formation Statisticien Palaiseau
Formation Auditeur qualite Puteaux
Formation Statisticien Noisy-le-Grand
Cette formation est temporairement suspendue.
Voir des formations similaires