ITESCIA

Hadoop : Cloudera

Certification / expertise

3 jour(s)

2020 € TTC

CFA

Consultez le site de l'organisme

Objectifs

  • Connaître les principes du framework Hadoop et savoir l'installer et le configurer.
  • Maîtriser la configuration et la gestion des services avec Cloudera Manager.

Public visé

Chef do projet, administrateur et toute personne souhaitant mettre en œuvre un système distribué avec Hadoop. Les travaux pratiques sont réalisés sur une distribution Hadoop Cloudera.

Programme

INTRODUCTION :
  • Les fonctionnalités du framework Hadoop.
  • Les différentes versions.
  • Distributions : Apache, Cloudera, Hortonworks, EMR, MapR, DSE.
  • Spécificités de chaque distribution.
  • Les apports de la distribution Cloudera.
  • Architecture et principe de fonctionnement.
  • Terminologie : NameNode, DataNode, ResourceManager, NodeManaoer.
  • Rôle des différents composants.
  • Le projet et les modules : Hadoop Common, HDFS, YARN, Spark, MapReduce Oozie, Pig, Hive, HBase, ...
LES OUTILS HADOOP :
  • Infrastrucure/Mise en œuvre : Avro, Ambari, Zookeeper, Pig, Tez, Oozie, Falcon, Pentaho.
  • Vue d'ensemble - Gestion des données - Exemple de sqoop.
  • Restitution : Webhdfs, Hive, Hawq, Mahout, ElasticSearch.
  • Outils complémentaires : Spark, SparkQL, SparkMLib, Storm, BigTop, Zebra.
  • Outils de développement : Cascading, Scalding, Flink/Pachyderm.
  • Outils d'analyse : RHadoop, Hama, Chukwa, kafka.
INSTALLATION ET CONFIGURATION :
  • Présentation de Cloudera Manager - Trois modes d'installation : Local, pseudo-distribué, distribué.
  • Première installation - Mise en autre avec un seul nœud Hadoop.
  • Configuration de l'environnement - Etude des fichiers de configuration : core-site.xml, hdfs-site.xml, mapred-site.xml, yarn-site.xml et capacity-scheduler.xml.
  • Création des users pour les daemons hdfs et yarn,droits d'accès sur les exécutables et répertoires.
  • Lancement des services - Démarrage des composants : hdfs, hadoop-daemon, yarn-daemon, etc...
  • Gestion de la qrappe, différentes méthodes : Ligne de commandes, API Rest, serveur http intégré. APIS natives.
  • Exemples en ligne de commandes avec Hdfs, Yarn, Mapred.
  • Présentation des fonctions offertes par le serveur http.
  • Travaux pratiques : Organisation et configuration d'une grappe hadoop avec Cloudera Manager - Traitement de données.
  • Requêtage SQL avec Impala.
LES OUTILS HADOOP :
  • Outils complémentaires à yarn et hdfs : jConsole, jconsole yarn.
  • Exemples sur le suivi de charges, l'analyse des journaux.
  • Principe de gestion des nœuds, accès JMX.
  • Travaux pratiques : Mise en œuvre d'un client JMX.
  • Administration HDFS : Présentation des outils de stockage des fichiers, fsck, dfsadmin.
  • Mise en œuvre sur des exemples simples de récupération de fichiers.
  • Gestion centralisée de caches avec Cacheadmin.
SECURITE :
  • Activation de la sécurité avec Kerberos dans core-site.xml, et dans hdfs-site.xml pour les NameNode et DataNode.
  • Sécurisation de yarn avec la mise en œuvre d'un proxy et d'un Linux Contacter Executor.
EXPLOITATION.
 

La formation "Hadoop : Cloudera" vous intéresse ?

Recevez gratuitement le programme de la formation par ITESCIA.

Les données personnelles recueillies ci-dessus sont destinées à Figaro Classifieds ainsi qu’aux organismes que vous avez sélectionnés afin qu’ils vous contactent et vous adressent leurs informations relatives à votre demande en lien avec l’activité de l’organisme. Voir plus


Les internautes qui ont consulté cette annonce ont aussi consulté:

En résumé

Objectif

Certification / expertise

Durée

3 jour(s)

Coût

2020 € TTC

Modes d'enseignement

Dans mon entreprise, En école ou centre de formation, À distance / e-learning

Type d'établissement

CFA

Posez une question à notre responsable pédagogique

Recevez des formations similaires

Kelformation vous suggère des formations qui vous correspondent.

Inscrivez-vous et recevez directement les annonces par mail.

Les données personnelles recueillies ci-dessus sont destinées à Figaro Classifieds afin de vous fournir les services auxquels vous souscrivez et notamment vous envoyer des offres de formations correspondant à votre recherche. Voir plus