Hadoop: intermédiaire

Hadoop Intermediate est un cours en ligne gratuit qui vous offre un guide complet pour comprendre comment le YARN améliore la capacité de traitement multitraitement de Hadoop. Ce cours avancé de Hadoop explique comment Hadoop fonctionne avec le système HDFS (Hadoop Distributed File System) afin de fournir un environnement parallèle plus complet pour les applications. Le contenu explique certains termes qui sont liés à MapReduce, HBase, Tez, à la coque de Spark et à NiFi et plus sur les changements les plus importants de Hadoop au cours des dernières années connu sous le nom de Yet Another Resource Negotiator (YARN). Avec l'aide de YARN, Hadoop peut facilement maintenir un environnement multi-locataires, avec de meilleurs contrôles de sécurité et une meilleure disponibilité. Dans ce cours Hadoop, découvrez que NiFi permet l'établissement visuel en temps réel des flux de données et comment vous pouvez utiliser le shell HBase à partir de l'interface de ligne de commande pour communiquer avec HBase.

La section suivante de ce cours vous enseignera les nouveaux venus de l'écosystème Hadoop, Tez et Spark. Tez améliore l'efficacité de certains types de fonctions sur MapReduce alors que Spark développe les capacités de développement d'Hadoop en ajoutant un certain nombre de nouvelles langues telles que Python, et la base d'application Apache. Ensuite, vous analyserons l'interpréteur de commandes Spark et comment exécuter une série de commandes dans la langue scala. Vous découvrirez des outils supplémentaires pour ETL tels que Flume, Linux et NiFi. Flume fournit un moyen d'effectuer une capture en temps réel ainsi que des données en continu et Linux fournit un certain nombre d'utilitaires de commande pour la capture, la transformation et le stockage des données. Nifi, d'autre part, est un outil générique de charge de travail récemment introduit et conçu pour faciliter l'exécution des opérations ETL sur une grande variété de sources de données et de types. Ce cours explore la fonctionnalité de certaines tâches de flux de travaux souvent appelées processeurs. La dernière partie de ce cours vous explique comment démarrer le service NiFi dans Hadoop et explique comment créer un flux de travaux NiFi avec les différents processeurs ou tâches nécessaires à la génération d'un processus complet de flux de travaux. Le cours montre tous les composants du processus ETL et comment NiFi peut jouer un rôle significatif dans le développement de processus ETL dans Hadoop. HBase est le thème suivant couvert et vous analyserons comment démarrer l'interpréteur de commandes HBase, son architecture, ses différentes commandes, ses pratiques de conception et le rôle qu'il joue dans la mise en oeuvre d'un traitement rapide et robuste dans Hadoop.

Hadoop est une grande solution BigData qui peut bénéficier à de nombreuses professions car elle est flexible, évolutive et rapide. En tant que professionnel informatique, vous pouvez vous inscrire à ce cours Hadoop intermédiaire pour apprendre facilement la programmation MapReduce ainsi que beaucoup d'autres. Si vous avez un peu d'expérience BigData ou si vous êtes à l'aise avec les bases de Hadoop, alors ce cours est votre prochaine étape.