Hadoop: Intermediário

Hadoop Intermediate é um curso online gratuito que oferece a você um guia abrangente para entender como o YARN melhora a capacidade de multiprocessamento do Hadoop. Este curso de Hadoop Avançado explica como o Hadoop trabalha com o Hadoop Distributed File System (HDFS) a fim de proporcionar um ambiente paralelo mais completo para aplicações. O conteúdo explica alguns dos termos que estão relacionados com MapReduce, HBase, Tez, Shell Spark e NiFi e mais sobre as mudanças mais significativas do Hadoop nos últimos anos conhecidos como Ainda Mais Um Negociador De Recursos (YARN). Com a ajuda da YARN, o Hadoop pode facilmente manter um ambiente multi-inquilino, com melhores controles de segurança e melhor disponibilidade. Neste curso de Hadoop, descubra que o NiFi possibilita o estabelecimento visual em tempo real de dataflows e como você pode usar o Shell HBase da interface da linha de comando para se comunicar com o HBase.

A seção a seguir deste curso irá ensiná-lo sobre os recém-chegados do ecossistema Hadoop, Tez e Spark. O Tez melhora a eficiência para certos tipos de funções sobre o MapReduce enquanto o Spark expande as capacidades de desenvolvimento do Hadoop, adicionando uma série de novas linguagens como Python, e a base de aplicativos Apache. A seguir você analisará a casca do Spark e como executar uma série de comandos na linguagem scala. Você descobrirá algumas ferramentas adicionais para ETL, como Flume, Linux e NiFi. O Flume fornece uma maneira de realizar a captura em tempo real, bem como dados de streaming e o Linux fornece vários utilitários de comando para captura de dados, transformação e armazenamento. Nifi por outro lado é uma ferramenta de carregamento de fluxo de trabalho genérica recentemente introduzida e projetada para facilitar a realização de operações de ETL sobre uma grande variedade de fontes de dados e tipos. Este curso explora a funcionalidade de algumas tarefas do fluxo de trabalho frequentemente referidas como processadores. A parte final deste curso leva você a ir em como iniciar o serviço NiFi dentro do Hadoop e explica como fazer o arquivo de um fluxo de trabalho do NiFi juntamente com os vários processadores ou tarefas necessárias para construir um processo de workflow completo. O curso demonstra todos os componentes do processo de ETL e como o NiFi pode desempenhar um papel significativo no desenvolvimento de processos de ETL dentro do Hadoop. O HBase é o próximo tema coberto e você irá analisar como iniciar o shell HBase, sua arquitetura, vários comandos, práticas de design e o papel que ele desempenha na entrega de processamento rápido robusto dentro do Hadoop.

O Hadoop é uma ótima solução BigData que pode beneficiar muitas profissões por ser flexível, escalável e rápida. Como um profissional de TI você poderia se matricular neste curso de Hadoop Intermediate para facilmente aprender a programação MapReduce assim como muitos outros. Se você tem um pouco de experiência BigData ou está confortável com o básico do Hadoop, então este curso é o seu melhor próximo passo.