Hadoop: Intermedio

Hadoop Intermediate es un curso en línea gratuito que ofrece una guía completa para entender cómo YARN mejora la capacidad de multiprocesamiento de Hadoop. Este curso avanzado de Hadoop explica cómo funciona Hadoop con el sistema de archivos distribuidos (HDFS) de Hadoop para proporcionar un entorno paralelo más completo para las aplicaciones. El contenido explica algunos de los términos relacionados con MapReduce, HBase, Tez, Spark's shell y NiFi, y más información sobre los cambios más importantes de Hadoop en los últimos años, conocidos como Yet Another Resource Negotiator (YARN). Con la ayuda de YARN, Hadoop puede mantener fácilmente un entorno multiusuario, con mejores controles de seguridad y mayor disponibilidad. En este curso de Hadoop, descubra que NiFi permite establecer visualmente los flujos de datos en tiempo real y cómo puede utilizar el HBase Shell desde la interfaz de línea de comandos para comunicarse con HBase

La siguiente sección de este curso le enseñará sobre los recién llegados al ecosistema Hadoop, Tez y Spark. Tez mejora la eficiencia de ciertos tipos de funciones en comparación con MapReduce, mientras que Spark amplía las capacidades de desarrollo de Hadoop añadiendo varios lenguajes nuevos, como Python y la base de aplicaciones Apache. A continuación analizaremos el shell de Spark y cómo ejecutar una serie de comandos en el lenguaje scala. Descubrirás algunas herramientas adicionales para ETL, como Flume, Linux y NiFi. Flume proporciona una forma de realizar la captura en tiempo real y la transmisión de datos, y Linux proporciona una serie de utilidades de comando para la captura, la transformación y el almacenamiento de datos. Nifi, por otro lado, es una herramienta genérica de carga de flujo de trabajo recientemente presentada y diseñada para facilitar la realización de operaciones de ETL en una amplia variedad de fuentes y tipos de datos. Este curso explora la funcionalidad de algunas tareas de flujo de trabajo, a menudo denominadas procesadores. La parte final de este curso explica cómo iniciar el servicio NiFi en Hadoop y explica cómo archivar un flujo de trabajo NiFi junto con los distintos procesadores o tareas necesarios para crear un proceso de flujo de trabajo completo. El curso demuestra todos los componentes del proceso de ETL y cómo NiFi puede desempeñar un papel importante en el desarrollo de los procesos de ETL en Hadoop. HBase es el siguiente tema que abordaremos. En él se analizará cómo iniciar el shell de HBase, su arquitectura, los distintos comandos, las prácticas de diseño y el papel que desempeña a la hora de ofrecer un procesamiento rápido y robusto en

Hadoop es una excelente solución de Big Data que puede beneficiar a muchas profesiones porque es flexible, escalable y rápida. Como profesional de TI, puede inscribirse en este curso intermedio de Hadoop para aprender fácilmente la programación de MapReduce y muchas otras. Si tiene un poco de experiencia en BigData o se siente cómodo con los conceptos básicos de Hadoop, este curso es el mejor paso a seguir