Formación

Big Data Developer con Cloudera Apache Hadoop (Subvencionado)

Curso desarrollado en colaboración

Formato: Live virtual class

Cuándo: Del 27 de septiembre al 17 de noviembre (175h)

Horario: Lunes a viernes de e 9:00 a 14:00h.

Cuánto: Subvencionado para personas en situación de desempleo, ERTE, profesionales autónomos y profesionales del sector de Telecomunicaciones

Presentación del curso

El curso ofrece los conceptos clave y la experiencia que los participantes necesitan para introducir y procesar datos en un clúster Hadoop utilizando las herramientas y técnicas más actuales tales como Spark (incluyendo Spark Streaming y Spark SQL), Flume, Kafka y Sqoop. Este curso proporciona la mejor preparación para los desafíos del mundo real que enfrentan los desarrolladores de Hadoop.

Con Spark, los desarrolladores pueden escribir sofisticadas aplicaciones en paralelo para tomar mejores decisiones, más rápidas y acciones interactivas, aplicadas a una amplia variedad de casos de uso, arquitecturas e industrias. El curso incluye las tasas de examen para obtener la certificación oficial Cloudera: CCA175: CCA Spark and Hadoop Developer Exam.

Objetivos

Al finalizar la formación, el participante adquirirá los siguientes conocimientos:

  • Cómo se ajusta el ecosistema de Apache Hadoop con el ciclo de vida del procesamiento de datos.
  • Cómo se distribuyen, almacenan y procesan los datos en un Clúster de Hadoop.
  • Escribir, configurar y desplegar aplicaciones Apache Spark en un Clúster de Hadoop.
  • Utilizar la Spark shell y aplicaciones Spark para explorar, procesar y analizar datos distribuidos.
  • Realizar consultas de datos con Spark SQL, Dataframes y Datasets.
  • Uso de Spark Streaming para procesar datos en tiempo real.

Dirigido a

Este curso está diseñado para desarrolladores e ingenieros que tienen experiencia en programación, pero no se requieren conocimientos previos de Hadoop y / o Spark.

Los ejemplos y ejercicios se presentan en Python y Scala, por ello se requiere el conocimiento de uno de estos lenguajes de programación. También es necesario tener conocimientos básicos de Linux y conocimientos de SQL serán de utilidad.

Este curso está subvencionado para personas en situación de desempleo, ERTE, profesionales autónomos y para profesionales del sector de Telecomunicaciones. Para conocer el sector de tu empresa, debes descargar el Informe de Vida Laboral y Bases de Cotización a los trabajadores (Más información aquí).

Contenidos

Módulo 1: Introducción a SQL

  • Introducción
  • Base de datos básica
  • Estructura de base de datos
  • El uso de SQL
  • Creación de una base de datos
  • Las consultas básicas
  • Mantenimiento de la Base de datos
  • Copia de tablas y modificaciones de columnas
  • Índices y restricciones
  • Eliminar o modificar filas de la tabla de datos
  • Funciones: uso y tipos
  • Funciones específicas
  • Joins
  • Exportación de datos, consultas y utilidades
  • Importación de datos y de archivos de datos
  • Importación con sentencias y utilidades
  • Subconsultas generales y básicas
  • Subconsulta no correlacionada y correlacionada
  • Tipos de subconsultas
  • Modificación de la tabla con subconsultas
  • Motores de almacenamiento
  • Creación de Vistas
  • Transacciones
  • Recuperación de Metadatos
  • Conclusiones

Módulo 2: Introducción a Linux

  • Evolución de Linux y de los sistemas operativos más populares
  • Principales aplicaciones de código abierto
  • Entender el software de código abierto y la política de licencias
  • Habilidades ICT y el trabajo con Linux
  • Aspectos básicos de la línea de comandos
  • Utilizar la línea de comandos para obtener ayuda
  • Utilizar directorios y listar los archivos
  • Crear, mover y eliminar archivos
  • Guardar archivos en la línea de comandos
  • Buscar y extraer datos de archivos
  • Convertir los comandos en scripts
  • Seleccionar un sistema operativo
  • Entender el hardware del ordenador
  • Saber dónde se guardan los datos
  • Conectar nuestro ordenador a una red
  • Seguridad básica e identificación de los tipos de usuarios
  • Creación de usuarios y grupos
  • Administración de la propiedad y los permisos de los archivos
  • Directorios y archivos especiales

Módulo 3: Introducción a la programación orientada a objetos en Java

  • ¿Cómo es un programa Java?
  • Crear una clase principal en Java
  • Tipos de datos en Java
  • Uso de arrays y matrices
  • Uso de objetos y clases
  • Manipular y formatear los datos en su programa
  • Uso de métodos
  • Uso de encapsulación
  • Condicionales o estructuras de decisión
  • Bucles o estructuras de iteración
  • Uso de herencia
  • Uso de interfaces
  • Gestión de excepciones

Módulo 4: Programación Python

  • Introducción
  • Introducción a Python
  • Variables
  • Colecciones
  • Control de flujo
  • Estructura del programa
  • Trabajar con librerías
  • Conclusión

Módulo 5: Programación Scala

  • Introducción
  • Vista general
  • Básicos de Scala
  • Trabajar con tipos de datos
  • Agrupación de datos
  • Control de flujo en Scala
  • Uso y creación de librerías
  • Conclusión

Módulo 6: Cloudera Desarrollador Spark & Hadoop.

  • Introducción
  • Introducción a Apache Hadoop y el ecosistema Hadoop
  • Archivos de almacenamiento de Apache Hadoop
  • Proceso de datos en un clúster de Apache Hadoop
  • Fundamentos de Apache Spark
  • Trabajar con Dataframes y Schemas
  • Análisis de datos con consultas de DataFrame
  • RDDs: Sumario
  • Transformación de datos con RDDs
  • Agregación de datos con Pair RDDs
  • Consulta y vistas de tablas con Spark SQL
  • Creación, configuración y ejecución de aplicaciones Spark
  • Procesamiento distribuido Spark
  • Persistencia de datos distribuidos
  • Patrones comunes al procesar datos con Spark
  • Introducción a las Estructuras Streaming
  • Estructuras Streaming con Apache Kafka
  • Agregación y unión de Streaming Dataframes
  • Conclusión
  • Procesamiento de mensajes con Apache Kafka 

Formalización de matricula: 

Tras rellenar el formulario de inscripción, el COIICV se pondrá en contacto con usted para indicarle las instrucciones para finalizar la matrícula en el curso. No es necesario que cumplimente los datos de facturación ahora.

boton inscripcion

 

 

 

logo SomDigitals

C/ Almirante Cadarso 26
46005 Valencia

+34 963622994

secretaria@somdigitals.org


logo SomDigitals

+34 963622994
secretaria@somdigitals.org