Procesamiento de datos con Apache Pig y Pig Latin en Hadoop

El procesamiento de datos a gran escala en Hadoop solía requerir la escritura de programas Java MapReduce complejos y de bajo nivel, pero con Apache Pig, puede expresar flujos de datos enriquecidos mediante un lenguaje de scripting de alto nivel llamado Pig Latin, lo que ahorra tiempo y reduce la complejidad del código. Este curso basado en texto lo guía desde los conceptos fundamentales del almacenamiento de Big Data hasta la escritura, optimización y ejecución de sus propios scripts de transformación de datos. Comenzará con los conceptos fundamentales del ecosistema Hadoop, aprendiendo cómo Apache Pig traduce scripts simples en tareas MapReduce detrás de escena.A través de explicaciones claras y ejemplos de texto estructurado, aprenderá a cargar, filtrar, agrupar y analizar datos estructurados y semiestructurados. Lo que aprenderás: - Comprender la arquitectura de Apache Pig y cómo se integra con Hadoop HDFS - Escriba scripts Pig Latin para cargar, filtrar y transformar grandes conjuntos de datos - Aplicar operadores relacionales como JOIN, GROUP BY y COGROUP para combinar fuentes de datos - Estructure su procesamiento de datos con esquemas modernos y tipos de datos apropiados - Depurar y optimizar los scripts Pig Latin para un mejor rendimiento en clústeres grandes - Integrar funciones definidas por el usuario para extender las capacidades principales de Pig Este curso comienza con la terminología esencial y la mecánica central de las tuberías de datos antes de pasar a la construcción práctica de scripts y técnicas de optimización.Leerá desgloses paso a paso de los flujos de trabajo de transformación de datos, preparándolo para manejar los desafíos de procesamiento de datos del mundo real. Este curso está diseñado para principiantes en Big Data, analistas de datos y desarrolladores que desean aprender el procesamiento de datos de Hadoop sin necesidad de tener conocimientos previos en programación Java compleja.No se requiere experiencia previa en MapReduce. Comience a leer hoy mismo para simplificar sus flujos de trabajo de procesamiento de Big Data con Apache Pig.