Analista de Soporte y Administración Hadoop

Analista de Soporte y Administración Hadoop

Descripción del cargo:

El Analista de Soporte y Administración Hadoop desempeña un papel fundamental en el mantenimiento y funcionamiento eficiente del ambiente de Big Data Hadoop (BDC) y la implementación de servicios Open Source relacionados. Este rol implica la administración, monitoreo y soporte técnico de la plataforma, asegurando la disponibilidad, integridad y rendimiento óptimo de los sistemas.

Responsabilidades:

1. Administración del ambiente de Big Data Hadoop (BDC):

- Configurar, mantener y optimizar los clústeres de Hadoop para garantizar su funcionamiento adecuado.

- Administrar el almacenamiento distribuido y el sistema de archivos Hadoop (HDFS) para asegurar la integridad y el acceso eficiente a los datos.

- Gestionar la seguridad y los permisos de acceso en el entorno Hadoop para proteger los datos confidenciales.

- Supervisar y resolver problemas relacionados con el rendimiento, la escalabilidad y la disponibilidad del clúster.

- Implementar actualizaciones y parches de software de Hadoop, manteniendo la plataforma al día con las últimas versiones y correcciones de seguridad.

2. Administración e Implementación de Servicios Open Source:

- Evaluar, implementar y administrar servicios Open Source complementarios, como Apache Hive, Apache Spark, Apache Kafka, entre otros, para satisfacer las necesidades de análisis y procesamiento de datos.

- Configurar y optimizar los servicios Open Source para aprovechar al máximo su potencial y mejorar la eficiencia en el manejo de grandes volúmenes de datos.

- Colaborar con los equipos de desarrollo y analistas de datos para entender y atender los requisitos específicos de los proyectos y proporcionar soluciones efectivas.

- Realizar pruebas y evaluaciones periódicas de los servicios Open Source para garantizar su rendimiento y compatibilidad con el entorno Hadoop.

3. Monitoreo y Mantenimiento de la plataforma:

- Implementar y mantener herramientas de monitoreo y registro de la plataforma Hadoop para identificar problemas y optimizar el rendimiento.

- Realizar análisis de registros y métricas para detectar posibles cuellos de botella y proponer soluciones o mejoras.

- Investigar y solucionar incidencias y problemas técnicos relacionados con el ambiente Hadoop y los servicios Open Source.

- Documentar los procedimientos y las mejores prácticas de administración y soporte técnico para facilitar la resolución de problemas y el mantenimiento continuo.

Requisitos:

- Experiencia demostrable en la administración de clústeres Hadoop y la gestión de sistemas distribuidos.

- Conocimiento profundo de los componentes de Hadoop, como HDFS, YARN, MapReduce, Hive, Spark, etc.

- Familiaridad con servicios Open Source relacionados, como Kafka, HBase, Pig, Impala, etc.

- Capacidad para diagnosticar y solucionar problemas técnicos en entornos de Big Data.

- Conocimientos de scripting y programación en lenguajes como Python, Java o Scala.

- Familiaridad con herramientas de monitoreo y gestión de registros, como Nagios, Ambari, Cloudera Manager, ELK Stack, etc.

- Habilidades de comunicación efectiva y capacidad para trabajar en equipo.

- Capacidad para adaptarse a entornos dinámicos y manejar múltiples tareas simultáneamente.

- Certificaciones relevantes en tecnologías de Big Data y Hadoop son una ventaja.

Este perfil de cargo de Analista de Soporte y Administración Hadoop combina habilidades técnicas en la administración de sistemas distribuidos con conocimientos específicos en el ecosistema de Big Data y servicios Open Source relacionados. El rol requiere un enfoque proactivo, capacidad analítica y atención a los detalles para garantizar el correcto funcionamiento de la plataforma y el soporte técnico adecuado para los usuarios.

Requerimientos

• Educacion mínima: Universidad / Carrera tecnológica
• Años de experiencia: 2
• Conocimientos: Big Data, Hadoop, Hadoop YARN, Apache Hive, Apache Kafka

Resumen del empleo