Ingeniero de Datos spark y ETL

TLDR

Design and execute tests to validate data quality and analytical solutions while ensuring high standards in data pipelines and ETL processes in cloud and hybrid environments.

NEORIS es un acelerador Digital que ayuda a las compañías a entrar en el futuro, teniendo 20 años de experiencia como Socios Digitales de algunas de las mayores compañías del mundo. Somos más de 4,000 profesionales en 11 países, con nuestra cultura multicultural de startup en donde cultivamos innovación, aprendizaje continuo para crear soluciones de alto valor para nuestros clientes.,

Data Engineer Stratio

Objetivo del Rol

Diseñar y ejecutar pruebas para validar la calidad de soluciones analíticas y de datos, asegurando altos estándares en pipelines, modelos analíticos y procesos ETL en entornos cloud e híbridos. Colaborar con equipos de Data Engineering, Data Science y Arquitectura bajo metodologías ágiles.

Responsabilidades Principales

  • Diseñar y ejecutar pruebas de calidad de datos y validación de soluciones analíticas.

  • Validar modelos analíticos y de Machine Learning mediante pruebas automáticas y análisis de datos.

  • Diseñar y operar pipelines de validación en entornos AWS, Azure, Databricks, Data Fabric y on-premise.

  • Asegurar la calidad de procesos ETL, desde la ingesta hasta la transformación y limpieza de datos.

  • Implementar y ejecutar pruebas automatizadas, incluyendo pruebas de performance.

  • Apoyar procesos de CI/CD en Azure DevOps.

  • Participar activamente en ceremonias ágiles y promover buenas prácticas de QA en analítica y Big Data.

Conocimientos Técnicos Requeridos

  • Python, PySpark y SQL para validación y pruebas de datos.

  • Experiencia en al menos una de las siguientes áreas:

    • Aprendizaje automático

    • Minería de datos

    • Validación de modelos analíticos y calidad de datos

  • Procesos ETL en cloud u on-premise.

  • Desarrollo y monitoreo de pipelines de validación de datos.

  • Metodologías ágiles y fundamentos de pruebas ágiles.

  • CI/CD con Azure DevOps.

  • Técnicas de limpieza de datos.

Conocimientos Deseables

  • Experiencia con Stratio (Rocket, Discovery).

  • Conocimientos en GCP.

  • Automatización de controles de calidad de datos.

  • Procesamiento de datos en streaming.

  • JavaScript para validaciones o herramientas personalizadas.

Habilidades Blandas

  • Comunicación efectiva.

  • Pensamiento crítico y orientación a la resolución de problemas.

  • Trabajo en equipo y colaboración.

  • Gestión del tiempo y adaptabilidad.

  • Orientación al aprendizaje continuo.

Experiencia

  • 3 a 5 años en roles de QA de datos, analítica o ingeniería de datos.

Modalidad

  • Remoto

 

Ofrecemos:

  • Cultura de innovación y crecimiento profesional
  • Vinculación a tiempo indeterminado (relación de dependencias)
  • Beneficios legales
  • Seguro médico privado
  • Póliza de vida
  • Día libre de cumpleaños

Te invitamos a conocernos en http://www.neoris.com, Facebook, LinkedIn, Twitter o Instagram: @NEORIS.

Andres Pardo

#LI-AP4

 

Benefits

Health Insurance

Seguro médico privado

Birthday off

Día libre de cumpleaños

NEORIS is a global innovation consulting company that focuses on digital business transformation, utilizing emerging technologies to help organizations disrupt their industries. With over 20 years of experience as digital partners to some of the world's largest enterprises, NEORIS combines a multicultural team of over 4,000 professionals across 11 countries to design strategies that enable smarter and easier interactions.

View all jobs
Report this job

This job is no longer available