Ingeniero Datos Senior

Quito , Ecuador
Remote

AI overview

Contribute to building and optimizing core data pipelines and ensure the reliability and performance of data solutions at scale using Spark and Delta Lake.

NEORIS ahora parte de EPAM,  es un acelerador Digital que ayuda a las compañías a entrar en el futuro, teniendo 20 años de experiencia como Socios Digitales de algunas de las mayores compañías del mundo. Somos más de 4,000 profesionales en 11 países, con nuestra cultura multicultural de startup en donde cultivamos innovación, aprendizaje continuo para crear soluciones de alto valor para nuestros clientes.

Estamos en búsqueda al talento que ocupe la posición como Data Engineer, profesional  con sólida experiencia en Spark y Delta Lake para construir y optimizar pipelines core (batch y near-real-time), modelar capas Silver/Gold y asegurar la confiabilidad y el performance de nuestras soluciones de datos a escala.

Principales responsabilidades:

  • Construir y mantener pipelines core batch y NRT.
  • Modelar y evolucionar capas Silver y Gold para casos de uso analíticos.
  • Optimizar performance y confiabilidad en workloads distribuidos.
  • Implementar y monitorear Data Quality mediante expectations.
  • Realizar optimizaciones avanzadas: manejo de shuffle, skew, particionado, caching, etc.
  • Implementar cargas incrementales, gestionar SCD, normalización/denormalización orientada a analítica.
  • Contribuir a estándares de ingeniería, buenas prácticas y revisión de código.

Requerimientos:

  • Profesional en Ingeniería de Sistemas o formaciones similares com 3 a 5 años de experiencia como Data Engineer con fuerte dominio en Spark.

  • Experiencia sólida en:
    1. PySpark o Scala
    2. Delta Lake
    3. Particionado y optimización con OPTIMIZE, Z-ORDER
    4. Cargas incrementales y manejo de SCD
    5. Data Quality con expectations
    6. SQL avanzado
  • Certificaciones deseadas (no obligatorias)

    Databricks Data Engineer Associate/Professional.
    AWS (Data, Architect, o equivalente).
    Certificaciones de Apache Spark.

 

Ofrecemos

  • Modalidad remota. 
  • Medicina prepagada
  • NEORIS Days (3 días libres)
  • Bonificación por cumplimiento anual
  • Bono vacacional
  • Seguro de Vida
  • Plataformas de capacitación y entrenamiento
  • Subsidio de conectividad

Te invitamos a conocernos en http://www.neoris.com, Facebook, LinkedIn, Twitter o Instagram: @NEORIS.

William Mina

 

 

Perks & Benefits Extracted with AI

  • Health Insurance: Medicina prepagada
  • Training and development platforms: Plataformas de capacitación y entrenamiento
  • Life insurance: Seguro de Vida
  • Paid Time Off: NEORIS Days (3 días libres)
  • Annual compliance bonus: Bonificación por cumplimiento anual

Current Job Openings Welcome to NEORIS careers page – Your gateway to exciting opportunities! We're thrilled to have you here as you embark on a journey to explore career possibilities with us. At NEORIS, we believe in the power of diverse talents coming together to drive innovation and success. Whether you're a seasoned professional seeking new challenges or just starting your career journey, this is the place where you can find what you are looking for!

View all jobs
Report this job
Apply for this job