Nos encontramos ayudando a nuestro partner a incorporar a su equipo un Senior Data Enginner.
Requirements
Mínimo 3 años de experiencia
Experiencia laboral y conocimientos avanzados en AWS (Lambda, Fargate, ECS, S3, SNS, GLUE,ATHENA, RDS, IAM, CLOUDFORMATION…).
Experiencia con gestión de versiones GIT y CI/CD.
Experiencia con Python3 y/o PySpark.
Conocimientos y/o experiencia en librerías de tratamiento de datos en Python como Pandas y Numpy.
Experiencia con lenguaje SQL.
Habilidades:
Experiencia y buena capacidad de trabajo en equipo y capacidades de comunicación y reporting
Experiencia en buenas prácticas de Monitorización, Testing, generación de notificaciones, logging, documentación, etc.
Conocimientos sobre arquitecturas Big Data y capas de persistencia horizontalmente escalables en sistema Cloud S3.
Experiencia diseñando y programando procesos de ingesta ETL, ELT parametrizadas.
Valorable:
Certificación AWS.
Experiencia con metodologías Agile.
Conocimientos sobre diseño, optimización y normalización de bases de datos relacionales.
Conocimientos sobre el diseño y optimización de bases de datos analíticas/Data Warehouse.
Conocimientos sobre creación y explotación de Data Lakes.
Conocimientos de bases de datos NoSQL.
Experiencia trabajando con SQLAlchemy y Pandas Dataframes e integrándolos para el uso transparente de la capa de acceso a datos en capas de persistencia relacionales.
Experiencia trabajando con bases de datos relacionales en entornos de producción.
Conocimientos sobre análisis del software (análisis de requisitos, ya que el puesto exige interactuar con "stakeholders" de diferentes áreas de negocio de la empresa, no necesariamente tecnológicas).
Conocimientos y/o experiencia en Gobierno del Dato.
Conocimientos sobre patrones de diseño del software.
Conocimientos y/o experiencia en la creación y consumo de API REST y el servicio de AWS API Gateway.