Big Data Engineer/Ingeniero Big Data sector Banca
IT & Télécommunications
Palma (Spain)
Ref: DM5301
October 22, 2019
FINANCES ET ASSURANCES
FONCTIONS
CONTEXTO
En estrecha colaboración con los Data Scientist, los Data Analyst y los Arquitectos serás responsable de todo el ciclo de Datos y de la optimización del mismo y de la plataforma de Big Data para que el resto de sectores Big Data puedan desempeñar correctamente su trabajo.
FORMACIÓN MINIMA Y EXPERIENCIA
Nuestro cliente busca un candidato/a con estudios superiores o de Master en Ingeniería Informática (Superior, Técnica de Sistemas o de Gestión, Grado), en cualquier otra Ingeniería siendo también válidas carreras de ciencias.
Imprescindible aportar de 3 a 4 años de experiencia en esta posición
FUNCIONES
- Mejora continua de la plataforma Big Data y el ciclo de vida de los casos de uso, puesta en producción y mantenimiento.
- Responsable del ciclo DataOps.
- Soporte y supervisión, funcional y calidad, en la instalación de herramientas y componentes ad-hoc hechos externamente.
- Adaptaciones e integración dentro del ciclo de despliegue continúo middleware, contribución y propuestas sobre mejoras del mismo.
- Mantenimiento y evolutivos sobre la plataforma Big Data, actualizaciones, corrección de errores o adaptaciones.
- Establecimiento de mecanismos con estándares para la transmisión de datos, ingestas, estándar de gobierno, control, calidad.
- Soporte en el desarrollo para la explotación por analistas de datos y/o científicos de datos
- Creación de nuevas capacidades en función a la necesidad de nuevos casos de uso, bien internamente y/o gestión de proveedores externos.
FORMACIÓN COMPLEMENTARIA
- Experiencia en desarrollo de software en entornos distribuidos Linux, con arquitecturas de microservicios en Java, con un ciclo y herramientas de integración contínua con Docker, Git, pipelines y testing automatizados.
- Conocimientos indispensable: Hadoop, Map Reduce, Spark, Kafka, Spark Streaming, MongoDB y SQLServer
- Conocimientos de Scala, Python y R
- Muy valorable el conocimiento de Flink, Elasticsearch o bases de datos NOSQL, así el uso de un change data capture
- Muy positivo tener la certificación de Cloudera
- Valorable bases de estructuración y modelado de datos, así como modelos de aprendizaje automático.
- Necesario nivel de español fluido.