Data Engineer - Tres Cantos, Madrid provincia, España - beonit

beonit

Empresa verificada

Tres Cantos, Madrid provincia, España

hace 3 días

Publicado por:

Isabel García

beBee Recruiter

Descripción

_Desde beonit trabajamos para una de las empresas bancarias referentes en España que se dedica al diseño, desarrollo y gestión de soluciones y servicios IT, tanto para las entidades financieras de su grupo como de otros clientes.

_

Buscamos un Data Engineer para la extracción
y preparación de datos trabajando desde el Área de Data Analytics y en colaboración con Big Data. Buscamos una persona amable y responsable y que se muestre colaborativo con su equipo, garantizando la consecución de los objetivos sin perder el foco en la calidad.**

¿Cuál será tu misión?

La persona que se incorpore será la encargada de la preparación de datos para poder transmitirlos al Área de Data Scientist o al departamento que lo necesite.

Las funciones principales serán:

Webscrapping con PySpark.
Realización del proyecto que se le asigne en cada momento.
Extración de datos para elaboración de dashboard.
Integrar las herramientas y framework de Big Data necesarios.
Buscar herramientas y frameworks adecuados para las futuras necesidades.
Implementación de procesos ETL desde un Data Warehouse Oracle y logs en XML y JSON a Datalake en HDFS, Hive y HBase.
Supervisar el rendimiento y asesorar sobre los cambios de infraestructura necesarios.
DevOps.

¿Qué necesitamos de ti?

Experiência laboral previa de al menos 2 años en un rol similar.
Experiência con bases de datos NoSQL (HBase, MongoDB, Elastic)
Experiência con la integración de datos de múltiples fuentes de datos. Oracle,

mysql, postgresetc

Experiência con Spark, Dask en cluster.
Experiência sistemas de mensajería Kafka.
Experiência con Hortonworks / Cloudera / MapR
Experiência en la construcción de sistemas de procesamiento de flujo, utilizando soluciones como Spark-Streaming, KakfaConnect, kSQl, Nifi, Storm o Flume.
Manejo experto en herrarmientas de sistemas, (Yum, Docker, Kubernetes)

¿Qué podemos ofrecerte?

Desarrollarás tu carrera profesional junto a un equipo jóven y dinámico en un entorno agile, participando en un proyecto estable de gran envergadura y transversal.

Si crees que eres la persona adecuada, no dejes pasar esta oportunidad.

Queremos conocerte

Tipo de puesto:
Jornada completa