Trabajos
>
Madrid

    Kafka / Real-Time Engineer - Madrid, España - SDG Group

    SDG Group
    Default job background
    Descripción

    Hola Data Lover

    En SDG, no solo tendrás la oportunidad de formar parte de algo increíble, sino que vivirás lo que significa ser un auténtico especialista en Data & Analytics

    ¿Estás preparadx para embarcarte en esta emocionante aventura? con nosotrxs, podrás potenciar todas tus habilidades y capacidades analíticas, tecnológicas y de negocio.

    Es hora de despegar hacia el futuro mediante el poder de los datos Únete a nosotros y prepárate para romper las reglas y alcanzar tu mejor versión .

    Descubre el poder de SDG: líderes globales en la industria del dato

    En SDG trabajamos para la mitad de las empresas del IBEX-35, pero también en multitud de compañías internacionales . Gracias al boom de la analítica, estamos en un ritmo constante de crecimiento , y desde 1994 nos hemos convertido en el socio de confianza para empresas que desean maximizar todo el potencial de sus datos.

    Si buscas formar parte de una compañía 100% especializada en #Data & #Analytics , te estamos esperando

    Requisitos mínimos

    • Estar graduado en Ingeniería Informática o de Telecomunicaciones.
    • Tener al menos 4 años de experiencia en un rol de Big Data Engineer, implementando y productivizando soluciones de captación, ingesta y transformación de datos.
    • Experiencia de al menos 2 años trabajando en proyectos de tratamiento de datos en tiempo real.
    • Experiencia en arquitectura de datos (formato, estructura, particionado, modelado, capas y ciclo de vida) en ambientes Data Lake, Data Lakehouse, Kafka Topics & Partitioning, Schema Registry, etc.
    • Además será importante que tengas experiencia en algunas de las siguientes herramientas:
    • Lenguajes: Python, Java o Scala.
    • Conocimientos sólidos en algunos de los frameworks y herramientas más relevantes en el procesamiento de eventos en streaming: Spark Structured Streaming, Flink, KStreams y/o ksqlDB.
    • Conocimientos sólidos sobre Kafka u otros brokers de mensajería, independientemente de si son desplegados en on premise o en cualquier de sus variantes cloud (Confluent, MSK, Pub/Sub, Azure Event Hubs,...).
    • Experiencia en todos los servicios adyacentes a Kafka como Kafka Connect, Schema Registry, MirrorMaker, clientes CDC...
    • Conocimiento y experiencia en el uso de sistemas de control de versiones (VCS), esencialmente Git.
    • Experiencia en la utilización de al menos una de las tres grandes nubes (AWS, Microsoft Azure o Google Cloud Platform), especialmente en lo relativo a los servicios orientados a procesamiento y disposición de datos.

    Requisitos valorables

    • Se valora de forma muy positiva tener formación a través de un Máster u otras alternativas que aumenten tus skills, por ejemplo, un Máster en Big Data y Analytics.
    • Hacemos muchas pruebas en local con el uso de contenedores, así que será importante que puedas manejar Docker. También será muy bien valorado conocimientos en Kubernetes.
    • Qué conozcas lenguajes que están tomando relevancia ahora en el mundo data como Rust o Elixir es algo que valoraremos muy positivamente también.
    • Conocimiento sobre DataOps, Observabilidad, patrones de diseño low-code/no-code,...
    • Cómo trabajamos en un entorno global, será un plus que puedas comunicarte en inglés.
    • Nos gusta estar al día en nuevas tecnologías, así que necesitamos personas que quieran estar en continua evolución y que tengan ganas de aprender nuevas tecnologías y probar nuevas herramientas.
    • Para nosotrxs el trabajo en equipo es primordial, por lo que buscamos personas que impulsen ese buen ambiente y las sinergias entre compañerxs y diferentes equipos de trabajo.

    Acerca del puesto

    SDG Group es una firma de consultoría global focalizada exclusivamente en soluciones de data & analytics, cubriendo con ello toda la cadena de valor del dato, y proporcionando planes de carrera tanto de consultoría como de especialización para todos aquellos que quieran progresar en el mundo del dato. Además, a través de nuestra cultura Smart Work tendrás la posibilidad de definir el modelo de trabajo que más se adapte a ti y a tus necesidades personales, al mismo tiempo que puedas colaborar en iniciativas de gran impacto para clientes punteros en sus respectivas industrias.

    Como Streaming data engineer del área de Data Technologies, tu misión será formar parte de equipos multidisciplinares con el objetivo de ayudar a nuestros clientes a abordar iniciativas de datos en entornos de alta complejidad técnica.

    Tendrás la posibilidad de utilizar un amplio espectro de tecnologías innovadoras para la construcción de soluciones de gestión de datos bajo diversos paradigmas de procesamiento y modelado, aplicando para ello los principios adecuados en términos de desarrollo y arquitectura.

    Asimismo, gracias a nuestro path de especialista tendrás la oportunidad de crecer como ingeniero y/o arquitecto Big Data, contando con herramientas y recursos para tu continuo aprendizaje y crecimiento profesional, al mismo tiempo que te involucras en diversos retos que permitan tanto a SDG Group como a nuestros clientes explotar al máximo el valor de sus datos.

    Responsabilidades

    • Dar tu opinión técnica sobre los procesos y arquitecturas que se desarrollen para nutrir las conversaciones que se llevan a cabo durante las fases de diseño de los proyectos que llegan a la compañía, teniendo en cuenta factores como escalabilidad, coste, facilidad de implementación, mantenimiento...
    • Participarás en la toma de requerimientos necesarios para desarrollar arquitecturas y pipelines de datos. Como persona dedicada al mundo Real Time, deberás tener en cuenta cómo integrar soluciones en RT con el resto de tecnologías presentes en el día a día.
    • Desarrollarás procesos de tratamiento de datos en streaming integrando información en tiempo real así como 'at rest'. Estos desarrollos se llevarán a cabo utilizando tecnologías de procesamiento como Kafka Streams, Flink, Spark,...
    • En los proyectos en los que trabajamos la performance es un factor fundamental, por lo que también te tocará optimizar la configuración de las herramientas de procesamiento, así como de las plataformas que gestionan los datos optimizando el throughput, latencias, orden de consumo, delivery guarantees,.... Aunque actualmente apostamos por Kafka como plataforma de Streaming en nuestras arquitecturas, también hemos desarrollado con otros proveedores como Azure Event Hubs o Kinesis.
    • Tendrás que garantizar la estabilidad de los procedimientos monitorizando los pipelines de datos y generando políticas de disaster recovery que minimicen el impacto de posibles errores.

    INSCRÍBETE AHORA ESTAMOS DESEANDO CONOCERTE

    #J-18808-Ljbffr


  • ATG Europe Madrid, España

    The activities below will include frequent access to classified security areas and systems. They may entail meetings in the other client's premises in Europe, EC premises in Brussels, ESA premises in Noordwijk - ESTEC (The Netherlands) or other European centres, Galileo Control C ...


  • Siemens Gamesa Renewable Energy Madrid, España

    It takes the brightest minds to be a technology leader. It takes imagination to create green energy for the generations to come. At Siemens Gamesa we make real what matters, join our global team. · Siemens Gamesa has a vision for renewable energy: we believe in the power of natur ...


  • PTW Madrid, España

    Job reference · - 28625A4A81 · - Company Name · - PTW · - Salary · - Competitive · - Location · - Madrid, Spain · - Country · - Spain · - Industry sector · - Animation · - Job start date · - ASAP · - Posted date · - 19/05/2023 · - Experience Level · - Mid-Senior Level · - Job typ ...


  • Quirónsalud Madrid, España De jornada completa

    Con más de 80 centros en toda España, Quirónsalud es la compañía líder en España en prestación de servicios sanitarios. Contamos con expertos de prestigio internacional en el ámbito biomédico y con un gran equipo de profesionales sanitarios y no sanitarios que trabaja día a día c ...


  • Hospital Quirónsalud Palmaplanas Madrid, España Jornada completa

    Descripción de la oferta · Con más de 80 centros en toda España, Quirónsalud es la compañía líder en España en prestación de servicios sanitarios. Contamos con expertos de prestigio internacional en el ámbito biomédico y con un gran equipo de profesionales sanitarios y no sanita ...


  • Swiss Re Madrid, España

    About the Role · As an Internal Services Intern, you will be working with the Spanish CRES team, specifically supporting the onboarding of our new employees. Your main tasks will be: · • Access control, organization, and distribution of access badges (OCMS) · • Onboarding: Intro ...


  • Swiss Re Madrid, España

    This is an exciting opportunity for a student or recent graduate to assist and support the local office management function in a complex and international environment. Our Corporate and Real State agenda is focused on making a meaningful impact on people's lives. Supporting Swiss ...


  • Walters People Madrid, España

    Desde Walters People estamos buscando un perfil de Data Engineer especializado en entornos cloud ASW y/o Google Cloud para incorporarse en plantilla de importante multinacional del sector de Data & Analytics con sede en Madrid. · Te incorporarás en el equipo de Data de la compañí ...


  • CAS TRAINING Madrid, España

    Azure DevOps Engineer en Madrid. · Cas Training empresa de referencia con más de 20 años en consultoría tecnológica outsourcing y formación especializada selecciona a un Azure DevOps Engineer para formar parte de importante proyecto en modalidad remoto 100 · **Requisitos**: · Arq ...


  • Grupo NS Madrid, España

    **Senior Engineer/Arquitecto React. Teletrabajo**: · Madrid - Publicada el 23 de febrero de 2024 · Descripción · Grupo NS incoporamos un **Senior Engineer/Arquitecto React **para liderar la parte técnica front de un proyecto del sector industria con al menos 5 años de experiência ...

  • sg tech

    Data Engineer

    hace 1 semana


    sg tech Madrid, España

    · **Oferta de Trabajo: Data Engineer en sg tech**: · Hola Estamos buscando un Data Engineer para unirse a nuestro equipo en sg tech. Si eres apasionado por la tecnología y tienes experiência en Azure, Azure Databricks, Spark, Scala, Azure Data Factory y Delta Lake, sigue leyendo ...

  • Logicalis

    Data Engineer Datastage

    hace 1 semana


    Logicalis Madrid, España

    Job Snapshot · **Employee Type**: · - Full-Time · **Location**: · Madrid**Job Type**: · - Engineering · **Experience**: · - Not Specified · **Date Posted**: · - 5/12/2023 · **Job Description**: · Desde Logicalis Madrid queremos incorporar 3 perfiles de** Data Engineer Datastage ( ...


  • Hasten group Madrid, España

    **Localidad**: · Madrid · **No Vacantes (puestos)**: · 1 · **Funciones**: · Desde Grupo Hasten estamos buscando perfiles de data engineer con experiência con ETL, Spark y Scala para trabajar con uno de nuestros importantes clientes con ubicación en Madrid. · **Requisitos**: · - E ...

  • BANCO SANTANDER S.A.

    Cloud Engineer

    hace 6 días


    BANCO SANTANDER S.A. Madrid, España

    Cloud Engineer - Lynx · Country: Spain · **Lynx Financial Crime Tech **está buscando un/a **Cloud Engineer** · **POR QUÉ DEBERÍAS CONSIDERAR ESTA OPORTUNIDAD** · Lynx Financial Crime Tech S.A. Somos una empresa de software impulsada por IA especializada en detectar y predecir pat ...


  • Hasten group Madrid, España

    **Localidad**: · Madrid · ***: · **Funciones**: · Desde Grupo Hasten estamos buscando perfiles de data engineer con experiência con ETL, Spark y Scala para trabajar con uno de nuestros importantes clientes con ubicación en Madrid. · **Requisitos**: · - Experiência al menos 2-3 añ ...

  • PSS

    Data Engineer

    hace 2 días


    PSS Madrid, España

    Data Engineer (Remoto) en Madrid. · ¿Te apetece formar parte de una compañía en pleno crecimiento? ¿Y trabajar rodeado del mejor TALENTO en proyectos realmente innovadores? En PSS es posible y nos gustaría conocerte. · Actualmente estamos buscando un perfil de Ingeniero de datos ...

  • BANCO SANTANDER S.A.

    Data Engineer Aws

    hace 5 días


    BANCO SANTANDER S.A. Madrid, España

    Data Engineer AWS (ElasticSearch-Python) · - Lynx · Country: Spain · **WHAT YOU WILL BE DOING** · **Lynx **Financial **Crime **Tech **está buscando un/a **Data **Engineer **AWS ( **ElasticSearch **-Python) · **POR **QUÉ DEBER **ÍAS CONSIDERAR ESTA OPORTUNIDAD · Lynx Financial Cri ...

  • Facephi

    Senior Data Engineer

    hace 1 semana


    Facephi Madrid, España

    **Descripción**: · ¿Quieres una oportunidad para formar parte de nuestro equipo de **Producto**? · ¿Te gustan los **retos**? · **Pues esta es tu oportunidad...** · En Facephi, estamos buscando nuevos/as compañeros/as con experiência en posiciones similares a** Data Engineer** par ...

  • Hasten group

    Data Engineer

    hace 3 días


    Hasten group Madrid, España

    **Localidad**: · Madrid · ***: · **Funciones**: · Desde Grupo Hasten, estamos en la búsqueda de un perfil de Data Engineer, para incorporarse de forma indefinida, en uno de nuestros principales clientes, Cualquier provincia de España. 100% Teletrabajo; pero si el perfil se ubica ...


  • Talent Hackers Madrid, España

    Como DevOps - AWS Cloud Engineer tu objetivo será participar en el diseño y desarrollo de una herramienta de AML basada en inteligencia artificial, Big Data y Procesamiento en tiempo real. · Necesitamos a alguien como tú para que nos ayude en distintos ámbitos: · - Mejorar e impl ...