Data Engineer

Rejoignez Pôle Sud, un cabinet de conseil en transformation digitale, en tant que Data Engineer. Vous serez responsable de la conception, de l'industrialisation et de la fiabilisation des flux de données, en travaillant principalement avec GCP, BigQuery et Dataflow. Vous collaborerez avec les équipes techniques et métier, et contribuerez à l'optimisation des performances et de la maintenabilité des traitements existants. Ce poste est basé à Valbonne et s'adresse à une personne autonome, rigoureuse et force de proposition.

Missions

• Concevoir et industrialiser des pipelines de données sur GCP, notamment avec BigQuery et Dataflow.
• Mettre en place et maintenir des traitements batch et temps réel dans un environnement distribué.
• Développer des flux de données robustes autour de Kafka et des mécanismes de streaming.

Profil recherché

• Expérience confirmée en Data Engineering avec prise en charge de sujets techniques de bout en bout.
• Maîtrise de GCP, avec une expérience pratique de BigQuery et Dataflow.
• Très bonne expérience sur Kafka et sur la conception de traitements de données en temps réel.
• Capacité démontrée à développer de vrais flux de streaming, et non à utiliser Kafka de manière superficielle.
• Bonne maîtrise de Python ou de Java pour le développement de traitements data.
• Expérience sur Hadoop et Spark.
• Rigueur, autonomie, sens de l’analyse et capacité à agir comme référent technique.