Data Engineer - Vannes (IT) / Freelance

Localisation : Bretagne
Présence sur site minimum 3 jours par semaine
Candidatures locales privilégiées

Contexte

Au sein d’un Chapitre Data intervenant en transverse dans l’entreprise, vous contribuez à la fabrication des cas d’usage Data portés par différentes Squads métiers. Vous évoluez dans un environnement collaboratif avec des interlocuteurs variés et participez activement aux échanges avec les membres du Chapitre présents sur d’autres sites en France.

Missions

Participer à la définition de l’architecture Data avec les architectes et les Squads
Concevoir et développer des solutions de collecte, transformation et stockage de données issues de multiples sources
Développer des pipelines Spark batch et Spark Streaming
Mettre en place les tests unitaires et automatisés
Déployer les solutions dans les différents environnements
Assurer le suivi en production et la gestion des incidents
Être force de proposition et contribuer à l’amélioration continue

Environnement technique

Spark (batch et streaming) indispensable
SQL indispensable
Scala apprécié
Kafka apprécié
Java et Shell appréciés
Stack Hadoop Cloudera
HDFS, Hive, HBase, Phoenix, MongoDB
Git, Jenkins, Artifactory, XL Release
ELK, Grafana
Méthodologie Scrum

Connaissances appréciées

Outils de data visualisation tels que MicroStrategy, Power BI ou Tableau

Profil recherché

Expérience confirmée en Data Engineering Big Data
Solide maîtrise de Spark dans un environnement Hadoop / Cloudera
Capacité à évoluer en contexte transverse

Soft skills attendues

Autonomie
Adaptabilité
Bonne communication
Capacité à challenger les besoins
Prise de lead et force de proposition