Description du poste
En tant qu'ingénieur senior spécialisé en Data Engineering avec un rôle de lead technique et de garant de l’excellence de l’architecture data. Vous aurez comme responsabilités de :
- Concevoir, refactoriser et optimiser les pipelines de données pour garantir leur performance, robustesse et évolutivité.
- Implémenter un modèle d’ingestion flexible et modulaire, compatible avec des flux de données périodiques ou événementiels.
- Optimiser l’usage de bases de données distribuées type Cassandra pour un traitement quasi temps réel à faible latence.
- Participer à l’intégration de modules de calcul en Edge Computing et de Machine Learning tout en assurant la cohérence et la performance sur l’ensemble de la stack.
- Travailler en collaboration avec les équipes DevOps pour le déploiement, le monitoring et la fiabilité des services data.
- Proposer et promouvoir l’adoption de nouvelles technologies et de modèles d’architecture en ligne avec les bonnes pratiques modernes du data engineering.
- Agir en tant que référent technique : encadrement technique, revue de code, mise en œuvre des principes de gouvernance des données.
Qualifications
Diplômé(e) d'un Bac+5 en informatique.
Expérience : minimum 5 ans d’expérience en Data Engineering, dont une expérience significative en tant que référent technique.
Compétences requises :
- Expertise confirmée en Data Engineering (5 ans minimum)
- Maîtrise des architectures data distribuées (Apache Cassandra, Kafka, Spark ou équivalent)
- Expérience avérée dans le développement de pipelines de données et l’utilisation d’outils d’orchestration tels qu’Airflow ou Dagster
- Maîtrise des frameworks de traitement de flux (streaming)
- Bonne connaissance des architectures cloud-native, microservices et environnements conteneurisés (Docker, Kubernetes)
- Connaissance des stratégies de synchronisation et d’optimisation des données entre Edge et Cloud
- Maîtrise des outils CI/CD et de monitoring pour les services data
- Compréhension approfondie des protocoles réseaux (TCP/IP, Wi-Fi, etc.)
- Compétences solides en administration Linux
- Leadership technique, capacité à encadrer et challenger les équipes
- Sens de la gouvernance et de la qualité des données
- Excellentes capacités de communication et de rédaction technique
Informations complémentaires
Looking forward to hearing from you !