Mission:
Pour l’un de nos clients dans le secteur financier, nous sommes actuellement à la recherche d’un ou d’une Data Engineer Scala/Spark streaming.
Dans le cadre de l’implémentation d’une plateforme de Datalake XXX , nous avons besoin de réaliser des développements afin d’adapter nos solutions aux besoins spécifiques clients.
Les développements sont réalisés par des équipes R&D intégrées (Dev + QA) utilisant la méthodologie AGILE / SAfe.
Objectif : Développer des nouveaux flux d’intégration et la nouvelle génération d’outils de reporting basé sur le datalake
Environnement technique:
- Environnement Logiciel Hadoop/BigData, Queue de Message Kafka, WebServices/REST
- Environnement Système existant : Linux Redhat 7, Scala/Spark, Python
- Outil de Defect Management Jira
- Framework d’automatisation (GitLab CI/CD avec python )
Profil du candidat
De formation Bac+5, vous justifiez de 5 ans d’expérience sur un poste de Data Engineer et maîtrisez Scala avec Spark Streaming.
Le client: est une SSII spécialisée dans le placement des ressources humaines.
Durée indicative: 12 mois
Démarrage: ASAP
Lieu: Puteaux, Île-de-France
Tarif journalier indicatif: 600 €
Type de mission: Freelance en régie/ Télétravail partiel