Tech & IT

Data Engineer AWS / Scala Spark

Voir le décideur de cette mission → 3 jours d'essai gratuits, sans carte bancaire

Description de la mission

Nous recherchons un Data Engineer senior disposant d'une forte expertise sur les environnements AWS, Scala et Spark, idéalement acquise dans des contextes de forte volumétrie de données.

Au sein d'une direction Data centrale, l'équipe Data Platform conçoit, développe et maintient une plateforme data centralisée, sécurisée, scalable et performante, destinée à soutenir les usages data transverses des différentes directions métier. Elle opère notamment un data lake hébergé sur AWS, une infrastructure de traitement de données basée sur Scala Spark, ainsi qu'un écosystème d'orchestration et d'industrialisation des jobs via Airflow. L'équipe assure également la maintenance et l'évolution d'une plateforme Dataiku.

La mission s'inscrit dans un environnement agile, en interaction avec des équipes produit, data, BI, analytics, data science et métiers.

Le consultant interviendra sur deux volets principaux.

Maintien en condition opérationnelle

Contrôler la disponibilité des données et des services de la plateforme

Analyser les incidents et anomalies de production

Répondre aux demandes ad hoc liées aux données

Développer les correctifs nécessaires

Contribuer à la qualité, la fiabilité et l'exploitation industrielle de la plateforme

Communiquer avec les utilisateurs et les parties prenantes

Build & évolution des pipelines data

Concevoir et développer des pipelines de données robustes et performants

Mettre en place des flux d'acquisition, transformation et export de données

Réaliser des traitements distribués en Scala Spark

Participer à la modélisation des données

Développer les tests unitaires et d'intégration

Gérer l'ordonnancement et les dépendances entre traitements

Participer aux revues de code et au respect des standards

Réaliser les déploiements sur les différents environnements

Maintenir la documentation technique et fonctionnelle

Profil candidat:

Le profil devra également avoir une forte appétence fonctionnelle, afin de comprendre les enjeux métier, challenger les besoins et échanger efficacement avec des interlocuteurs variés.

5 ans d'expérience minimum

Expertise avancée en Scala Spark

Solide expérience sur AWS Data & Analytics

Bonne maîtrise de Python et SQL

Expérience sur Airflow

Connaissance de Kafka / MSK

Pratique de GitLab, CI/CD, Maven

Connaissances en Terraform

Capacité à travailler sur des problématiques de performance, sécurité, coûts et scalabilité

Compréhension des enjeux de qualité, gouvernance et fiabilité des données

Expérience en environnement agile

Pourquoi postuler via Mission Freelances ?
On agrège les missions freelance de tout le web et on enrichit chacune avec le contact direct du décideur. Vous postulez plus vite, à la bonne personne, sans intermédiaire.
🎯
Contact direct du décideur
Email pro, LinkedIn et parfois téléphone, dans 78% des cas. Vous parlez à la personne qui recrute, pas à un ATS.
💸
0% de commission
Contrairement à Malt ou Comet, on ne prend jamais de commission sur vos missions. La relation reste entre vous et le client.
⚡
Toutes les sources, un seul feed
LinkedIn, Indeed, WTTJ, HelloWork, France Travail… agrégés et mis à jour 3× par jour. Fini les 10 onglets.
🚀
Postulez avant les autres
En contactant le décideur directement, vous prenez une longueur d'avance sur les candidats qui passent par le formulaire classique.
Voir le décideur de cette mission → 3 jours d'essai gratuits, sans carte bancaire.

Conseils pour trouver des missions freelance

Nos derniers articles pour booster votre prospection et signer des missions.

Continuer l'exploration

D'autres missions et ressources pour votre recherche freelance.