Senior Data Engineer - Aws Scala Spark H/F

Les missions du poste

Créé en Janvier 2020, Charli Group est une société de service spécialisée dans les métiers de l'IT.

Afin d'accompagner au mieux nos collaborateurs et nos clients, nous avons créé 4 filiales PURE PLAYER dans leur domaine :
- Charli Network & Security
- Charli Systems & Cloud
- Charli CyberSécurity
- Charli Data & Digital

La gestion de carrière de nos collaborateurs est un élément central chez Charli. Pour cela, nous vous accompagnons à travers :
- Les formations et le passage de certifications chaque année
- Des missions d'envergure via des clients du CAC40 / SBF 120
- Un suivi présent et personnalisé par votre ingénieur d'affaires et le recruteur
- Des Tech MeetUp initié par nos plus grands experts et ouverts à tous

Envie de nouveaux challenges, alors rejoignez nous :)
Contexte

Dans le cadre d'un programme de transformation DATA, l'objectif est de doter l'entreprise d'outils permettant une exploitation avancée des données pour des prises de décisions optimisées. Ce programme impacte à la fois les technologies utilisées, l'organisation et les processus internes.

Les projets en cours sont variés et incluent :
- L'optimisation des algorithmes de recommandation et segmentation ;
- Le développement d'un Feature Store pour la gestion des données ;
- La modernisation des flux financiers et des plateformes de contenu ;
- La mise en place d'architectures Big Data traitant plus de 100 To de données par jour ;
- Le partage d'informations clients avec des partenaires stratégiques.

Missions

Intégré(e) à l'équipe DATA Delivery, vous interviendrez sur l'évolution et la maintenance des socles de données (Usage, VOD, Advertising, CRM) et leur interconnexion avec divers partenaires. Vous travaillerez sur des architectures de Streaming Data full AWS et des technologies Big Data avancées.

Vos responsabilités incluront notamment :
- La conception et le développement de pipelines de données performants ;
- L'implémentation d'architectures de Streaming Data scalables et robustes ;
- Le développement de traitements de données en temps réel avec Scala, Spark et DBT ;
- L'optimisation et la modernisation des flux de données dans un environnement Big Data ;
- La contribution aux initiatives FinOps pour optimiser l'infrastructure et les coûts ;
- La mise en oeuvre de bonnes pratiques en termes de qualité et de gouvernance des données ;
- La collaboration avec les équipes métiers pour garantir leur autonomie dans l'exploitation des données et des KPI.

Environnement technique
- Cloud & Big Data : AWS (Lambda, EMR Serverless, Kinesis Stream, S3, Firehose, DynamoDB)
- Développement : Scala, Spark, SQL, DBT, Terraform
- CI/CD & Orchestration : GitLab CI/CD, Jenkins
- Data Visualisation : Power BI
- Méthodologies : Agile (Scrum, Kanban)
Compétences et Qualités attendues :
- Vous justifiez d'une expérience de 7 ans minimum dans un environnement similaire
- Vous maîtrisez AWS, Gitlab CI/CD, Terraform, vous êtes fluent en Scala et Spark avancé et aimez les challenges
- Vous etes experts dans le développement de solution d'integration de données.
- Vous parlez Anglais couramment
- Vous connaissez et maîtrisez les outils JIRA et les méthodes « agiles » n'ont pas de secret pour vous !
- Autonome, ouvert d'esprit et bon communiquant, vous disposez d'une grande curiosité scientifique

Le profil recherché

Compétences et Qualités attendues :
- Vous justifiez d'une expérience de 7 ans minimum dans un environnement similaire
- Vous maîtrisez AWS, Gitlab CI/CD, Terraform, vous êtes fluent en Scala et Spark avancé et aimez les challenges
- Vous etes experts dans le développement de solution d'integration de données.
- Vous parlez Anglais couramment
- Vous connaissez et maîtrisez les outils JIRA et les méthodes « agiles » n'ont pas de secret pour vous !
- Autonome, ouvert d'esprit et bon communiquant, vous disposez d'une grande curiosité scientifique

Lieu : Puteaux
Contrat : CDI
Télétravail : Télétravail occasionnel
Accueil / Emploi / Emploi Puteaux / Emploi