Senior Data Engineer (H/F)

  • Believe
  • Paris, France
  • Apr 23, 2024
Full time Information Technology

Job Description

Contexte

Le Tribe « Customer Finance » est composé de plusieurs Squad, parmi elles la squad Finance Ingestion qui a pour mission de développer des outils et des applications pour la collecte de royalties auprès des plateformes de streaming de musique ainsi que préparer les données afin de faire la distribution des royalties auprès des producteurs de musiques. 

En tant que Senior Data Engineer, tu intégras une équipe de Data Engineering travaillant avec les principes du framework agile Scrum. Cette équipe est composée essentiellement de 5 Data Engineer et 1 Software Engineer.  

Nous avons un écosystème composé de : 

  • Un socle de gestion des données (Delta Lake) plus d’1.5 milliard de lignes /mois 

  • Data processing avec Scala et Spark utilisant le runtime de Databricks 

  • Orchestration de nos data pipelines avec Airflow managé 

  • Des APIs déployées avec AWS Lambda et API Gateway pour faire interagir les utilisateurs avec notre interface front (PHP) 

  • AWS RDS pour hoster la base de données back-end sous PostgreSQL  

  • Versionning du code sous GitLab avec un environnement de dev, staging et production 

  • Infrastructure sous AWS    

Les missions du Senior Data Engineer au sein de l’équipe :

-          Accompagner les développeurs à écrire du code propre, qualitatif et conforme aux standards de l’équipe 

-          Interagir avec l’architecte, les équipes infrastructures Cloud pour concevoir les solutions de data engineering 

-          Proposer des améliorations continues et être garant de réduire les dettes techniques 

-          Développer des flux de données (data pipelines) avec de l’Apache Spark et du Scala 

-          Faire de l’orchestration via Airflow avec du Python 

-          Maintenir le workflow GitLab afin de garantir une bonne productivité de l’équipe de développement 

-          Effectuer des revues de codes des autres membres de l’équipe 

-          Collaborer les membres de l’équipe dev pour atteindre l’objectif du sprint 

-          Faire du support applicatif et fonctionnel de l’application auprès des opérationnel 

Qualifications

Qualifications du Data Engineer 

-         5-8 ans d’expérience en Scala 

-         Une maitrise horizontale de tous les composants d’une plateforme de data 

-         Expérience en programmation fonctionnel 

-         Connaissance d’un effect system en Scala (ZIO ou cats) 

-         Excellente maîtrise de l’API Spark en Scala avec pour but de guider l’équipe sur les bonnes pratiques 

-         Expérience en développement backend  

-         Une bonne maitrise des services AWS (API Gateway, Lambda, SNS, SQS, S3, Cloudwatch, VPC) 

-         Développer avec un état d’esprit Keep it Simple, Stupid (KISS) 

-         Excellente compétence dans la gestion de relation avec une équipe en remote 

-         Bonne communication pour gérer les différents points de vue et expliquer les contraintes aux utilisateurs 

 

Optionnel 

  • Expérience en PHP (framewok Symfony ou Laravel) 

Informations supplémentaires

Set the tone with us​

Chez Believe, nous avons deux cœurs : nos collaborateurs et nos artistes.​

Nous croyons en la force de nos collaborateurs, qui s'épanouissent chaque jour en développant leur potentiel... Notre objectif est d'offrir à nos collaborateurs le meilleur environnement possible pour qu'ils puissent s'épanouir.​

Rock the job

Programme de formation et de coaching sur mesure ​

Une politique de télétravail​

Un programme de bien-être "Pauses" avec de nombreuses activités et animations en interne​

Accès à Eutelmed, la plateforme numérique de santé mentale et de bien-être qui permet de parler à un psychologue expérimenté​

Un restaurant d'entreprise sain et éco-responsable​

Une assurance santé individuelle ou familiale​

Avantages CE ​

Un rooftop​

Une salle de sport avec des cours gratuits​

 

Sing in harmony

​Des groupes d'ambassadeurs pour s'engager sur la réduction de l'empreinte carbone et environnementale de Believe et l’équité professionnelle Femme/Homme.​

Mise en place du Forfait mobilité durable: remboursement jusqu’à 600€ des frais de transport en commun/avec une faible empreinte carbone.​

Congé 2nd parent de 5 jours calendaires rémunérés à 100% (en plus du congé légal paternité ou du congé d’adoption, nous ne l’attribuons pas au congé maternité)​

 

 

Believe s’engage à garantir l’égalité des chances en matière d’emploi, sans tenir compte de l’origine, du sexe, des mœurs, de l’orientation sexuelle, du genre, de l’âge, de la situation de famille, de l’état de grossesse, d’une prétendue race, des opinions politiques, des activités syndicales, des convictions religieuses, de l’apparence physique, du nom de famille, du lieu de résidence, de l’état de santé, ou en situation de handicap.

Découvrez nos nouveaux locaux : bit.ly/believeoffice