Offre d'emploi : Data Engineer H/F – Data Platform X Music industry
L'entreprise
Un des leaders mondiaux du marché de la musique numérique qui a pour mission d’accompagner les artistes et les labels locaux dans l’écosystème digital en leur offrant des solutions à chaque étape de leur carrière et développement est à la recherche de la future personne qui les rejoindra en tant que Data Engineer confirmé ou senior.
Ce sont plus de 1900 salariés dans 50 pays qui accompagnent artistes avec expertise, respect, équité et transparence.
L'équipe data platform, celle que tu intégreras, est composée d'une trentaine de personne et tu seras amené à travailler sur plusieurs projets différents.
Poste / Missions
- Intégrer une équipe « best in class » (agile, full cloud, déploiement continu, TU, review, etc.)
- Collecter de la donnée depuis des sources très variées (API, SFTP/FTP, base de données, etc.) en python ou avec le service AWS DMS
- Mettre en place des pipelines de traitements de données avec des volumétries importantes et des règles de gestion complexes en Spark ou Python
- Prendre en main et améliorer le workflow CI/CD de la squad
- Optimiser l’usage des services cloud (Snowflake / AWS / Databricks) pour en optimiser les coûts
- Être force de proposition pour améliorer l’architecture de la data plateforme et maintenir un backlog de dette technique
- Effectuer les revues de codes des membres de l’équipe
- Travailler en collaboration avec :
- les équipes produits et le tech lead pour concevoir techniquement les nouveaux flux de données
- les Data Scientistes pour les accompagner dans le déploiement de leurs modèles IA
- le Data Manager pour définir le modèle de données
- le DevOps pour définir les besoins d’infrastructure cloud
Environnement Technique
Snowflake / AWS (S3 / Lambda / Batch / Step Functions / DMS / RDS / MSK / SQS / SNS / etc. ) / Databricks / Python / Spark Scala / Docker / Gitlab CICD / Sqitch / Pulumi
Profil recherché
MUST
Niveau BAC+5 (Écoles d'ingénieurs, Master)
Expérience professionnelle : minimum 4 ans d’expérience dans des postes équivalents
Être familier avec des technologies de data warehouse Cloud (Snowflake, Redshift, BigQuery, etc.) ou Big Data (Hadoop, etc.)
Bonnes connaissances Spark, Python & SQL
Expérience de build et de run
Expérience utilisation d'API
NICE TO HAVE
Expérience avec AWS
Expérience modélisation de données
Familier avec un orchestrateur (Step Functions, Airflow, Prefect, etc.)
Familier avec des technologies CICD (Gitlab CICD, Jenkins, etc.)
Informations
Compétences
Les +
Une politique de télétravail
Un programme de bien-être "Pauses" avec de nombreuses activités et animations en interne
Un restaurant d'entreprise sain et éco-responsable
Une assurance santé individuelle ou familiale
Un rooftop
Une salle de sport avec des cours gratuits
Postuler
LR
