Offre d'emploi : Data Engineer – Digital Music Industry (H/F)
L'entreprise
Une grande entreprise française digitale, leader dans le monde de la musique est à la recherche de la future personne qui les rejoindra en tant que Data Engineer.
Cette entreprise est un des leaders mondiaux du marché de la musique numérique. Elle a pour mission d’accompagner les artistes et les labels locaux dans l’écosystème digital en leur offrant des solutions à chaque étape de leur carrière et développement. En effet, grâce à ses nombreux partenariats, l'entreprise permet aux artistes, qu’ils soient connus ou pas encore, de distribuer de manière efficace et sûre les musiques à travers le monde tout en promettant de grands avantages au niveau des royalities des artistes.
Selon eux et d’ici 2030, 90% de la musique sera digitale et c’est la raison pour laquelle ils développement des outils grâce aux nouvelles technologies.
Poste / Missions
- Intégrer une équipe « best in class » (agile, full cloud, déploiement continu, TU, review, etc.)
- Collecter de la donnée depuis des sources très variées (API, SFTP/FTP, base de données, etc.) en python ou avec le service AWS DMS
- Mettre en place des pipelines de traitements de données avec des volumétries importantes et des règles de gestion complexes en Spark ou Python
- Prendre en main et améliorer le workflow CI/CD de la squad
- Optimiser l’usage des services cloud (Snowflake / AWS / Databricks) pour en optimiser les coûts
- Être force de proposition pour améliorer l’architecture de la data plateforme et maintenir un backlog de dette technique
- Effectuer les revues de codes des membres de l’équipe
- Travailler en collaboration avec :
- les équipes produits et le tech lead pour concevoir techniquement les nouveaux flux de données
- les Data Scientistes pour les accompagner dans le déploiement de leurs modèles IA
- le Data Manager pour définir le modèle de données
- le DevOps pour définir les besoins d’infrastructure cloud
Environnement TechniqueSnowflake / AWS (S3 / Lambda / Batch / Step Functions / DMS / RDS / MSK / SQS / SNS / etc. ) / Databricks / Python / Spark Scala / Docker / Gitlab CICD / Sqitch / Pulumi
Profil recherché
MUST
- Niveau BAC+5 (Écoles d'ingénieurs, Master)
- Expérience professionnelle : 3 ans d’expérience dans des postes équivalents
- Être familier avec des technologies de data warehouse Cloud (Snowflake, Redshift, BigQuery, etc.) ou Big Data (Hadoop, etc.)
- Bonnes connaissances Spark, Python & SQL
- Expérience de build et de run
- Expérience utilisation d'API
NICE TO HAVE
- Expérience avec AWS
- Expérience modélisation de données
- Familier avec un orchestrateur (Step Functions, Airflow, Prefect, etc.)
- Familier avec des technologies CICD (Gitlab CICD, Jenkins, etc.)
Informations
Compétences
Les +
- Fléxibilité du télétravail
- Possibilité d'évolution
Postuler
Léa
