Offre N°2475
Senior Data Engineer (H/F)
- Expert data
- Data engineers
Contrat à court, moyen terme, ou long terme
Plein temps
Présentiel sur demande
Description de l'emploi
En tant que Senior Data Engineer vous allez mener des chantiers pour traiter des données hétérogènes venant de sources différentes (analytics, funnel, tracking) pour aider à améliorer l’activité d’une dizaine de produits (assurance, banque, prêt, énergie…) fédérant des données venant d’une centaine de partenaires. Vous serez amené à travailler sur notre infrastructure data (InfraAsCode) ainsi que sur toute la chaîne de données de l’acquisition et jusqu’à son exposition aux parties prenantes internes et externes. Quel sera votre quotidien ? Vous allez aider à la modélisation des données (dans des systèmes relationnels - CloudSQL mais aussi NoSQL : Firestore, BigQuery). Vous allez partager votre expertise pour faire évoluer notre archi data ainsi que nos pipelines de données avec des contraintes de maintenabilité, scalabilité et de coûts (Infra as Code Terraform/GCS/Composer /Dataflow/BigQuery/Datastudio). Vous allez faciliter l’accès aux données pour les équipes produit et les Data Analysts et vous réaliserez des chantiers avec eux : structurer les besoins, modélisation de données, conception des pipelines, suivi en production. Exemples de sujets sur lesquels vous pourriez être amené à travailler : valorisation de la data, mise en place d’un Référentiel Client Unique, et beaucoup d’autres… Vous allez participer à nos processus d’amélioration continue, au partage de connaissances au sein de l’équipe data et plus globalement au sein de l’IT mais également à l’onboarding des data engineer
Expérience demandée
Vous avez 5-7 ans d’expérience dans le développement Java. L’exposition à d’autres langages (Python, Scala, Haskell …) serait un plus. Vous maîtrisez GIT (feature branching & continuous merge), et le Pair Programming et la Code Review n’ont pas de secret pour vous. Vous savez penser vos choix de développements dans une logique de long-terme, d’idempotence et de scalabilité. Vous avez déjà mis en place des chaînes de traitements de données de la modélisation en passant par le développement des pipelines, restitution / reporting / dashboarding. Vous savez lire le plan d’une requête SQL en contexte relationnel ou NoSQL (SparkSQL, Hive, Presto ou BigQuery) et identifier des pistes d’optimisation. L’écosystème Cloud ne vous est pas inconnu et vous avez déjà travaillé avec des outils similaires à Cloud SQL, Firestore , Spark, Beam, Airflow, BigQuery ou Data Studio (ou vous aimerez travailler avec ces outils). Vous aimez faire de la veille et vous vous tenez au courant des nouveaux langages/frameworks qui pourraient optimiser nos chaînes de traitements de données. L’anglais ne vous fait pas peur, vous pouvez le pratiquer dans un contexte professionnel.
Niveau du candidat
expertDescription de la société
Eux, c’est ***, leur but dans la vie c’est d’aider les gens à trouver les contrats d’assurance, financiers, santé, ou d’énergie, les mieux adaptés à leurs besoins et au prix le plus juste parmi ceux proposés par leurs partenaires.