Data Engineer GCP - Services Financiers - Ile-de-France
Prefer a full account with a password? Sign Up to Apply
Job Description
Vous souhaitez conjuguer expertise technique, projets Data sur Google Cloud Platform et perspectives d’évolution ? Rejoignez le Vertical Services Financiers pour concevoir et faire évoluer des solutions qui transforment les données en valeur pour les métiers.
Environnement de travail
Au sein d’une Data Factory, vous participez à la construction, à l’évolution et au maintien d’une plateforme Data sur GCP. Vous intervenez sur toute la chaîne de traitement, de la collecte à la mise à disposition de données enrichies, en collaboration avec les équipes métiers, le Chef de projet, les Business Analysts et les équipes d’exploitation.
La mission
Vous contribuez sur différentes activités, notamment :
• Concevoir et développer les pipelines d’ingestion, de validation, de croisement et de transformation des données, jusqu’à leur intégration dans le data lake.
• Développer des traitements robustes et maintenables, dans le respect des règles d’architecture et des besoins métiers.
• Contribuer à la rédaction et à la documentation des user stories avec le Chef de projet et les Business Analysts.
• Produire les scripts de déploiement et participer à l’amélioration de la chaîne de delivery continu.
• Automatiser les tests fonctionnels, analyser les anomalies et prioriser les corrections pour fiabiliser les traitements.
• Accompagner les équipes d’exploitation et partager votre expertise au sein d’une équipe agile Scrum ou Kanban.
Environnement Technique :
• Cloud & Data Warehouse : Google Cloud Platform (GCP), BigQuery, Dataproc, Google Cloud Storage (GCS), SQL.
• Traitement & intégration : Spark, Scala et framework ETL low-code Starlake.
• Orchestration : Airflow / Cloud Composer, Control-M.
• Delivery & infrastructure : Git, Bitbucket, Docker, Terraform, Jenkins, XL Release et XL Deploy.
Requirements
Department: Engineering, Development, Applications
Function: Information Technology
Experience Level: Mid-Senior Level