Description du poste
Dans le cadre d'un Centre de Services Data, nous recherchons des Data Engineer intervenant sur la conception, le développement et le maintien de collectes de données sur Google Cloud Platform.
Missions Principales :
• Développer et faire évoluer des pipelines de collecte de données batch et streaming.
• Concevoir des flux d'ingestion, transformation et exposition de données sur GCP.
• Développer des traitements Python et SQL pour l'alimentation des plateformes Data.
• Implémenter et maintenir des solutions basées sur BigQuery, Dataflow, Composer (Airflow), Pub/Sub, Cloud Run et GCS.
• Réaliser les analyses d'impact, les tests, les mises en production et le support des collectes existantes.
• Garantir la qualité, la performance, la fiabilité et la traçabilité des données.
• Travailler dans un environnement Agile/DevOps avec GitLab CI/CD.
Profil recherche
Profil recherché :
• 2 à 6 ans d'expérience en Data Engineering
• Expérience significative sur GCP et BigQuery
• Bon niveau de communication en français
• Capacité à travailler sur des sujets de collecte de données à fort volume et forte criticité.
Compétences requises :
• GCP (BigQuery, Dataflow, Composer, Pub/Sub, Cloud Run, GCS)
• Python, SQL
• Airflow / orchestration de traitements
• Data Engineering, ETL/ELT, collecte de données
• Une expérience Kafka, Spark ou Nifi est un plus.
CGI est un employeur inclusif et attentif aux candidatures des personnes en situation de handicap et à l’évolution de carrières des hommes et des femmes.