REAbout Rachid
Passionné de la data, je cumule plus d'une dizaine d'année d'expérience en software engineering et en data engineering.
J'ai participé à la mise en place des plateformes data sur du cloud et on promise, notamment sur Cloudera, HortonWorks, GCP, Azure (Synapse, Data Factory).
French
Native or bilingual
Can work on-site
Paris (up to 50km)
Experience
- CandriamSenior Data EngineerPRIVATE EQUITYSeptember 2024 - Today (1 year and 9 months)Paris, FranceRefonte de laplateforme analytics: Migration Informatica vers Synapse• Mise en place d'un framework d'ingestion sous PySpark en se basant sur des meta données.• Mise en place d'un framework Data Quality.• Conception et mise en place des pipelines d'ingestion, transformation et de chargement des données dans l'architecture médaillon.• Développement des API data sous FastAPI.• Conception et mise en place d'un framework de test: multi-comparaison des différentes sources de données.• Environnement: Azure Synapse, Azure Pipelines, Pyspark, Delta format, Azure Data Lake, Azure Table Storage, Azure DevOps, FastAPI.
- Crédit AgricoleData Engineer: DataLakePRIVATE EQUITYNovember 2021 - June 2023 (1 year and 7 months)Paris, France• MCO datalake sous MapR: Hive, Hadoop, Sqoop, Tez, Hue, Oozie, PySpark.• Développement des jobs d'ingestion, transformation, et d'exposition des données.• Migration: conception et implémentation d'un nouveau datalake: zones de données, traitements d'ingestion.• Translation des scripts SQL sous Hive vers Oracle SQL• Génération des objets ODI (Interfaces, Traitements, Scénarios) via des scripts Python.• Automatisation de la recette: validation des tables (schémas, colonnes, types), vues.• Conteneurisation de l'application Cash In Time sous Kubernetes et ArgoCD.• Mise en place des chaînes CI/CD du deploiement du code source.• Environnement: PySpark, Hive, Sqoop, Pandera, Pydantic, Tez, Hue, Oozie, Jenkins, Docker, ArgoCD, Kubernetes, GitLab, Oracle ODI, Oracle Database 19c.
- Informatique CDCSenior Data EngineerPRIVATE EQUITYAugust 2023 - September 2024 (1 year and 1 month)Paris, FranceMise enplace des briques datapour différents cas d'usage métier• Conception et mise en place des cas d'usage: structure, chaîne CI/CD, job PySpark.• Mise en place des bonnes pratiques de développement: CI/CD, TNR, TU, GitFlow.• Modélisation du Data Vault: zones d'ingestion, pré-traitement et datamarts.• Développement des jobs d'ingestion, pré-traitement et exposition des données.• Intégration des données externes via des batchs Kafka: notation, risques tiers, Bloomberg.• Environnement: Cloudera, Hive, Spark, PySpark, Python, Kafka, PyTest, Pydantic, Jenkins, Bitbucket, Control-M.
Recommendations
Be the first to recommend Rachid
Help this freelancer shine by sharing your experience working together.
These freelancer profiles also match your criteria
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Education
- Cloud Certified Data EngineerGoogleCloud Certified Data Engineer
- Credential ID: HPWFGh MongoDB Certified DBACredential ID: HPWFGh MongoDB Certified DBA