Dans le cadre de l'évolution du DataHub vers une architecture Data Lakehouse, le client engage une bascule progressive depuis une architecture BI classique (ETL Talend, DWH centralisé) vers un modèle cible de type Lakehouse. Cette trajectoire inclut la migration des flux existants, la mise en place de nouvelles zones data (Landing Zone, Data Lake, Datamarts, Data Products) et le décommissionnement de Talend.
Le/la Data Engineer intervient sous la responsabilité du Responsable de l'équipe technique et en appui du Techlead sur le projet de bascule Lakehouse. Son périmètre couvre à la fois la contribution au projet de décommissionnement Talend et de nouvelle architecture Snowflake, la réalisation de projets et demandes évolutives sur le périmètre data existant, ainsi que le traitement des incidents et le support au Run.
Livrables attendus :
- Inventaire et documentation des jobs Talend repris
- Pipelines Snowflake industrialisés issus de la migration Talend
- Modèles Lakehouse documentés
- Contribution à la stratégie de migration et de décommissionnement Talend
- Développements réalisés sur les projets et demandes évolutives traités
- Suivi et documentation des incidents traités (analyse de cause racine, correctifs)
Profil candidat:
Compétences obligatoires :
- Snowflake : connaissance solide de l'environnement, langages et outils associés : SQL, Snowpipe, Snowpark, RBAC, supervision, Python, SQL avancé
- Terraform : expérience confirmée
- Talend : connaissance de l'outil ou à défaut un ETL équivalent dans le cadre de la bascule de l'ETL vers l'ELT ou la gestion de la maintenance évolutive et corrective en parallèle
Compétences appréciées :
- Power BI
- Expérience Data Lakehouse / Data Mesh
- AWS (Lambda, services serverless)