Objectifs :
Construire et déployer des pipelines ETL dans un environnement cloud AWS, surveiller le bon fonctionnement de ces derniers et corriger les éventuels incidents, gérer l orchestration et le scheduling des jobs, Gérer des bases de donnes noSql ainsi qu un Lakehouse ;
Technologies :
- Python et Pyspark
- AWS Lambda et AWS Glue
- Airflow
- Jenkins
- SQL / Nosql
Compétences souhaitables:
- Manipulation des données dans un cadre BIG DATA
- compétences en programmation ( Python, Shell)
- Fondamentaux CI/CD
- Capacité à travailler en équipe
- Autonomie et Proactivité
- 5 à 6 d’expérience minimum réelle
Pour postuler, envoyez votre CV et votre lettre de motivation par e-mail à n.valentina@abalsia.com