Data Engineer Python – Pyspark

  • Freelance
  • Paris

Objectifs :

Construire et déployer des pipelines ETL dans un environnement cloud AWS, surveiller le bon fonctionnement de ces derniers et corriger les éventuels incidents, gérer l orchestration et le scheduling des jobs, Gérer des bases de donnes noSql ainsi qu un Lakehouse ;

Technologies :

  •  Python et Pyspark
  • AWS Lambda et AWS Glue
  • Airflow
  • Jenkins
  • SQL / Nosql

Compétences souhaitables:

  • Manipulation des données dans un cadre BIG DATA
  • compétences en programmation ( Python, Shell)
  • Fondamentaux CI/CD
  • Capacité à travailler en équipe
  • Autonomie et Proactivité
  • 5 à 6 d’expérience minimum réelle

Pour postuler, envoyez votre CV et votre lettre de motivation par e-mail à n.valentina@abalsia.com