Data Engineer - Cloud & Streaming E-Commerce F/H chez Hellowork

Au sein d’une équipe Data & Performance, vous interviendrez sur la gestion et transformation des données digitales issues d’un écosystème e-commerce international. Vous serez impliqué(e) dans la mise en place et l’optimisation des pipelines de données, en assurant leur qualité, sécurité et conformité GDPR.Développement et automatisation des pipelines de données- Développer et optimiser des pipelines SQL / SQLX sous DataForm (similaire DBT).- Concevoir des pipelines Python pour Cloud Data Flow (Apache Beam serverless – GCP).- Intégrer et transformer des données issues d’APIs partenaires via Cloud Functions (GCP).Gestion et traitement des flux de données (Streaming & Batch)- Assurer la gestion des flux via Kafka, SNS/SQS, Cloud PubSub.- Superviser l’intégration et la récupération de données entre AWS et GCP.- Développer des pipelines DataFlow en Python pour le traitement des données en temps réel.- Vérifier et garantir l’anonymisation des données conformément à la GDPR.Data Engineering & Qualité des Données- Assurer l’intégrité, la sécurité et la gouvernance des données dans un Data Lake / Data Warehouse (BigQuery).- Mettre en place des standards de qualité et documentation technique (Data Lineage).- Collaborer avec les équipes Data Analysts & ML Ops pour améliorer la performance des modèles.Développement et DEVOPS- Participer à l’écriture, au déploiement et à la maintenance du code Python.- Travailler avec Git, tests unitaires, intégration continue pour garantir un code robuste.- Contribuer à l’évolution des standards de développement collaboratif au sein de l’équipe.