Data Engineer Expert Elastic Stack - F/H chez Avanista
Depuis 2012, nous mettons notre expertise au service des secteurs de l’IT et l’Ingénierie pour accompagner nos clients dans des projets ambitieux et innovants.Notre force ? Un management de proximité qui valorise vos aspirations, des opportunités de carrière concrètes et un engagement sincère pour le bien-être et l’épanouissement de nos collaborateurs. Rejoignez-nous sur des projets à fort impact au sein d’une entreprise où chaque talent compte !Avanista recrute !Toujours en recherche de nouveaux talents, nous souhaiterions intégrer un Data Engineer Expert Elastic Stack au sein de nos équipes pour l’un de nos clients.Le contexte ?La transformation des SI de nos Clients vers des architectures modulaires, type micro-services, l’essor de nos infrastructures et l’évolution des technologies associées, ou encore l’automatisation accrue sur nos socles et applications, génèrent une quantité massive de Logs, devenues très hétérogènes, dispersées et silotées de par l’organisation de la société et de ses Clients (équipes applicatives et socles multiples et dispersées). Au sein de la société, dans un contexte multi domaines/Clients (banque de détail, assurances, banque de marchés, asset management, etc.), vous êtes rattaché à l’équipe « Data4Ops », au sein du Domaine d’Expertise « Automatisation et Observabilité » Cette équipe a la charge de structurer les données dites « opérationnelles » à savoir les données utiles à l’ensemble des métiers et équipes opérationnelles, en adéquation avec la stratégie Data de l’entreprise (basée sur les principes/concepts Data Mesh) et en relation avec le PM (Product Manager) ObservabilitéVos missions ? – Maîtriser l’ensemble des techniques et technologies composant la chaine de collecte à la mise à disposition des Logs- Accompagner les besoins et projets sur la collecte, transformation, stockage et mise à disposition des données, provenant de sources diverses en adéquation avec la Stratégie Data- Concevoir et mettre à disposition les outils et processus (CI/CD) permettant d’automatiser les pipelines d’ingestion de données prenant en compte les besoins de fréquences (batch, temps réel, …)- Développer et déployer des mécanismes de contrôle qualité ainsi que des routines de vérification pour garantir l’intégrité et la fiabilité des donnéesPour réaliser la mission, vous serez à même de :- Participer à la conception des solutions techniques et fonctionnelles- Gérer les données de l’entreprise (flux : collecte, traitement, stockage et leur cycle de vie)-Rédiger les documents fonctionnels et techniques, d’exploitation, en veillant au respect des normes existantes- Mettre en œuvre en mode DevOps (CI/CD)- Assurer le support techniq