Data Engineer H/F (IT) / Freelance

Analyse des données en temps réel avec Azure Stream Analytics. Collecte des données via des flux entre les bases de référence et Azure. Affichage des données entrantes avec Event Hub. Développement de programmes en Spark Scala. Création d'un pipeline Azure Data Factory pour exécuter Databricks notebook afin de traiter les données. Traitement en batch des données. Stockage des données dans le Datalake Azure. Création de projets et stockage de code sur Azure DevOps. Réalisation de la documentation avec Confluence (source des données, technologies utilisées : Databricks, Azure Data Factory, Azure DevOps..., destination des données, stockage, monitoring). Profil candidat : Vous justifiez d'une expérience significative d'au moins 5 ans dans un poste similaire. Vous connaissez les environnements Cloud et avez une expérience significative sur le Cloud Microsoft Azure. Vous avez une très bonne maîtrise de Scala, Databricks, Azure Data Factory, GitHub, DevOps. Vous disposez de quelques connaissances de Azure Data Flow et Azure Machine Learning. Vous connaissez des outils Agile comme Jira et avez déjà travaillé en mode Agile. La connaissance des fondamentaux de SAFE serait un plus. Vous êtes force de proposition et êtes capable de partager votre savoir avec les autres membres de l'équipe. Rigueur, réactivité, aisance rédactionnelle et bon relationnel sont des qualités essentielles pour mener à bien cette mission. #J-18808-Ljbffr