Chez Smals, plus de 2000 professionnels façonnent, chaque jour, l’avenir en s’investissant dans « l’ICT for Society ». Ces systèmes ICT de pointe permettent à nos clients de garantir des services encore plus performants dans des domaines tels que le travail, la famille et la santé. À terme, eHealth, une plateforme d'échange sécurisée dédiée aux informations médicales de tous les citoyens, rendra les prescriptions médicales papier superflues. D’autre part, le service ICT Dimona permet à l’ONSS d’assurer une couverture sociale aux 4 millions d’employés dès leur entrée en fonction chez un employeur. Pratique ? Certainement. Audacieux aussi.
Senior Data Engineer
Description de la fonction
En tant que Senior Data Engineer, vous faites partie de l'équipe Information Delivery Services (IDS), chargée de l'implémentation de la plateforme de données commune chez un client qui est un acteur important de la sécurité sociale pour les domaines du chômage, de l'interruption de carrière et du crédit-temps.
Vous combinez une approche analytique et une expertise technique pour concevoir, construire et maintenir des pipelines de transformation. Vous participez activement à la phase d'ingestion du cycle de vie des données - depuis divers systèmes sources vers la Data Platform, qui utilise l'architecture en médaillon - et au traitement des données dans les deux premières zones du lakehouse.
En collaboration avec les Data Analytics Engineers de l'équipe, vous veillez à l'orchestration afin que les données soient précises, accessibles et adaptées aux besoins de l'organisation.
Vous travaillez de manière pragmatique et Agile.
Vos tâches ?
• Développer une logique de transformation stratifiée avec dbt, axée sur la maintenabilité, les performances et la rentabilité.
• Configurer le source-to-target mapping pour convertir les données brutes en composants Data Vault (y compris les hubs, les liens, les satellites et les tables PIT).
• Générer automatiquement des structures Data Vault avec VaultSpeed
• Mettre en place une orchestration des flux de données avec Dagster pour une livraison fiable et ponctuelle.
• Réaliser des tests de validation afin de garantir la qualité et l'utilisabilité des jeux de données.
• Résoudre les problèmes et les goulots d'étranglement liés aux performances afin d'optimiser les pipelines de données.
• Collaborer via Git et les pipelines CI/CD pour la gestion des versions et l'intégration continue.
Vous combinez une approche analytique et une expertise technique pour concevoir, construire et maintenir des pipelines de transformation. Vous participez activement à la phase d'ingestion du cycle de vie des données - depuis divers systèmes sources vers la Data Platform, qui utilise l'architecture en médaillon - et au traitement des données dans les deux premières zones du lakehouse.
En collaboration avec les Data Analytics Engineers de l'équipe, vous veillez à l'orchestration afin que les données soient précises, accessibles et adaptées aux besoins de l'organisation.
Vous travaillez de manière pragmatique et Agile.
Vos tâches ?
• Développer une logique de transformation stratifiée avec dbt, axée sur la maintenabilité, les performances et la rentabilité.
• Configurer le source-to-target mapping pour convertir les données brutes en composants Data Vault (y compris les hubs, les liens, les satellites et les tables PIT).
• Générer automatiquement des structures Data Vault avec VaultSpeed
• Mettre en place une orchestration des flux de données avec Dagster pour une livraison fiable et ponctuelle.
• Réaliser des tests de validation afin de garantir la qualité et l'utilisabilité des jeux de données.
• Résoudre les problèmes et les goulots d'étranglement liés aux performances afin d'optimiser les pipelines de données.
• Collaborer via Git et les pipelines CI/CD pour la gestion des versions et l'intégration continue.
Profil
Vous êtes titulaire d'un diplôme de master en informatique ou pouvez démontrer un niveau équivalent grâce à une expérience pertinente.
Vous êtes expert en SQL et dbt, et disposez d'une connaissance approfondie des méthodologies ETL/ELT et Data Vault.
Vous possédez en outre une grande expérience dans la création et la gestion de pipelines de données dans des outils tels que Airbyte, Dagster, Databricks et Python.
Vous pouvez gérer des versions via Git et travailler dans des environnements CI/CD, ce qui vous permet de travailler de manière structurée et axée sur la qualité.
La connaissance de la modélisation dimensionnelle (Kimball) et de VaultSpeed est considérée comme un atout précieux, mais n'est pas strictement nécessaire.
En outre, vous possédez une connaissance de base de Power BI, vous permettant de bien collaborer avec les équipes BI et de comprendre les besoins en matière de reporting.
Vous pouvez travailler de manière autonome et efficace, mais vous appréciez également le travail en équipe.
Vous avez le sens des responsabilités, faites preuve de flexibilité et pouvez prendre des initiatives dans un environnement de travail dynamique.
Vous avez le don de la communication, êtes capable d'échanger des idées et appréciez la concertation.
Vous maîtrisez parfaitement le français, tant à l'oral qu'à l'écrit. Enfin, vous possédez une connaissance passive du néerlandais et une bonne connaissance de l’anglais.
Vous êtes expert en SQL et dbt, et disposez d'une connaissance approfondie des méthodologies ETL/ELT et Data Vault.
Vous possédez en outre une grande expérience dans la création et la gestion de pipelines de données dans des outils tels que Airbyte, Dagster, Databricks et Python.
Vous pouvez gérer des versions via Git et travailler dans des environnements CI/CD, ce qui vous permet de travailler de manière structurée et axée sur la qualité.
La connaissance de la modélisation dimensionnelle (Kimball) et de VaultSpeed est considérée comme un atout précieux, mais n'est pas strictement nécessaire.
En outre, vous possédez une connaissance de base de Power BI, vous permettant de bien collaborer avec les équipes BI et de comprendre les besoins en matière de reporting.
Vous pouvez travailler de manière autonome et efficace, mais vous appréciez également le travail en équipe.
Vous avez le sens des responsabilités, faites preuve de flexibilité et pouvez prendre des initiatives dans un environnement de travail dynamique.
Vous avez le don de la communication, êtes capable d'échanger des idées et appréciez la concertation.
Vous maîtrisez parfaitement le français, tant à l'oral qu'à l'écrit. Enfin, vous possédez une connaissance passive du néerlandais et une bonne connaissance de l’anglais.
Offre
- Nous vous offrons un emploi varié, stimulant et socialement engagé vous permettant de contribuer à la réalisation de solutions informatiques ayant un impact sur la société. « ICT for society » n’est pas notre slogan par hasard.
- Vous recherchez un bon équilibre vie privée - vie professionnelle ? Profitez de nos horaires de travail flexibles et de notre politique de télétravail très étendue.
- Nous offrons de nombreuses possibilités de formation interne et externe vous permettant de perfectionner en permanence vos compétences techniques et vos aptitudes personnelles.
- Nous vous proposons un salaire compétitif, complété par des avantages extralégaux tels qu'une assurance hospitalisation, un plan de pension complémentaire, des chèques-repas, des éco-chèques, etc. Les fonctions IT peuvent bénéficier d’un budget mobilité avec le choix d'une voiture de société et/ou le remboursement des frais de transport en commun. Sous certaines conditions, ce budget peut même être utilisé pour le paiement de votre loyer ou de votre crédit hypothécaire.
- Vous profitez via notre plateforme « Benefits at Work » de réductions avantageuses sur diverses marques de mode, d’électronique, diverses excursions et divers séjours de vacances…
- Nous menons une politique d'égalité des chances et estimons notamment que l'égalité salariale est importante.
Information pratique
Lieu de travail
Saint-Gilles 1060