Solliciteer nu
Colruyt Group

Senior Big Data Integration Engineer

Staat 31 dagen op Jobat.be

Senior Big Data Integration Engineer

Colruyt Group telt meer dan 29.000 medewerkers en meer dan 20 ondernemingen. Dat zijn niet alleen verschillende winkelformules, zoals Colruyt, OKay en Dreamland, we hebben ook een eigen communicatiebureau, vleesverwerkingsbedrijf, technische dienst … Dat maakt de groep een van de grootste privéwerkgevers van het land. We zijn een stabiel bedrijf dat menselijkheid en waarden hoog in het vaandel draagt. Daarom geloven én investeren we in onze medewerkers.

Functieomschrijving

Hoe zuiverder onze data, hoe beter we ermee aan de slag kunnen. Dat weet jij als geen ander! Als Big Data Integration Engineer leid jij de bouw van ons nieuwe data lake in goede banen. Een uitdaging van formaat voor een ervaren expert.

Het Service Center Datamanagement garandeert en checkt de datakwaliteit en biedt ook de nodige vakkennis rond datamanagement aan binnen het vakcentrum. Als Big Data Integration Engineer werk je nauw samen met de domeinen informatie, performance watch en infrastructuur, voornamelijk met Business Analysten en Data Architecten.

Wat doe je concreet?

  • Samen met de Data Architecten sta je in voor de bouw van de ingestion pipelines voor het nieuwe data lake. Je bouwt het kader uit voor een geautomatiseerde opname van data en onderhoudt de data product pipelines die het data lake voeden.
  • Als integration engineer ben je verantwoordelijk voor het bouwen en automatiseren van het ingestion framework.
  • Je neemt de rol van asset owner op en helpt de levenscyclus van het framework te onderhouden.
  • Daarnaast geef je advies rond verbeteringen van data efficiency, kwaliteit en betrouwbaarheid. Je schrijft ook standaarden en richtlijnen uit voor de andere developers.

Je komt terecht in een team met een 20-tal technische dataprofessionals zoals data stewards, ETL developers, Datamanagers, Project Analysten … Je team kan rekenen op de ondersteuning van 3 teams in Colruyt India die instaan voor ETL development, data integration en ADBA. Ze leveren diensten aan in informatie, performance watch en IT-infrastructuur en -oplossingen.

Je werkt in Halle en kan tot twee dagen per week vanuit één van onze regionale kantoren werken (Haasrode, Merelbeke, Mechelen …).

Profiel

  • Opleiding en ervaring – Je hebt ruime ervaring in datawarehousing, datamodelling en datamanagement, en kan Colruyt Group begeleiden bij de implementatie van een nieuw data lake. Jouw maturiteit en technische knowhow kunnen dat in een grote organisatie in goede banen leiden. In jouw vakgebied ben jij de expert.
  • Communicatief vermogen - Je bent in staat een complexe boodschap aan te passen aan je doelpubliek en neemt iedereen voldoende mee in het verhaal. Zo breng je ook anderen expertise bij. Je job heeft impact op de volledige organisatie, goed afstemmen met je verschillende stakeholders doe je dan ook vlot.
  • Conceptueel en analytisch vermogen - Je kan een high level concept/design uittekenen en vertaalt dat makkelijk naar een operationeel niveau. Je pakt dit op een gestructureerde manier aan.
  • Flexibel - Je denkt graag out-of-the-box en kan je vinden in een complexe organisatie. Je erkent dat jouw manier van werken niet de enige is en bent leergierig om nieuwe methodes te leren kennen.
  • Kennis

Je bent heel goed vertrouwd met:

  • continue ontwikkelingen en deployment concepts zoals FIT, SBT/Maven, Jenkins…
  • ingestion tools en hebt er al ervaring in opgebouwd (NiFi, Kafka, CDC…)

Je hebt ervaring in:

  • hadoop ecosystemen (min. 2 jaar): Spark, Kafka, HDFS, Hive, Hbase (als developer of als technical lead)
  • programmeren met Java, Python…
  • SQL-gerelateerde datamanipulatie (SQL Server, Oracle, MySQL)
  • een IDE dat Spark code genereert, idealiter is dat Informatica BDM (talend, DataStage…)        

Je hebt kennis van:

  • Cloudera (v6 of v7 CDP), kennis van Atlas-Ranger, Hue is een plus
  • een Linux-omgeving of hebt er al in gewerkt
  • je bent in staat om architecturale schema’s te lezen en de verschillende componenten te begrijpen

 

  • Talenkennis – Je communiceert vlot in het Engels, zodat je met al je collega’s, partners en stakeholders goed kan samenwerken. Kennis van het Nederlands of Frans is een plus.

Aanbod

  • Dynamische werkomgeving – Jouw omgeving staat niet stil! Je werkt met de nieuwe versies van Ccloudera, Informatica, NiFi…
  • Impact - Je bouwt mee aan een van de grootste projecten rond datamanagement in de geschiedenis van Colruyt Group. Jouw expertise helpt dit te verwezenlijken.
  • Uitdaging -  Je gaat aan de slag met complexe materie. Je tekent de krijtlijnen uit voor het werkkader hierrond en kan dat zelf creëren.
  • Blijven leren en ontwikkelen – Een bedrijf groeit pas als zijn medewerkers groeien. Daarom investeert Colruyt Group met interne en externe opleidingen in jouw professionele en persoonlijke ontwikkeling.
  • Aantrekkelijk loonpakket - Boven op een aantrekkelijk loon krijg je extralegale voordelen zoals een firmawagen, maaltijdcheques en winstdeelname.
Bereken je reistijd
Naar
Colruyt Group | Edingensesteenweg 196 , 1500 Halle

Dit adres kon niet gevonden worden.

Er kon geen route tussen de twee adressen gevonden worden.

Anderen bekeken ook
    Voeg je CV toe
    Jobs voor jou zal je betere jobs suggereren gebaseerd op je opleiding, vaardigheden en werkervaring.

    De job werd bewaard

    Je kan je bewaarde jobs terugvinden onderaan deze pagina, maar ook op de homepage en in Mijn Jobat.

    Wil je ze ook op andere toestellen kunnen bekijken? Meld je dan aan.

    Nog 8 dagen om te solliciteren

    Kenmerken

    • Functietype: Database
    • Sector: ICT, Telecom en Internet
    • Halle (standplaats)

    Aanbod

    • Onbepaalde duur
    • Voltijds

    Solliciteer voor

    • 6 oktober

    Ontvang per mail jobs op maat

    Ontvang nieuwe 'Database' jobs in Halle meteen in je mailbox.