Data Engineer

FunctieomschrijvingOnze opdrachtgever werkt voor meerdere enterprise organisaties en ontwerpen en bouwen de data intake en verwerkingsoplossingen die bedrijfskritische data ontsluiten. Ze werken veel met cloudplatformen zoals Azure, maar zijn bewust platform? en tool agnostisch. De technische uitdaging staat namelijk centraal. 

De oplossingen draaien in productieomgevingen en vormen een essentieel onderdeel van de business value chain. Dat betekent:

hoge eisen aan datakwaliteit en dataconsistentie;

focus op beschikbaarheid en performance;

end to end inzicht via monitoring en alerting;

verantwoordelijkheid nemen als er iets misgaat.

Concreet betekent dit dat je:

Data connectors en datapijplijnen ontwikkelt met Python, Spark en aanverwante technologieën.

Ruwe data structureert, verrijkt en normaliseert tot modellen die direct bruikbaar zijn voor analytics en reporting.

Validatie- en kwaliteitscontroles ontwerpt en integreert ...