JobID=1c
Functieomschrijving :
Doelstelling
De Data Engineer is verantwoordelijk voor het opbouwen en onderhouden van de datastructuren en de datastromen op het data platform. Het data platform is het platform waarop verschillende data warehouse en data lake oplossingen gebouwd zijn of gebouwd worden. De gegevens die ontsloten worden zijn afkomstig uit ERP systemen, HR systemen, servicedesk omgevingen, maar ook IoT gegevens afkomstig uit Batterij systemen. De bronnen zijn SQL databases, tekstbestanden, Excel files en JSON bestanden.
RESULTAATGEBIEDEN
De data engineer is verantwoordelijk voor de bouw en onderhoud van de datastromen naar het data platform en de modellering van de gegevens in het data platform. Het is een developer functie.
Processen
Het ontwerpen, bouwen en onderhouden van de datastromen naar het data-platform
Verantwoordelijk voor de modellering van de gegevens in het data platform
Ervoor zorgen dat systemen voldoen aan bedrijfsvereisten
Het bouwen van algoritmes en modellen
Het schrijven van scripts in Python
Het integreren van nieuwe datamanagement-technologieën en software engineering tools in bestaande structuren
Het beveiligen & het analyseren van data
Datavisualisatie mogelijk maken
Begeleiden van nieuwe releases
Deelnemen in diverse ICT projecten
De toolset waarmee je werkt bestaat uit Matillion en Snowflake.
Gegevens worden naar gebruikers gebracht met Azure Analysis Services en PowerBI.
Overige
Volgen van de instructies en uitvoeren van de werkmethode door de relevante QHSE-procedures te volgen, zoals beschreven in AIM. Voor bevoegdheden zie ‘authority matrix’.
Actieve bijdrage aan het behalen van de afdelingsdoelstellingen (Roadmap).
Overige voorkomende werkzaamheden.
KENMERKEN
Communicatie
Communicatie met medewerkers van de afdeling, medewerkers/gebruikers van diverse afdelingen rondom ICT/Cloud/datawarehousing vraagstukken.
Communicatie met leveranciers van software.
Bevoegdheden
Bevoegd om alle maatregelen te treffen, binnen het kader van gemaakte afspraken en gestelde eisen, die nodig zijn voor het verwezenlijken van zijn verantwoordelijkheden.
Functie eisen :
Je hebt hbo-niveau, bijvoorbeeld door een opleiding in de richting van technische of bedrijfsinformatica, informatiekunde, ICT of software-engineering.
Je hebt ervaring met het ontwerpen en realiseren van software in bijvoorbeeld SAS, Python, R, C#, PHP of Java.
Beheersing van SQL (Teradata)
Ervaring met dimensioneel modelleren
Kennis van en inzicht in de gelaagdheid van een data warehouse en de functies die bij deze gelaagdheid horen
Kennis van en inzicht in het verschil tussen transactionele databases en analytische databases
Kennis van en inzicht in het efficiënt ontsluiten van gegevens uit SQL databases naar Snowflake met behulp van Matillion
Kennis van en inzicht in het efficiënt ontsluiten van gegevens uit tekstbestanden naar Snowflake met behulp van Matillion
Kennis van en inzicht in het efficient ontsluiten van gegevens uit Excel bestanden naar Snowflake met behulp van Matillion
Goede kennis van de Nederlandse en Engelse taal, zowel mondeling als schriftelijk.
Lees hier meer
Deel deze vacature:
