Data Engineer

2 weken geleden


Den Haag South Holland, NL Yacht Voltijd
Bedrijfsomschrijving

Het Ministerie van Buitenlandse Zaken is de spil in de communicatie tussen de Nederlandse regering en de regeringen van andere landen én tussen de Nederlandse regering en internationale organisaties. Het ministerie coördineert het buitenlandbeleid van de Nederlandse regering en voert dit uit. BZ steunt 24/7 Nederlanders in het buitenland. Naast het departement in Den Haag opereert het ministerie vanuit ca. 160 ambassades, permanente vertegenwoordigingen en consulaten(-generaal), verspreid over de hele wereld.

Functieomschrijving

HDCV heeft een eigen BI-team van data analisten, data scientists en een data steward. Je bent onderdeel van het BI-team en werkt er veel mee samen. Tevens heb je veel contact met DCVafdelingen en het Data Competence Centre (DCC) van de directie Informatievoorziening en Digitale Innovatie (IDI) die de ontwikkeling van informatiegestuurd werken bij BZ faciliteert.
Jouw werkzaamheden:
- Het inrichten en beheren van data pipelines
- Het operationaliseren van End2End pipeline van ruwe data tot gevormde data voor downstream applicaties
- Het beheren en optimaliseren van een datalake en datawarehouse
- Het beschikbaar maken en toegankelijk houden van OTAP omgevingen;
- Het integreren van datamanagement-technologieën en software engineering tools;
- Het ontsluiten van een geautomatiseerd self-service platform voor ondersteunende tools;
- Het initiëren van vernieuwingen op het gebied van devops engineering en hierover adviseren.

De directie Consulaire Zaken en Visumbeleid heeft behoefte aan een dedicated data-engineer die zorgt voor een stabiele data omgeving door het aansluiten en integreren van DCV bronnen zoals het visumaanvraagsysteem, de short/fast track screeningsapplicatie van visumaanvragen, het belsysteem van Nederland Wereldwijd, de BZ Reisapp en het consulaire bijstandssysteem in de DCV analyse omgeving. Het doel is om data (intern/extern, gestructureerd/ongestructureerd) te verzamelen en zodanig te rangschikken dat DCV de data kan toepassen om tot nieuwe inzichten te komen ter ondersteuning van de consulaire processen.

Functie-eisen

De perfecte kandidaat voldoet aan de volgende eisen:

  • Havo diploma
  • minimaal 2 jaar werkervaring met big data technologieën (Spark / Databricks, Azure HDInsight, Hadoop o.i.d.)
  • ervaring met het in productie nemen van data en machine learning pipelines, en distribueren van de resultaten ervaring met het binnenhalen, opslaan en verwerken van zowel gestructureerde data als nietgestructureerde data
  • ervaring met CI/CD methodologie, met Azure tools zoals Azure Devops, Data Factory en vergelijkbaar
    ervaring met cloud services, ervaring met visualisatieprogramma’s (zoals Tableau)

En de volgende wensen:

  • Engels: Lezen B2, schrijven B2, spreken: interactie (gesprek) B2
  • Bij voorkeur heb je ervaring als data scientist om als achtervang werkzaamheden te kunnen overnemen indien nodig. Interesse in en kennis van de nieuwste technologieën op het gebied van data engineer, data science en data warehousing

Het ministerie voert een actief diversiteitsbeleid en zet in op een inclusieve organisatie. We doen dit door de verschillen van mensen optimaal in te zetten en te benutten. We streven bij de samenstelling van teams en bij de aanname van nieuw talent naar diversiteit in leeftijd, geslacht, cultuur, achtergrond, geaardheid, kennis en competenties.

Arbeidsvoorwaarden

Deze opdracht is uitsluitend voor detachering



  • Amsterdam, North Holland, NL Yacht Voltijd

    BedrijfsomschrijvingBij Yacht IT, een integraal onderdeel van de Randstad groep, smeden we een hechte gemeenschap van IT-experts. Binnen ons uitgebreide netwerk dat de gehele sector bestrijkt, plaatsen we met trots het individu op de voorgrond. We erkennen de unieke aard van jouw carrière en staan klaar om je te ondersteunen bij het verwezenlijken van je...

  • Data Engineer

    3 weken geleden


    Den Haag, Zuid-Holland, Nederland Yacht Voltijd

    HDCV heeft een eigen BI-team van data analisten, data scientists en een data steward. Je bent onderdeel van het BI-team en werkt er veel mee samen. Tevens heb je veel contact met DCVafdelingen en het Data Competence Centre (DCC) van de directie Informatievoorziening en Digitale Innovatie (IDI) die de ontwikkeling van informatiegestuurd werken bij BZ...


  • Den Haag, Zuid-Holland, Nederland ANWB Voltijd

    Data gedreven werken is de toekomst en dat geldt zeker voor de ANWB. Met de juiste combinatie van data en AWS expertise ontwikkelen we slimme toepassingen en een nóg betere dienstverlening voor de ruim 5 miljoen ANWB-leden. Vind jij het leuk om met de laatste AWS features aan de slag te gaan om uitdagende data oplossingen te maken? Werk je graag met data,...

  • (Geo) Data Engineer

    7 dagen geleden


    Den Haag, Nederland Rijksoverheid Voltijd

    Ben jij op zoek naar een uitdagende (geo) data engineer functie, waarbij je jouw engineering kennis in kan zetten voor verschillende transities, dan is deze functie iets voor jou! Binnen de Rijksdienst voor Ondernemend Nederland (RVO) draag je bij aan de ontwikkeling van het Enterprise Datawarehouse, waarbinnen je relevante data beschikbaar stelt...

  • Data Engineer

    1 week geleden


    Den Haag, Zuid-Holland, Nederland Yacht Voltijd

    Bij VZVZ innoveren we de medische gegevensuitwisseling voor betere zorg en gezondheid in Nederland. We groeien snel en zoeken een energieke Data EngineerWat ga je doen? Als Full Stack Data Engineer bij VZVZ ben jij de drijvende kracht achter het gehele ETL-proces, van ontwerp tot onderhoud. In de MS-stack omgeving benut je jouw vaardigheden om ETL-workflows...

  • Data engineer

    24 uur geleden


    Noord-Holland, Nederland Rochdale Voltijd

    Data engineer32-36 uur AmsterdamOver de functieHallo Data engineer!Rochdale zet zich in voor sterke buurten, waar inwoners meer kansen hebben. We bouwen, verduurzamen en maken kwetsbare buurten sterker. Jij kunt hier een mooie bijdrage aan leveren vanuit jouw rol als data engineer. Je bent verantwoordelijk voor de ETL-processen waardoor de organisatie elke...

  • Innovatieve Data Engineer

    4 weken geleden


    Den Haag, Nederland DMFCO Asset Management Voltijd

    Innovatieve Data Engineer bij Marktleider DMFCO – Bouw mee aan onze Toekomst! Transformeer jij met ons de hypotheekmarkt door innovatieve data-analyse? DMFCO, marktleider in het beheren van Nederlandse hypotheken, is op zoek naar een Data Scientist die gedreven is om met modellen en analyses vernieuwende inzichten te leveren. Als jij analytisch sterk,...


  • Den Haag, Nederland ANWB Voltijd

    Vind jij het leuk om met de laatste AWS features aan de slag te gaan om aan een uitdagend data platform te werken? Werk je graag met data, Python, AWS en CDK om andere teams binnen de organisatie te helpen om zelf data producten te maken met ons data platform op AWS? Word jij ook zo enthousiast van de oneindige mogelijkheden van AWS Serverless oplossingen...

  • Data Engineer

    8 uur geleden


    Den Haag, ZH, Zuid-Holland, Nederland Yacht Voltijd

    Bij VZVZ innoveren we de medische gegevensuitwisseling voor betere zorg en gezondheid in Nederland. We groeien snel en zoeken een energieke Data Engineer! Wat ga je doen? Als Full Stack Data Engineer bij VZVZ ben jij de drijvende kracht achter het gehele ETL-proces, van ontwerp tot onderhoud. In de

  • Data Engineer

    7 dagen geleden


    Noord-Holland, Nederland Jobmatix Voltijd

    Wat ga je doen: Als Data Engineer word je lid van het innovatieve en gedreven team bij Jobmatix. Samen zetten we ons in voor de ontwikkeling van grensverleggende recruitment marketing software en services. We streven ernaar organisaties te empoweren bij het optimaliseren van hun online wervingsinspanningen. Onze ambitie is om recruitment marketing binnen...


  • Den Haag, Zuid-Holland, Nederland ANWB Voltijd

    Vind jij het leuk om met de laatste AWS features aan de slag te gaan om aan een uitdagend data platform te werken? Werk je graag met data, Python, AWS en CDK om andere teams binnen de organisatie te helpen om zelf data producten te maken met ons data platform op AWS? Word jij ook zo enthousiast van de oneindige mogelijkheden van AWS Serverless oplossingen...


  • Den Haag, Zuid-Holland, Nederland NN Voltijd

    As a Data Platform Engineer at Data Factory Platform team within Risk Department of NN Bank, you will be responsible for designing, building, and maintaining data platform solutions on Azure cloud using tools like Azure ADLS, Azure Databricks, ADF, and Terraform. You will collaborate with cross-functional teams to identify and implement data-driven solutions...


  • Den Haag, Nederland Yacht Voltijd

    BedrijfsomschrijvingBij Yacht IT, een integraal onderdeel van de Randstad groep, smeden we een hechte gemeenschap van IT-experts. Binnen ons uitgebreide netwerk dat de gehele sector be BedrijfsomschrijvingBij Yacht IT, een integraal onderdeel van de Randstad groep, smeden we een hechte gemeenschap van IT-experts. Binnen ons uitgebreide netwerk dat de gehele...


  • Den Haag, Zuid-Holland, Nederland Yacht Voltijd

    In het domein van Data en Business Intelligence (BI) verandert het landschap voortdurend door de opkomst van kunstmatige intelligentie (AI). Ben jij een enthousiaste professional met diepgaande expertise, klaar om je vaardigheden op het gebied van data-engineering in te zetten om klanten vooruit te helpen? Werk in loondienst, word gedetacheerd bij...

  • Interim Data Engineer

    4 weken geleden


    Noord-Holland, Nederland Independent Recruiters Voltijd

    Ben jij expert in het bouwen van ETL-oplossingen en pipelines met streaming of real-time data? En wil jij met die skills bijdragen aan een complex data-platform bij een van de grootste vervoersbedrijven van Nederland?Als Data Engineer draag je bij aan het ontwikkelen van geavanceerde oplossingen en het optimaliseren van ketenmonitoring dashboards. Een greep...

  • Data Engineer

    1 week geleden


    Den Haag, Nederland Yacht Voltijd

    Bij VZVZ innoveren we de medische gegevensuitwisseling voor betere zorg en gezondheid in Nederland. We groeien snel en zoeken een energieke Data Engineer! Wat ga je doen?  Als Full Stack Data Engineer bij VZVZ ben jij de drijvende kracht achter het gehele ETL-proces, van ontwerp tot onderhoud. In de MS-stack omgeving benut je jouw vaardigheden om...

  • Data Scientist

    1 maand geleden


    Den Haag, Nederland ANWB Voltijd

    Je bouwt doelgericht modellen voor de alarmcentrale. Denk aan een model dat inschat hoe we leden met autopech het beste en snelste weer op weg helpen. Een datamodel dat voor de retailorganisatie voorspelt welke wandelschoenen in de komende periode het beste verkopen. Of recommenders die websitebezoekers product aanbevelingen doen. Tijdens een intake krijg...

  • Data Scientist

    3 weken geleden


    Den Haag, Zuid-Holland, Nederland ANWB Voltijd

    Je bouwt doelgericht modellen voor de alarmcentrale. Denk aan een model dat inschat hoe we leden met autopech het beste en snelste weer op weg helpen. Een datamodel dat voor de retailorganisatie voorspelt welke wandelschoenen in de komende periode het beste verkopen. Of recommenders die websitebezoekers product aanbevelingen doen. Tijdens een intake krijg...

  • Data Engineer BI

    4 weken geleden


    Noord-Holland, Nederland Schiphol Voltijd

    Nice to know (you) Als Data Engineer BI ben je verantwoordelijk voor het ontwikkelen van verschillende datawarehouses/lakehouses voor de verschillende domeinen binnen Schiphol. Je wordt onderdeel van een multidisciplinair team, bestaande uit back- end specialisten, front-end specialisten, business analisten, product owner(s) en een data lead. We gaan...

  • Senior Data Engineer

    4 weken geleden


    Den Haag, Nederland Techzine Voltijd

    Join Odido as a Senior Data Engineer and shape the future of telecom with your expertise in AWS, data systems, and software design. If you’re passionate about innovating in a dynamic, tech-forward environment, we want you on our pioneering Data team! This is what you will do About Odido: Odido, a leader in the Dutch telecom industry, is known for its...

  • Data Engineer

    2 weken geleden


    Zuid-Holland, Nederland Yacht Voltijd

    Bedrijfsomschrijving VZVZ is een pionier als het gaat om de gezondheidstechnologie en hebben de missie om een naadloze, veilige uitwisseling van medische gegevens mogelijk te maken. Zij streven ernaar om de branche te transformeren door innovatieve oplossingen te bieden die de kwaliteit van zorg verbeteren en levens redden. Functieomschrijving Bij VZVZ...