Afstudeeropdracht in Data Engineering: Data observability of data pipelines

1 maand geleden


Veenendaal, Nederland Info Support Voltijd

Afstudeeropdracht in Data Engineering: Data observability of data pipelines - the 'why' instead of just 'if'

Het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe je vervolgens aanbevelingen op basis van een bestaande data pipeline.

Benodigde interesse(s)

Data Engineering DataOps & DevOps CD/CI Azure Cloud

Wat krijg je

Een uitdagende afstudeeropdracht Afstudeervergoeding: € 1000 bruto of € 500 bruto + leaseauto of € 600 bruto + woonruimte Professionele begeleiding Trainingen gericht op jouw afstudeertraject Sparren met andere afstudeerders en collega’s Twee vakantiedagen per maand

Wat je gaat doen

35% Afstudeeronderzoek 40% Analyseren, ontwerpen, realiseren 25% Documentatie

Als je in Azure een datapipeline bouwt, krijg je daar ook meteen een stukje monitoring bij. Daarmee krijg je een melding zodra iets niet werkt in je pipeline, maar het is niet altijd duidelijk waarom het niet werkt.

Data Observability is het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dit moet de beheerder van de data in staat stellen problemen met data op te lossen, het liefst voordat de gebruiker dit constateert. Data Observability gaat om het reduceren van het aantal fouten.

De opdracht

In deze opdracht onderzoek je wat Data Observability is en onderzoek je hoe een Data Observability het beste ingericht kan worden. Denk hierbij aan o.a. architectuur, technische richtlijnen, benodigde metrics, etc. Op basis van je onderzoek doe je aanbevelingen voor het implementeren van Data Observability voor een reeds bestaande data pipeline.

Wat biedt Info Support jou tijdens je afstudeerperiode?

Uiteraard bieden we je een uitstekend pakket aan afstudeervoorwaarden met verschillende keuzemogelijkheden. Denk hierbij aan:

Laptop, alle benodigde tools en ontwikkelomgevingen om je opdracht succesvol uit te kunnen voeren Een afstudeervergoeding waarbij je de keus hebt uit: € 1000,- bruto per maand€ 500,- bruto per maand + leaseauto met tankpas€ 600,- bruto per maand + woonruimte in Veenendaal

Tijdens je afstudeerstage word je opgenomen in een van onze business units. Zo krijg je direct een goed beeld van de ontwikkelingen binnen onze projecten.

Daarnaast biedt Info Support jou:

Een uitdagende afstudeeropdracht bij een solide, groeiend en financieel gezond bedrijf Professionele en ervaren begeleiding, hybride werken Een afstudeerprogramma met onder meer trainingen, kennisavonden, projectbezoek, activiteiten en team-, unit- en bedrijfsuitjes Experimenteren met nieuwe producten en releases die in de pre-releasefase zitten Sparren met andere afstudeerders en collegiale en gepassioneerde IT-collega’s Uitzicht op het mét een vast dienstverband

Over Info Support

Info Support is specialist in maatwerksoftware, data/AI solutions, beheer en trainingen en actief in de sectoren Finance, Industry, Agriculture, Food & Retail, Mobility & Public en Healthcare. Wij bieden solide en innovatieve oplossingen voor complexe en bedrijfkritische softwarevraagstukken. Onze hoofdkantoren zijn gevestigd in Veenendaal (NL) en Mechelen (BE). Op dit moment zijn er circa 500 medewerkers bij Info Support in dienst.

De werkwijze van Info Support kenmerkt zich door een aantal kernwaarden: soliditeit, integriteit, vakmanschap en passie. Deze kernwaarden zijn verweven in ons werk en de manier waarop we met elkaar omgaan. Ook dit jaar zijn we uitgeroepen tot Top Employer Nederland

Om te zorgen dat alle medewerkers altijd op de hoogte kunnen zijn van de nieuwste ontwikkelingen beschikt Info Support over een inhouse kenniscentrum waar graag wordt voldaan aan de honger naar meer of andere kennis en vaardigheden.

B2-taalvaardigheid in het Nederlands is vereist.

Procedures

1

Kennismakingsgesprek

Na je sollicitatie plannen we iets in en bespreken je (studie) loopbaan, interesses en ambities. We vertellen je over Info Support en jij kan al je vragen stellen.

2

Assessment

Gaan we verder? Dan doe je een assessment van je professionele kennis en persoonlijkheid (capaciteit, competenties en motieven).

3

Selectie interview

Vervolgens plannen we een selectie interview waarin we dieper ingaan op je professionele kennis en je persoonlijkheid.

4

De ondertekening van een contract

Verloopt alles positief dan ontvang je een contractaanbieding. Zijn we het eens? Dan starten we de pre-employment screening en nodigen we je uit voor de tekenmomenten.

Ontmoet Info Supporters



  • Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht in Data Engineering: Data observability of data pipelines - the 'why' instead of just 'if' Het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe...


  • Veenendaal, Nederland Info Support Nederland Voltijd

    Het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe je vervolgens aanbevelingen op basis van een bestaande data pipeline. Benodigde interesse(s) Data Engineering DataOps &...


  • Veenendaal, Nederland Info Support Nederland Voltijd

    Het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe je vervolgens aanbevelingen op basis van een bestaande data pipeline. Benodigde interesse(s) Data Engineering DataOps &...


  • Veenendaal, Nederland Info Support Nederland Voltijd

    In een dynamisch datalandschap onderzoek je in deze afstudeeropdracht welke software-engineeringpractices uit de softwareontwikkeling toegepast kunnen worden op moderne dataplatforms. Je verkent en implementeert strategieën die de potentie hebben om Python-gebaseerde ETL-pipelines te versterken. Een kans voor toekomstige data-engineers om te leren, te...


  • Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht: Software Engineering Practices in een Modern Data Platform In een dynamisch datalandschap onderzoek je in deze afstudeeropdracht welke software-engineeringpractices uit de softwareontwikkeling toegepast kunnen worden op moderne dataplatforms. Je verkent en implementeert strategieën die de potentie hebben om Python-gebaseerde...


  • Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...


  • Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht in Data Engineering: Testdata genereren met behulp van AI Een goede set testdata. Een heel belangrijk onderdeel als je als data engineer werkt. Zodat je wat je hebt gebouwd, buiten productie, goed kan testen. Productie data gebruiken is uiteraard niet mogelijk. Maar zou je AI kunnen inzetten voor het selecteren/genereren van edge...


  • Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we...


  • Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...

  • Afstudeeropdracht in Data

    1 maand geleden


    Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht in Data & AI: Genereer ETL pipelines op basis van een specificatie met behulp van GPT-4 Met de opkomst van AI in codeontwikkeling verbeteren tools zoals GitHub en Copilot de productiviteit aanzienlijk. Dit roept de vraag op: kunnen we nóg efficiënter werken? Het ontwikkelen van ETL pipelines kost veel tijd en toont veel...


  • Veenendaal, Nederland Info Support Nederland Voltijd

    In een modern cloud data platform, worden soms grote hoeveelheden data geladen, getransformeerd en gedistribueerd. Dit gebeurt over diverse soorten data stores, waaronder relationele databases, maar ook ongestructureerde stores zoals data lakes of document databases. In de data pipelines die worden gebouwd binnen zo’n platform, worden steeds meer...


  • Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht in Data Engineering: CI/CD binnen een Managed Dataplatform Het MCPS Managed Dataplatform bevat alle benodigde resources uit de Azure Data Platform Stack om klanten zelf hun eigen oplossingen te kunnen laten realiseren. Alleen het maken van CI/CD pipelines om gebouwde programmatuur naar productie te brengen moet de klant zelf...

  • Data Engineer

    1 maand geleden


    Veenendaal, Nederland Info Support Nederland Voltijd

    Als Data Engineer bij Info Support werk je samen in een multidisciplinair team om de beste oplossingen te creëren voor de klant. Je houdt je bezig met het ontwerpen, bouwen en onderhouden van data pipelines en gaat aan de slag met de nieuwste technologieën zoals Azure, Databricks en Power BI. Zo draag je bij aan aan de ontwikkeling van innovatieve...


  • Veenendaal, Nederland Info Support Nederland Voltijd

    Een goede set testdata. Een heel belangrijk onderdeel als je als data engineer werkt. Zodat je wat je hebt gebouwd, buiten productie, goed kan testen. Productie data gebruiken is uiteraard niet mogelijk. Maar zou je AI kunnen inzetten voor het selecteren/genereren van edge cases. Dat ga jij tijdens deze opdracht uitzoeken. Benodigde interesse(s) Testen ...

  • Afstudeeropdracht in Data

    4 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...


  • Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht in Data Engineering: Virtuele labomgeving Bedrijven werken voortdurend aan nieuwe producten en diensten. En dat is logisch, consumenten willen steeds beter en meer. De introductie van nieuwe producten is echter erg kostbaar en risicovol. Creëer een omgeving waarin vrij geëxperimenteerd kan worden met nieuwe proposities,...

  • Medior Data Engineer

    4 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Medior Data Engineer Met jouw data-oplossingen de klant in staat stellen om sneller te innoveren en betere beslissingen te nemen. Dat is wat je wil. Data-oplossingen voor een bierbrouwer van wereldformaat of een machinefabrikant voor het sorteren, verpakken en verwerken van eieren. Met data maak jij het verschil. Je wil jezelf blijven ontwikkelen in...

  • Afstudeeropdracht in Data

    1 maand geleden


    Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht in Data & AI: Machine-learning gebruiken om synthetische feature data te genereren Synthetische data wordt gemaakt omdat klanten al wel aan de slag wil met machine learning modellen, maar nog niet voldoende data hebben. Ook voor unit-testen en integratietesten creëren we synthetische data. Door de vele handmatige stappen kost dit...

  • Data Engineer

    4 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Data Engineer Werken met honderden terabytes data voor Top 500 klanten. Verbanden leggen, analyseren. En vervolgens eindrapportages maken. Om management of financiële directeuren te adviseren. Alles met als doel om klanten vooruit te helpen. Wat is vereist Bachelor/master in Informatica of Bedrijfskundige Informatica Een brede interesse...

  • Data Engineer

    1 maand geleden


    Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...