Data Engineering: Data observability of data pipelines

Gevonden in: beBee S NL - 3 weken geleden


Veenendaal, Nederland Info Support Nederland Voltijd

Het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe je vervolgens aanbevelingen op basis van een bestaande data pipeline. Benodigde interesse(s)

Data Engineering DataOps & DevOps CD/CI Azure Cloud Wat krijg je Een uitdagende afstudeeropdracht Afstudeervergoeding: € 1000 bruto of € 500 bruto + leaseauto of € 600 bruto + woonruimte Professionele begeleiding Trainingen gericht op jouw afstudeertraject Sparren met andere afstudeerders en collega’s Twee vakantiedagen per maand Wat je gaat doen 35% Afstudeeronderzoek 40% Analyseren, ontwerpen, realiseren 25% Documentatie

Als je in Azure een datapipeline bouwt, krijg je daar ook meteen een stukje monitoring bij. Daarmee krijg je een melding zodra iets niet werkt in je pipeline, maar het is niet altijd duidelijk waarom het niet werkt.

Data Observability is het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dit moet de beheerder van de data in staat stellen problemen met data op te lossen, het liefst voordat de gebruiker dit constateert. Data Observability gaat om het reduceren van het aantal fouten. De opdracht

In deze opdracht onderzoek je wat Data Observability is en onderzoek je hoe een Data Observability het beste ingericht kan worden. Denk hierbij aan o.a. architectuur, technische richtlijnen, benodigde metrics, etc. Op basis van je onderzoek doe je aanbevelingen voor het implementeren van Data Observability voor een reeds bestaande data pipeline. Wat biedt Info Support jou tijdens je afstudeerperiode?

Uiteraard bieden we je een uitstekend pakket aan afstudeervoorwaarden met verschillende keuzemogelijkheden. Denk hierbij aan:

Laptop, alle benodigde tools en ontwikkelomgevingen om je opdracht succesvol uit te kunnen voeren Een afstudeervergoeding waarbij je de keus hebt uit: € 1000,- bruto per maand € 500,- bruto per maand + leaseauto met tankpas € 600,- bruto per maand + woonruimte in Veenendaal

Tijdens je afstudeerstage word je opgenomen in een van onze business units. Zo krijg je direct een goed beeld van de ontwikkelingen binnen onze projecten.

Daarnaast biedt Info Support jou:

Een uitdagende afstudeeropdracht bij een solide, groeiend en financieel gezond bedrijf Professionele en ervaren begeleiding, hybride werken Een afstudeerprogramma met onder meer trainingen, kennisavonden, projectbezoek, activiteiten en team-, unit- en bedrijfsuitjes Experimenteren met nieuwe producten en releases die in de pre-releasefase zitten Sparren met andere afstudeerders en collegiale en gepassioneerde IT-collega’s Uitzicht op het IT Top Traineeship mét een vast dienstverband

Over Info Support

Info Support is specialist in maatwerksoftware, data/AI solutions, beheer en trainingen en actief in de sectoren Finance, Industry, Agriculture, Food & Retail, Mobility & Public en Healthcare. Wij bieden solide en innovatieve oplossingen voor complexe en bedrijfkritische softwarevraagstukken. Onze hoofdkantoren zijn gevestigd in Veenendaal (NL) en Mechelen (BE). Op dit moment zijn er circa 500 medewerkers bij Info Support in dienst.

De werkwijze van Info Support kenmerkt zich door een aantal kernwaarden: soliditeit, integriteit, vakmanschap en passie. Deze kernwaarden zijn verweven in ons werk en de manier waarop we met elkaar omgaan. Ook dit jaar zijn we uitgeroepen tot Top Employer Nederland

Om te zorgen dat alle medewerkers altijd op de hoogte kunnen zijn van de nieuwste ontwikkelingen beschikt Info Support over een inhouse kenniscentrum waar graag wordt voldaan aan de honger naar meer of andere kennis en vaardigheden.



  • Veenendaal, Nederland Info Support Nederland Voltijd

    Het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe je vervolgens aanbevelingen op basis van een bestaande data pipeline. Benodigde interesse(s) Data Engineering DataOps &...


  • Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht in Data Engineering: Data observability of data pipelines - the 'why' instead of just 'if' Het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe je...

  • Data Engineer

    Gevonden in: beBee S NL - 3 weken geleden


    Veenendaal, Nederland Info Support Nederland Voltijd

    Als Data Engineer bij Info Support werk je samen in een multidisciplinair team om de beste oplossingen te creëren voor de klant. Je houdt je bezig met het ontwerpen, bouwen en onderhouden van data pipelines en gaat aan de slag met de nieuwste technologieën zoals Azure, Databricks en Power BI. Zo draag je bij aan aan de ontwikkeling van innovatieve...

  • Medior Data Engineer

    Gevonden in: Talent NL C2 - 2 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Medior Data Engineer Met jouw data-oplossingen de klant in staat stellen om sneller te innoveren en betere beslissingen te nemen. Dat is wat je wil. Data-oplossingen voor een bierbrouwer van wereldformaat of een machinefabrikant voor het sorteren, verpakken en verwerken van eieren. Met data maak jij het verschil. Je wil jezelf blijven ontwikkelen in...

  • Data Engineer

    Gevonden in: Talent NL C2 - 2 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Data Engineer Werken met honderden terabytes data voor Top 500 klanten. Verbanden leggen, analyseren. En vervolgens eindrapportages maken. Om management of financiële directeuren te adviseren. Alles met als doel om klanten vooruit te helpen. Wat is vereist Bachelor/master in Informatica of Bedrijfskundige Informatica Een brede interesse...

  • Data Engineer

    Gevonden in: Talent NL C2 - 3 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...


  • Veenendaal, Nederland Info Support Nederland Voltijd

    In een dynamisch datalandschap onderzoek je in deze afstudeeropdracht welke software-engineeringpractices uit de softwareontwikkeling toegepast kunnen worden op moderne dataplatforms. Je verkent en implementeert strategieën die de potentie hebben om Python-gebaseerde ETL-pipelines te versterken. Een kans voor toekomstige data-engineers om te leren, te...


  • Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht: Software Engineering Practices in een Modern Data Platform In een dynamisch datalandschap onderzoek je in deze afstudeeropdracht welke software-engineeringpractices uit de softwareontwikkeling toegepast kunnen worden op moderne dataplatforms. Je verkent en implementeert strategieën die de potentie hebben om Python-gebaseerde...


  • Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...

  • Data Scientist

    Gevonden in: beBee S NL - 3 weken geleden


    Veenendaal, Nederland Inpact Solutions Voltijd

    Alleen kom je ver, samen kom je verder. Dat is precies de reden waarom de labels AWI, DDi, Differ Solutions en Infofolio zijn samengekomen in Inpact. Inpact, met de ‘n’ van insurance, want onze vier labels zijn leiders als het over geautomatiseerde verzekeringsprocessen, data en software gaat. We zijn een hechte club van specialisten met een enorme...


  • Veenendaal, Nederland Info Support Nederland Voltijd

    Een goede set testdata. Een heel belangrijk onderdeel als je als data engineer werkt. Zodat je wat je hebt gebouwd, buiten productie, goed kan testen. Productie data gebruiken is uiteraard niet mogelijk. Maar zou je AI kunnen inzetten voor het selecteren/genereren van edge cases. Dat ga jij tijdens deze opdracht uitzoeken. Benodigde interesse(s) Testen ...


  • Veenendaal, Nederland Info Support Nederland Voltijd

    In een modern cloud data platform, worden soms grote hoeveelheden data geladen, getransformeerd en gedistribueerd. Dit gebeurt over diverse soorten data stores, waaronder relationele databases, maar ook ongestructureerde stores zoals data lakes of document databases. In de data pipelines die worden gebouwd binnen zo’n platform, worden steeds meer...

  • Afstudeeropdracht in Data

    Gevonden in: Talent NL C2 - 2 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...

  • Afstudeeropdracht in Data

    Gevonden in: Talent NL C2 - 3 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Afstudeeropdracht in Data & AI: Genereer ETL pipelines op basis van een specificatie met behulp van GPT-4 Met de opkomst van AI in codeontwikkeling verbeteren tools zoals GitHub en Copilot de productiviteit aanzienlijk. Dit roept de vraag op: kunnen we nóg efficiënter werken? Het ontwikkelen van ETL pipelines kost veel tijd en toont veel...

  • Engineer Data Solutions Managed Services

    Gevonden in: Talent NL C2 - 3 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...

  • Engineer Data Solutions Managed Services

    Gevonden in: Talent NL C2 - 3 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Engineer Data Solutions Managed Services Welke informatiebehoefte heeft de klant? Welke specifieke wensen, behoeften en doelen? Jij zorgt als engineer data solutions dat alle informatie voor het data platform duidelijk is. Samen met je team en voor verschillende opdrachtgevers. Vervolgens zorg je dat de data uit de bronsystemen wordt omgezet in...

  • Data Architect

    Gevonden in: Talent NL C2 - 2 weken geleden


    Veenendaal, Nederland Info Support Voltijd

    Data Architect Ben jij klaar om als Data Architect écht het verschil te maken? Bij Info Support ontdek je niet alleen de volgende stap in je carrière, maar ook een gepassioneerde Data Community die je omringt met gelijkgestemde experts. Een stimulerende omgeving van voortdurende groei, kennisdeling en ontwikkeling, waar jouw liefde voor data wordt...

  • Data Analist

    2 dagen geleden


    Veenendaal, Nederland Capturum Software Group Voltijd

    **Functieomschrijving**: Als Data Analist bij D’atalier houd je je bezig met het verzamelen, organiseren en analyseren van gegevens om waardevolle inzichten te genereren voor diverse klanten. Je vindt het leuk om mee te denken in processen en out-of-the-box data oplossingen te bedenken. Je gebruikt verschillende technieken om tot de beste data oplossing...


  • Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...


  • Veenendaal, Nederland Info Support Voltijd

    Maatwerksoftware Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we...