Data Engineering: Data observability of data pipelines
3 weken geleden
Het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe je vervolgens aanbevelingen op basis van een bestaande data pipeline.
Benodigde interesse(s)- Data Engineering
- DataOps & DevOps
- CD/CI
- Azure Cloud
- Een uitdagende afstudeeropdracht
- Afstudeervergoeding: € 1000 bruto of € 500 bruto + leaseauto of € 600 bruto + woonruimte
- Professionele begeleiding
- Trainingen gericht op jouw afstudeertraject
- Sparren met andere afstudeerders en collega’s
- Twee vakantiedagen per maand
- 35% Afstudeeronderzoek
- 40% Analyseren, ontwerpen, realiseren
- 25% Documentatie
Als je in Azure een datapipeline bouwt, krijg je daar ook meteen een stukje monitoring bij. Daarmee krijg je een melding zodra iets niet werkt in je pipeline, maar het is niet altijd duidelijk waarom het niet werkt.
Data Observability is het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dit moet de beheerder van de data in staat stellen problemen met data op te lossen, het liefst voordat de gebruiker dit constateert. Data Observability gaat om het reduceren van het aantal fouten.
De opdrachtIn deze opdracht onderzoek je wat Data Observability is en onderzoek je hoe een Data Observability het beste ingericht kan worden. Denk hierbij aan o.a. architectuur, technische richtlijnen, benodigde metrics, etc. Op basis van je onderzoek doe je aanbevelingen voor het implementeren van Data Observability voor een reeds bestaande data pipeline.
Wat biedt Info Support jou tijdens je afstudeerperiode?Uiteraard bieden we je een uitstekend pakket aan afstudeervoorwaarden met verschillende keuzemogelijkheden. Denk hierbij aan:
- Laptop, alle benodigde tools en ontwikkelomgevingen om je opdracht succesvol uit te kunnen voeren
- Een afstudeervergoeding waarbij je de keus hebt uit:
- € 1000,- bruto per maand
- € 500,- bruto per maand + leaseauto met tankpas
- € 600,- bruto per maand + woonruimte in Veenendaal
Tijdens je afstudeerstage word je opgenomen in een van onze business units. Zo krijg je direct een goed beeld van de ontwikkelingen binnen onze projecten.
Daarnaast biedt Info Support jou:
- Een uitdagende afstudeeropdracht bij een solide, groeiend en financieel gezond bedrijf
- Professionele en ervaren begeleiding, hybride werken
- Een afstudeerprogramma met onder meer trainingen, kennisavonden, projectbezoek, activiteiten en team-, unit- en bedrijfsuitjes
- Experimenteren met nieuwe producten en releases die in de pre-releasefase zitten
- Sparren met andere afstudeerders en collegiale en gepassioneerde IT-collega’s
- Uitzicht op het IT Top Traineeship mét een vast dienstverband
Over Info Support
Info Support is specialist in maatwerksoftware, data/AI solutions, beheer en trainingen en actief in de sectoren Finance, Industry, Agriculture, Food & Retail, Mobility & Public en Healthcare. Wij bieden solide en innovatieve oplossingen voor complexe en bedrijfkritische softwarevraagstukken. Onze hoofdkantoren zijn gevestigd in Veenendaal (NL) en Mechelen (BE). Op dit moment zijn er circa 500 medewerkers bij Info Support in dienst.
De werkwijze van Info Support kenmerkt zich door een aantal kernwaarden: soliditeit, integriteit, vakmanschap en passie. Deze kernwaarden zijn verweven in ons werk en de manier waarop we met elkaar omgaan. Ook dit jaar zijn we uitgeroepen tot Top Employer Nederland
Om te zorgen dat alle medewerkers altijd op de hoogte kunnen zijn van de nieuwste ontwikkelingen beschikt Info Support over een inhouse kenniscentrum waar graag wordt voldaan aan de honger naar meer of andere kennis en vaardigheden.
#J-18808-Ljbffr-
Data Engineering: Data observability of data pipelines
Gevonden in: beBee S NL - 3 weken geleden
Veenendaal, Nederland Info Support Nederland VoltijdHet vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe je vervolgens aanbevelingen op basis van een bestaande data pipeline. Benodigde interesse(s) Data Engineering DataOps &...
-
Afstudeeropdracht in Data Engineering: Data observability of data pipelines
Gevonden in: Talent NL C2 - 3 weken geleden
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht in Data Engineering: Data observability of data pipelines - the 'why' instead of just 'if' Het vermogen om de kwaliteit van gegevens in het systeem te meten op basis van gegevens die het systeem genereert. Dat is Data Observability. In deze opdracht ga je onderzoeken hoe je een Data Observability het beste inricht en doe je...
-
Data Engineer
Gevonden in: beBee S NL - 3 weken geleden
Veenendaal, Nederland Info Support Nederland VoltijdAls Data Engineer bij Info Support werk je samen in een multidisciplinair team om de beste oplossingen te creëren voor de klant. Je houdt je bezig met het ontwerpen, bouwen en onderhouden van data pipelines en gaat aan de slag met de nieuwste technologieën zoals Azure, Databricks en Power BI. Zo draag je bij aan aan de ontwikkeling van innovatieve...
-
Medior Data Engineer
Gevonden in: Talent NL C2 - 2 weken geleden
Veenendaal, Nederland Info Support VoltijdMedior Data Engineer Met jouw data-oplossingen de klant in staat stellen om sneller te innoveren en betere beslissingen te nemen. Dat is wat je wil. Data-oplossingen voor een bierbrouwer van wereldformaat of een machinefabrikant voor het sorteren, verpakken en verwerken van eieren. Met data maak jij het verschil. Je wil jezelf blijven ontwikkelen in...
-
Data Engineer
Gevonden in: Talent NL C2 - 2 weken geleden
Veenendaal, Nederland Info Support VoltijdData Engineer Werken met honderden terabytes data voor Top 500 klanten. Verbanden leggen, analyseren. En vervolgens eindrapportages maken. Om management of financiële directeuren te adviseren. Alles met als doel om klanten vooruit te helpen. Wat is vereist Bachelor/master in Informatica of Bedrijfskundige Informatica Een brede interesse...
-
Data Engineer
Gevonden in: Talent NL C2 - 3 weken geleden
Veenendaal, Nederland Info Support VoltijdMaatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...
-
Afstudeeropdracht: Software Engineering Practices in een Modern Data Platform
Gevonden in: beBee S NL - 2 weken geleden
Veenendaal, Nederland Info Support Nederland VoltijdIn een dynamisch datalandschap onderzoek je in deze afstudeeropdracht welke software-engineeringpractices uit de softwareontwikkeling toegepast kunnen worden op moderne dataplatforms. Je verkent en implementeert strategieën die de potentie hebben om Python-gebaseerde ETL-pipelines te versterken. Een kans voor toekomstige data-engineers om te leren, te...
-
Afstudeeropdracht: Software Engineering Practices in een Modern Data Platform
Gevonden in: Talent NL C2 - 3 weken geleden
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht: Software Engineering Practices in een Modern Data Platform In een dynamisch datalandschap onderzoek je in deze afstudeeropdracht welke software-engineeringpractices uit de softwareontwikkeling toegepast kunnen worden op moderne dataplatforms. Je verkent en implementeert strategieën die de potentie hebben om Python-gebaseerde...
-
Afstudeeropdracht: Software Engineering Practices in een Modern Data Platform
Gevonden in: Talent NL C2 - 2 weken geleden
Veenendaal, Nederland Info Support VoltijdMaatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...
-
Data Scientist
Gevonden in: beBee S NL - 3 weken geleden
Veenendaal, Nederland Inpact Solutions VoltijdAlleen kom je ver, samen kom je verder. Dat is precies de reden waarom de labels AWI, DDi, Differ Solutions en Infofolio zijn samengekomen in Inpact. Inpact, met de ‘n’ van insurance, want onze vier labels zijn leiders als het over geautomatiseerde verzekeringsprocessen, data en software gaat. We zijn een hechte club van specialisten met een enorme...
-
Afstudeeropdracht: Test framework voor een modern Azure data platform
Gevonden in: beBee S NL - 3 weken geleden
Veenendaal, Nederland Info Support Nederland VoltijdIn een modern cloud data platform, worden soms grote hoeveelheden data geladen, getransformeerd en gedistribueerd. Dit gebeurt over diverse soorten data stores, waaronder relationele databases, maar ook ongestructureerde stores zoals data lakes of document databases. In de data pipelines die worden gebouwd binnen zo’n platform, worden steeds meer...
-
Data Engineering: Testdata genereren met behulp van AI
3 weken geleden
Veenendaal, Nederland Info Support Nederland VoltijdEen goede set testdata. Een heel belangrijk onderdeel als je als data engineer werkt. Zodat je wat je hebt gebouwd, buiten productie, goed kan testen. Productie data gebruiken is uiteraard niet mogelijk. Maar zou je AI kunnen inzetten voor het selecteren/genereren van edge cases. Dat ga jij tijdens deze opdracht uitzoeken. Benodigde interesse(s) Testen ...
-
Afstudeeropdracht in Data
Gevonden in: Talent NL C2 - 2 weken geleden
Veenendaal, Nederland Info Support VoltijdMaatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...
-
Afstudeeropdracht in Data
Gevonden in: Talent NL C2 - 3 weken geleden
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht in Data & AI: Genereer ETL pipelines op basis van een specificatie met behulp van GPT-4 Met de opkomst van AI in codeontwikkeling verbeteren tools zoals GitHub en Copilot de productiviteit aanzienlijk. Dit roept de vraag op: kunnen we nóg efficiënter werken? Het ontwikkelen van ETL pipelines kost veel tijd en toont veel...
-
Engineer Data Solutions Managed Services
Gevonden in: Talent NL C2 - 3 weken geleden
Veenendaal, Nederland Info Support VoltijdMaatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...
-
Data Architect
Gevonden in: Talent NL C2 - 2 weken geleden
Veenendaal, Nederland Info Support VoltijdData Architect Ben jij klaar om als Data Architect écht het verschil te maken? Bij Info Support ontdek je niet alleen de volgende stap in je carrière, maar ook een gepassioneerde Data Community die je omringt met gelijkgestemde experts. Een stimulerende omgeving van voortdurende groei, kennisdeling en ontwikkeling, waar jouw liefde voor data wordt...
-
Engineer Data Solutions Managed Services
Gevonden in: Talent NL C2 - 3 weken geleden
Veenendaal, Nederland Info Support VoltijdEngineer Data Solutions Managed Services Welke informatiebehoefte heeft de klant? Welke specifieke wensen, behoeften en doelen? Jij zorgt als engineer data solutions dat alle informatie voor het data platform duidelijk is. Samen met je team en voor verschillende opdrachtgevers. Vervolgens zorg je dat de data uit de bronsystemen wordt omgezet in...
-
Data Analist
3 dagen geleden
Veenendaal, Nederland Capturum Software Group Voltijd**Functieomschrijving**: Als Data Analist bij D’atalier houd je je bezig met het verzamelen, organiseren en analyseren van gegevens om waardevolle inzichten te genereren voor diverse klanten. Je vindt het leuk om mee te denken in processen en out-of-the-box data oplossingen te bedenken. Je gebruikt verschillende technieken om tot de beste data oplossing...
-
Afstudeeropdracht in Data Engineering: Testdata genereren met behulp van AI
Gevonden in: Talent NL C2 - 3 weken geleden
Veenendaal, Nederland Info Support VoltijdMaatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we klanten en de wereld...
-
Veenendaal, Nederland Info Support VoltijdMaatwerksoftware Maatwerksoftware bouwen waar miljoenen mensen dagelijks gebruik van maken. Dat is ons werk. Voor grote gerenommeerde klanten in Nederland en België. Betrouwbaar, schaalbaar en onderhoudbaar. Wij gaan voor software oplossingen van zeer hoge kwaliteit. Binnen de afgesproken tijd en het budget. Door samen continu te vernieuwen helpen we...