Afstudeeropdracht in Data Engineering: From notebooks to applications
7 maanden geleden
Afstudeeropdracht in Data Engineering: From notebooks to applications
Python notebooks wordt veel gebruikt, maar heeft veel nadelen. Onderzoek tijdens deze opdracht aan de hand van best-practices hoe je met Python op Apache Spark ETL jobs kan maken. Het resultaat van deze opdracht gaat medebepalen of we afscheid gaan nemen van Python notebooks.
Benodigde interesse(s)
Data engineering Software ontwikkeling met Python DevOps Azure Cloud
Wat krijg je
Een uitdagende afstudeeropdracht Afstudeervergoeding: € 1000 bruto of € 500 bruto + leaseauto of € 600 bruto + woonruimte Professionele begeleiding Trainingen gericht op jouw afstudeertraject Sparren met andere afstudeerders en collega’s Twee vakantiedagen per maand
Wat je gaat doen
35% Afstudeeronderzoek 40% Analyseren, ontwerpen, realiseren 25% DocumentatieData engineers werken met verschillende tools om systemen te bouwen die ruwe data verzamelen, beheren en transformeren in bruikbare informatie. Databricks en Azure Synaps Analytics zijn voorbeelden van relatief nieuwe oplossingen die veel gebruikt worden in een cloud-based data platform. Development wordt binnen deze oplossingen gedaan met notebooks. Een notebook is een web-based interface voor een document met uitvoerbare code, visualisaties en documentatie. Het werken met notebooks biedt zeker voordelen. Lokale installaties zijn bijvoorbeeld overbodig, je kan documentatie en code mixen en je hebt built-in support voor visualisaties. Er zijn echter ook nadelen. Voorbeelden daarvan zijn:
Een cluster/compute is nodig om te kunnen ontwikkelen (startup time, kosten, etc.) Een cluster bevat modules welke lokaal niet te installeren zijn (code is dus enkel bruikbaar op één environment) Geen support voor debugging (print statements niet meegerekend) Geen linting Geen auto-formatting Geen support voor tests Slechte support voor monitoringKortom, het volledig toepassen van DevOps principes (automatisering, monitoring, testen, deployment) zoals dat kan bij een reguliere software applicatie is niet mogelijk wanneer enkel gewerkt wordt met notebooks.
De opdracht
Onderzoek hoe je op basis van best-practices met Python op Apache Spark ETL jobs kan maken, zodat we afscheid kunnen nemen van onze huidige werkwijze met Python notebooks. Denk hierbij aan oplossingen voor vragen als:
Hoe gaan we ETL jobs testen met unit-tests? Hoe gaan we om met deployment van jobs? Hoe kun je lokaal je job debuggen?Maak vervolgens op basis van een praktijkcase een Proof of Concept om te bewijzen dat de onderzochte concepten werken. Beschrijf tot slot de werkwijze en geef een advies hoe we onze bestaande notebooks kunnen omzetten naar jobs.
Wat biedt Info Support jou tijdens je afstudeerperiode?
Uiteraard bieden we je een uitstekend pakket aan afstudeervoorwaarden met verschillende keuzemogelijkheden. Denk hierbij aan:
Laptop, alle benodigde tools en ontwikkelomgevingen om je opdracht succesvol uit te kunnen voeren Een afstudeervergoeding waarbij je de keus hebt uit: € 1000,- bruto per maand€ 500,- bruto per maand + leaseauto met tankpas€ 600,- bruto per maand + woonruimte in VeenendaalTijdens je afstudeerstage word je opgenomen in een van onze business units. Zo krijg je direct een goed beeld van de ontwikkelingen binnen onze projecten.
Daarnaast biedt Info Support jou:
Een uitdagende afstudeeropdracht bij een solide, groeiend en financieel gezond bedrijf Professionele en ervaren begeleiding, hybride werken Een afstudeerprogramma met onder meer trainingen, kennisavonden, projectbezoek, activiteiten en team-, unit- en bedrijfsuitjes Experimenteren met nieuwe producten en releases die in de pre-releasefase zitten Sparren met andere afstudeerders en collegiale en gepassioneerde IT-collega’s Uitzicht op het mét een vast dienstverbandOver Info Support
Info Support is specialist in maatwerksoftware, data/AI solutions, beheer en trainingen en actief in de sectoren Finance, Industry, Agriculture, Food & Retail, Mobility & Public en Healthcare. Wij bieden solide en innovatieve oplossingen voor complexe en bedrijfkritische softwarevraagstukken. Onze hoofdkantoren zijn gevestigd in Veenendaal (NL) en Mechelen (BE). Op dit moment zijn er circa 500 medewerkers bij Info Support in dienst.
De werkwijze van Info Support kenmerkt zich door een aantal kernwaarden: soliditeit, integriteit, vakmanschap en passie. Deze kernwaarden zijn verweven in ons werk en de manier waarop we met elkaar omgaan. Ook dit jaar zijn we uitgeroepen tot Top Employer Nederland
Om te zorgen dat alle medewerkers altijd op de hoogte kunnen zijn van de nieuwste ontwikkelingen beschikt Info Support over een inhouse kenniscentrum waar graag wordt voldaan aan de honger naar meer of andere kennis en vaardigheden.
B2-taalvaardigheid in het Nederlands is vereist.
Procedures
1
Kennismakingsgesprek
Na je sollicitatie plannen we iets in en bespreken je (studie) loopbaan, interesses en ambities. We vertellen je over Info Support en jij kan al je vragen stellen.
2
Assessment
Gaan we verder? Dan doe je een assessment van je professionele kennis en persoonlijkheid (capaciteit, competenties en motieven).
3
Selectie interview
Vervolgens plannen we een selectie interview waarin we dieper ingaan op je professionele kennis en je persoonlijkheid.
4
De ondertekening van een contract
Verloopt alles positief dan ontvang je een contractaanbieding. Zijn we het eens? Dan starten we de pre-employment screening en nodigen we je uit voor de tekenmomenten.
Ontmoet Info Supporters
-
Veenendaal, Utrecht, Nederland Info Support VoltijdBeleef een uitdagende afstudeerperiode">We zoeken een gedreven student die ons kan helpen om onze werkprocessen te verbeteren en data engineering meer efficiënt te maken.Afkomstig van Python-notebooks willen we onze ontwikkelomgevingen moderniseren door ETL-jobs te maken met Apache Spark. Je zult onderzoek moeten doen naar de beste praktijken en deze...
-
Afstudeeropdracht in Data Analysis
1 maand geleden
Veenendaal, Utrecht, Nederland Info Support VoltijdAfstudeeropdracht in Data AnalysisBij Info Support ga je aan de slag met een afstudeeropdracht in Data Analysis waarbij je onderzoek doet naar de toepassing van AI-technieken in bedrijfsprocessen. Je onderzoekt hoe je AI-technieken kunt inzetten om een centraal overzicht te creëren van alle bedrijfsprocessen.Je taken:Afhandelen van een afstudeeropdracht in...
-
Afstudeeropdracht in Data Engineering: Virtuele labomgeving
7 maanden geleden
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht in Data Engineering: Virtuele labomgeving Bedrijven werken voortdurend aan nieuwe producten en diensten. En dat is logisch, consumenten willen steeds beter en meer. De introductie van nieuwe producten is echter erg kostbaar en risicovol. Creëer een omgeving waarin vrij geëxperimenteerd kan worden met nieuwe proposities,...
-
Afstudeeropdracht in Data en Kennisverwerking
3 weken geleden
Veenendaal, Utrecht, Nederland Info Support VoltijdBekijk deze afstudeeropdracht voor specialisten in DataWe zoeken een afstudeerder voor een interessante opdracht in Data en kennisverwerking. Het project bestaat uit het ontwikkelen van een geavanceerde automatiseringsoplossing voor het verwerken van documenten.Wat je gaat doen:Afstudeeronderzoek: 35%Analyseren, ontwerpen en realiseren: 40%Documentatie:...
-
Afstudeeropdracht in Data- en AI-aanpak
3 weken geleden
Veenendaal, Utrecht, Nederland Info Support VoltijdBen jij een ambitieuze afstudeerder met interesse in de ontwikkeling van data- en AI-aanpakken? Info Support biedt je de mogelijkheid om een uitdagende afstudeeropdracht te volgen waarbij je samenwerkt met onze expertise teams om innovatieve oplossingen te ontwikkelen.We zoeken naar iemand die enthousiast is over machine learning en geïnteresseerd is in het...
-
Veenendaal, Utrecht, Nederland Info Support VoltijdBekijk hier uw toekomstige carrièrekansen bij Info Support.SalariëringWij bieden u een interessante salarisschikking die zal worden berekend op basis van uw ervaring, locatie en niveau van de job. U kunt rekenen op een brutosalaris tussen € 40.000 - € 60.000 per jaar. Daarnaast ontvangt u ruimte voor extra bonussen en...
-
Veenendaal, Utrecht, Nederland Info Support VoltijdWerking bij Info Support">Voor Info Support zijn we op zoek naar een Data Engineer die onze klanten helpt met het ontwikkelen van betrouwbare dataoplossingen. Als Data Engineer ben je verantwoordelijk voor het analyseren, ontwerpen, realiseren en implementeren van dataoplossingen die gegevens inzichtelijk maken en waardevolle informatie...
-
Afstudeeropdracht in Data
7 maanden geleden
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht in Data & AI: Machine-learning gebruiken om synthetische feature data te genereren Synthetische data wordt gemaakt omdat klanten al wel aan de slag wil met machine learning modellen, maar nog niet voldoende data hebben. Ook voor unit-testen en integratietesten creëren we synthetische data. Door de vele handmatige stappen kost dit...
-
Veenendaal, Utrecht, Nederland Info Support VoltijdInfo Support biedt je de mogelijkheid om een opwindende afstudeeropdracht te doen in het domein van software development. Je wordt ingeschakeld om 'De EnergieGraaf' te ontwikkelen, een project dat gericht is op data-integratie en automatisering.
-
Afstudeeropdracht in Data
6 maanden geleden
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht in Data & AI: Automated exploratory data analysis with GPT-4 Ontdek hoe GPT-4 geautomatiseerde, gedetailleerde plannen kan genereren voor exploratory data analyses. Ontwikkel een prototype dat deze plannen omzet in actie, en bewijs dat AI de sleutel kan zijn tot efficiënte en kwalitatief hoogwaardige data-analyse. Benodigde...
-
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht in Data Engineering: Governance van een Enterprise Power BI oplossing Doordat steeds meer enterprise organisaties gebruik maken van Power BI kunnen problemen ontstaan met de governance. Maar welke governance is exact nodig om al die workspaces en rapportages binnen de perken te houden? En hoe realiseer je dit? Dit ga jij onderzoeken....
-
Afstudeeropdracht in Data en Concept Identificatie
3 weken geleden
Veenendaal, Utrecht, Nederland Info Support VoltijdOverzicht van de OpdrachtBij Info Support zijn we op zoek naar een Afstudeerder die ons bijstaat met het identificeren van concept-drift en data-drift in onze machine-learning modellen. Het doel van deze opdracht is om een effectieve manier te vinden om deze problemen vroegtijdig te detecteren en te voorkomen dat onze modellen falen in productie.Vereiste...
-
Afstandsonderzoek in Data
4 weken geleden
Veenendaal, Utrecht, Nederland Info Support VoltijdAfstudeer bij Info Support, een specialist in maatwerksoftware en data/AI-oplossingen, en werk aan een uitdagende afstudeeropdracht. Omgaan met reservesteunEen (web)app waarmee monteurs van klanten snel en eenvoudig het juiste reserveonderdeel kunnen bestellen door er een foto van te maken. De marktleider op het gebied van service en onderhoud aan...
-
Afstudeeropdracht in Data
6 maanden geleden
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht in Data & AI: Automatische reserveonderdeel herkenning Een (web)app waarmee monteurs van een klant van Info Support, ASSA ABLOY Entrance Systems, snel en eenvoudig het juiste reserveonderdeel kunnen bestellen door er een foto van te maken. Daar is bij de marktleider op het gebied van service en onderhoud aan automatische deuren heel...
-
Veenendaal, Utrecht, Nederland Info Support VoltijdAfstudeer bij Info SupportWe zoeken een enthousiaste student voor een afstudeeropdracht in Software Development. Als junior ontwikkelaar werk je aan een testframework voor een modern Azure data platform.Wat is de opdracht?Je onderzoekt welke mogelijkheden er zijn voor unit tests, integratietests en data quality tests binnen een CI/CD pipeline van een modern...
-
Data- en AI-specialist voor Automatische Data-analyse
4 weken geleden
Veenendaal, Utrecht, Nederland Info Support VoltijdMet onze afstudeeropdracht kun je jouw kennis in data & AI toepassen op een uitdagend project.SalarisWe bieden een salaris van € 1000 bruto per maand of € 500 bruto + leaseauto met tankpas, zodat jij jouw financiële doelen kunt bereiken.WerkgemeenschapBinnen Info Support werken wij aan innovatieve softwarevraagstukken voor klanten in sectoren als...
-
Afstudeeropdracht in Data
7 maanden geleden
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht in Data & AI: Efficiënte data entry: AI documentanalyse in actie Het handmatig verwerken van documenten is een tijdrovende en foutgevoelige klus, een uitdaging die veel organisaties hebben. Dit vraagt om een innovatieve aanpak. Bij het automatiseren en optimaliseren van deze processen speelt Machine learning een cruciale rol. Jij...
-
Veenendaal, Utrecht, Nederland Info Support VoltijdInfo Support, specialist in maatwerksoftware, data/AI-oplossingen en beheer, biedt een uitdagende afstudeeropdracht aan. Als software-ontwikkelaar werk je samen met onze ervaren teamleden aan het ontwikkelen van innovatieve oplossingen voor complexe softwarevraagstukken.
-
Veenendaal, Nederland Info Support VoltijdAfstudeeropdracht in Software Development: Test framework voor een modern Azure data platform Een zo volledig mogelijk testframework uitwerken voor een modern Azure data platform. Dat is je opdracht. Om te kunnen controleren of unit tests, integratietests en data quality tests echt werken. Benodigde interesse(s) Data & AI Azure Modern...
-
Data Wetenschapper: GPT-4 voor Automatische Data Analyse
4 weken geleden
Veenendaal, Utrecht, Nederland Info Support VoltijdAfstudeerproject">Ontdek de kracht van GPT-4 in het automatiseren van exploratory data analyses.Als Data Wetenschapper ga je aan de slag met een prototype dat op basis van een vraagomschrijving stappenplannen genereert voor complexe data-analyse taken. Je onderzoekt hoe deze plannen omgezet kunnen worden in actie, zodat AI essentieel wordt voor efficiënte...
