Big Data Open Source (Cloud) DBA

Voor de NS zoeken wij een senior Big Data Specialist voor een open source NoSQL (Hadoop) DBMS in de cloud (Azure). De opdracht Start opdracht ASAP Duur opdracht 6 maanden met optie op verlenging Uren per week minimaal 36 Locatie Utrecht Achtergrondinformatie voor de Senior Big Data Specialist Als Big Data Specialist (Operations) val je hi?rarchisch onder de Data & Analytics (D&A) afdeling van de NS Groep binnen de afdeling IT Concern Staven. De afdeling D&A voorziet Business Intelligence en Analytics voor heel NS. Als aanvulling op de bestaande Datawarehouse oplossingen zal D&A ook een Hadoop infrastuctuur in Microsoft Azure gaan aanbieden. Dagelijks verwerken we miljoenen gegevens zoals: planning en realisatie van de treinbewegingen, GPS en sensordata van de treinen, getoonde reisinformatie, check in check outs, financiele en HR gegevens, etc. De hoeveelheid data opslag loopt richting de 100 TB. Hiermee bedienen we enkele duizenden NS interne NS gebruikers van de operatie tot aan de directie. Je zult betrokken zijn bij de implementatie van de omgeving en het ondersteunen/opleiden van de NS beheerders. Naast de beheerders zul je veel samenwerken met de data scientist en data engineers, kortom we zoeken een echte teamplayer. De ontwikkeling binnen Big Data is continu en het vraagt dan ook om pioniers. Beheer van de Big Data cluster vraagt dan ook om continu aanpassen en ontwikkelen. Wat ga je doen als Senior Big Data Specialist? Verantwoordelijk voor de implementatie en beheer van de Hadoop infrastructuur in Microsoft Azure; Begeleiden van nieuwe Big Data beheerders of beheerders nieuw in Big Data; Configuratie, beheer en monitoring van Microsoft R Server, Nifi, Hive, PySpark / Spark2 en Jupyter Hub installaties inclusief toegang verlenen aan nieuwe gebruikers en het bijhouden van backups; Cluster onderhoud: bijhouden van logs, updates en patches uitvoeren, verwijderen en toevoegen nieuwe nodes; Onderhoud van Azure Blob Storage, Azure SQL databases en andere vormen van data opslag in de cloud; Installatie en configuratie van nieuwe resources en tools in de Azure omgeving; API management en samen met de data engineer APIs beschikbaar stellen en gebruiken; Contact onderhouden met leveranciers, o.a., Microsoft. Wat breng je mee als Senior Big Data Specialist? eisen - Minimaal 3 jaar ervaring als met Big Data beheer bij grote organisaties in een continu veranderende omgeving (conceptueel en hands-on) - Expert niveau ervaring met het beheren van een Hadoop cluster - Goede kennis van het beheer van Nifi en Jupyter Hub - Goede kennis van Linux beheer, configuratie en Bash shell scripting wensen - Goede kennis van Hive en RStudio Server; - Goede kennis van de configuratie van Azure tools o.a. Event Hubs en Azure SQL databases; - Goede kennis van Azure beheer tools o.a. Azure Security Center en Azure Resource Management. - Kennis van Azure API Management is een pr?; - Goede kennis van / ervaring met security in Azure o.a. Active Directory, Kerberos en Ranger - Optimalisatie van Spark jobs Toelichting op de eisen en wensen Bij niet voldoen aan 1 van de eisen, kan er geen definitieve offerte worden ingestuurd, er is sprake van een digitale en geautomatiseerde selectie. De wensen worden beoordeeld met een puntensysteem. Hoe meer punten hoe groter de kans op een interview. Aanbied-en gunningsproces Sluiting aanvraag 23 februari om 09.00 uur Selectie van de reacties door OptimaData op 23 februari Geselecteerde CV's/reacties worden gebeld door OptimaData 23 februari voor 11.00 uur Gezamenlijk definitieve offerte indienen op vrijdagmorgen 23 februari (Als je een voorstel indient, zorg dat je die vrijdagmorgen 23 februari alvast beschikbaar houd!) Deadline indienen offerte bij de NS 23 februari om 12.00 uur Interviews bij de NS vinden plaats tussen 26 februari en 2 maart. Reageren heb je interesse in deze opdracht bij de NS en deze opdracht samen met Multi-platform (open source) Database dienstverlener OptimaData aan te vliegen? Reageer dan met je CV in Word, uurtarief in euro's en een korte gerichte motivatie in het Nederlands, kortom een onderbouwd en niet te ontwijken voorstel! Let goed op de eisen in de vraag, wij kunnen zonder voldoen aan alle eisen NIET indienen, wees daarvan bewust. Bij twijfel, bel ons! Als wij je hebben geselecteerd gaan we je bellen en samen de definitieve aanbieding voorbereiden. Zo zullen we ook samen het eindtarief bepalen in volledige transparantie. Heb je vragen over deze opdracht of over OptimaData, aarzel niet en stuur een reactie via deze site.