In één oogopslag
- Taken: Ontwerp en bouw betrouwbare data pipelines voor klantgegevens in de retail.
- Bedrijf: Vooruitstrevend retailbedrijf dat zich richt op dataconsolidatie.
- Voordelen: Competitief salaris, flexibele werkuren en mogelijkheden voor professionele groei.
- Overige informatie: Dynamische omgeving met kansen voor mentoring en samenwerking.
- Waarom deze baan: Werk met geavanceerde technologieën en maak impact op klantgedrag en bedrijfsresultaten.
- Kwalificaties: Ervaring met Databricks, Apache Spark en sterke vaardigheden in Python en SQL.
Het verwachte salaris ligt tussen 61650 - 75350 € per jaar.
Achtergrond
We zijn op zoek naar een Junior en Senior Data Engineer voor onze retailklant om te werken aan een fundamenteel klantgegevensproduct dat verkoop- en betalingsgegevens uit meerdere bronsystemen consolideert en harmoniseert. Het dekt de levenscyclus van verkooptransacties van de eerste betalingspoging tot de ordercreatie en overdracht aan het fulfilmentsysteem.
Het product integreert online en in-store verkopen, betalingen en cadeaubontransacties in een consistente en toegankelijke gegevensbron. Het stelt analisten en andere gegevensgebruikers in staat om klantgedrag te begrijpen, de bedrijfsvoering te monitoren en analytische producten te ontwikkelen zonder onnodig veel tijd te besteden aan het vinden, combineren en opschonen van gegevens.
Gebouwd volgens data-mesh principes, ondersteunt het product domeingestuurde eigendom en gefedereerd bestuur. Het product richt zich op gegevensnauwkeurigheid, consistentie, toegankelijkheid en bruikbaarheid, en biedt betrouwbare, klaar-voor-consumptie gegevens via BigQuery. Het ondersteunt ook de bredere moderniseringsreis door geharmoniseerde verkoop- en betalingsgegevens te bieden aan analytische producten en zakelijke teams.
Opdracht
De consultant zal zich bij het team voegen als Senior Data Engineer en bijdragen aan het ontwerp, de ontwikkeling en de werking van een fundamenteel gegevensproduct dat klantverkoop-, betalings-, order- en cadeaubontransactiegegevens consolideert en harmoniseert.
De opdracht omvat het bouwen van betrouwbare batch-, streaming- en near-real-time gegevenspijplijnen; het ontwikkelen van herbruikbare datamodellen; het verbeteren van gegevenskwaliteit, monitoring en veerkracht; en het ondersteunen van de veilige en toegankelijke levering van betrouwbare gegevens aan analisten en andere gebruikers.
Als senior teamlid zal de consultant helpen bij het begeleiden van architecturale beslissingen en het versterken van engineeringpraktijken. De consultant zal praktische expertise in Databricks en lakehouse meebrengen, inclusief Apache Spark, Delta Lake, Unity Catalog en Structured Streaming, terwijl hij werkt met en ondersteuning biedt aan de huidige GCP-gebaseerde technologie-stack.
Dagelijkse taken
- Ontwerpen, bouwen, testen en bedienen van batch-, streaming- en near-real-time gegevenspijplijnen.
- Ingestie en harmonisatie van verkoop-, betalings-, order- en cadeaubongegevens uit meerdere bronsystemen.
- Ontwikkelen van transformaties en productie datamodellen met behulp van SQL, Python, BigQuery en dbt.
- Toepassen van Databricks en Spark ervaring op schaalbare verwerking, streaming, governance en lakehouse-gerelateerde ontwerpeisen.
- Implementeren van validatie, reconciliatie, monitoring en geautomatiseerde gegevenskwaliteitscontroles.
- Bouwen van veerkrachtige verwerking met foutafhandeling, herstelmechanismen en dead-letter queues.
- Monitoren van gegevensversheid, pijplijnbetrouwbaarheid, prestaties en afgesproken serviceniveaus.
- Beschermen van gevoelige en persoonlijk identificeerbare informatie door middel van veilige gegevensmodellering en toegangscontroles.
- Bijdragen aan geautomatiseerd testen, CI/CD, codebeoordelingen en infrastructuurautomatisering.
- Verbeteren van metadata, afstamming, documentatie en de ervaring van gegevensgebruikers.
- Mentoren van collega's en samenwerken met bronteams, analisten, productcollega's, privacy-specialisten en beveiligingsstakeholders.
Vereisten
- Senior-niveau ervaring met het ontwerpen, bouwen en bedienen van productiegegevensplatforms en bedrijfskritische gegevensproducten.
- Sterke hands-on Databricks ervaring, inclusief Apache Spark, Delta Lake, Unity Catalog, Structured Streaming, Databricks Workflows en lakehouse-architectuur.
- Sterke Python en geavanceerde SQL-vaardigheden.
- Ervaring met gedistribueerde gegevensverwerking en schaalbare batch- en streamingpijplijnen.
- Sterke gegevensmodellering vaardigheden en ervaring met het ontwikkelen van betrouwbare, herbruikbare productie datamodellen.
- Ervaring met gegevenskwaliteitsvalidatie, reconciliatie, monitoring en waarschuwingen.
- Kennis van event-driven architectuur, change data capture, schema-evolutie en veerkrachtige foutafhandelingspatronen.
- Ervaring met Git, geautomatiseerd testen, CI/CD en moderne software-engineering praktijken.
- Kennis van gegevensbeveiliging, IAM, privacy, PII-afhandeling, metadata en gegevensafstamming.
- Sterke communicatieve vaardigheden en het vermogen om architecturale beslissingen te begeleiden, collega's te mentoren en samen te werken met technische en zakelijke stakeholders.
Gewenst
- Ervaring met GCP, met name BigQuery, Dataflow, Pub/Sub, Cloud Run en Cloud Storage.
- Ervaring met dbt, Apache Beam, Terraform en GitHub Actions.
- Ervaring met werken met verkoop-, betalings-, order- of andere hoog-volume transactionele gegevens.
- Begrip van data-mesh principes, domeineigendom en gefedereerd bestuur.
- Ervaring in een productgerichte Agile of DevOps omgeving.
Top 3 Prioriteiten
- Uitgebreide hands-on Databricks expertise, met name Apache Spark, Delta Lake, Unity Catalog, Structured Streaming en lakehouse-architectuur.
- Senior-niveau ervaring met het ontwerpen en bedienen van betrouwbare, schaalbare batch- en streaminggegevenspijplijnen voor bedrijfskritische transactionele gegevens.
- Sterk technisch leiderschap, inclusief architecturale besluitvorming, mentoring en duidelijke samenwerking met technische en zakelijke stakeholders.
Jr. and Sr. Data Engineer retail in Amsterdam werkgever: Huxley
Als HR Business Partner bij deze internationale retailorganisatie in de regio Noord-Holland krijg je de kans om te werken in een dynamische en operationele omgeving waar jouw bijdrage direct impact heeft op de organisatie. De cultuur is open en samenwerkingsgericht, met volop mogelijkheden voor persoonlijke ontwikkeling en groei binnen het HR-vakgebied. Bovendien biedt de organisatie een stimulerende werkomgeving waarin je als adviseur en business partner kunt excelleren, met een focus op een positieve employee experience.
Hupjob Expertadvies🤫
Zo denken wij dat je Jr. and Sr. Data Engineer retail in Amsterdam kunt binnenhalen
✨Duik in de Data Science Communities
Data science draait om kennis delen en leren van elkaar. Sluit je aan bij online communities zoals Kaggle, GitHub en Stack Overflow. Deel je projectwerk en leer van anderen – dit kan leiden tot waardevolle connecties en zelfs een sollicitatie bij Huxley!
✨Neem deel aan Hackathons
Hackathons zijn een geweldige manier om je vaardigheden in de praktijk te brengen en jezelf te laten zien. Veel bedrijven, waaronder Huxley, zoeken kandidaten die hun creativiteit en probleemoplossend vermogen kunnen demonstreren. Maak gebruik van deze evenementen om je netwerk uit te breiden.
✨Show je Expertise met Projecten
Laat je skills zien met een publiek portfolio! Zorg ervoor dat je een paar interessante projecten hebt die jouw datavisualisatie, statistiek en machine learning vaardigheden tonen. Plaats ze op platforms zoals GitHub of je eigen website – zo laat je zien wat je kan bij Huxley.
✨Pas je Sollicitatie aan voor Geschiktheid
Bij fulltime data science functies is het belangrijk om je sollicitatie specifiek te maken voor de rol bij Huxley. Kijk goed naar de vereisten en match je vaardigheden en ervaring aan wat zij zoeken. Dit maakt het veel waarschijnlijker dat ze jou uitnodigen voor een gesprek!
Wij denken dat je deze vaardigheden nodig hebt om als Jr. and Sr. Data Engineer retail in Amsterdam te schitteren
Een paar tips voor je sollicitatie 🫡
Laat je technische vaardigheden zien!:In de data-science wereld willen we je technische bekwaamheden echt zien. Zorg ervoor dat je kennis van programmeertalen zoals Python of R, evenals je ervaring met data-analysetools en -technieken, duidelijk naar voren komen in je CV. Dit is een kans om je talenten in statistiek en machine learning te benadrukken, zodat Huxley ziet dat jij hun ideale kandidaat bent!
Geef je projecten een spotlight:Vergeet niet om eventuele data-projecten of analyses die je al hebt uitgevoerd op te nemen. Heb je bijvoorbeeld een GitHub-account? Voeg dat toe! Dit is een toffe manier om je praktische ervaring te laten zien, wat de recruiter van Huxley echt zal aanspreken. Laat zien hoe je problemen hebt opgelost en dat je in staat bent om inzichten uit data te halen!
Wees duidelijk over je doelen:Aangezien het om een fulltime rol gaat, is het belangrijk dat je in je motivatiebrief je doelen en ambities duidelijk maakt. Wat hoop je te leren en te bereiken in deze functie bij Huxley? Laat zien dat je niet alleen geïnteresseerd bent in de functie, maar ook in wat je kunt bijdragen aan het team en het bedrijf.
Ondersteun je ervaring met data:Naast je technische vaardigheden, is het ook cruciaal om je eerdere ervaring te onderbouwen met concrete resultaten. Heb je analyses uitgevoerd die hebben geleid tot verbetering van processen of het nemen van strategische beslissingen? Geef cijfers en voorbeelden in je CV en motivatiebrief, zodat Huxley ziet dat je kennis van data echt impact heeft gehad.
Zo bereid je je voor op een sollicitatiegesprek bij Huxley
✨Show je dataskills
Zorg ervoor dat je goed voorbereid bent op technische vragen die je dataskills testen. Bereid je voor op vragen over data-analyse, statistiek en machine learning. Wij moeten ook kunnen zien dat je vertrouwd bent met tools zoals Python, R of SQL.
✨Breng je portfolio mee
Als data scientist is je portfolio cruciaal. Zorg ervoor dat je een aantal projecten hebt waar je trots op bent en die je kunt presenteren. Leg de nadruk op wat je hebt geleerd en hoe je de resultaten hebt toegepast. Dit laat zien dat je niet alleen kennis hebt, maar ook de toepassing ervan begrijpt.
✨Ken de data van Huxley
Neem de tijd om inzicht te krijgen in de datasets waar Huxley mee werkt. Dit kan je helpen om tijdens het gesprek specifieke voorbeelden te geven van hoe jouw vaardigheden en ervaring aansluiten bij hun behoeften. Dit toont niet alleen jouw interesse, maar ook dat je al nadenkt over hoe je een bijdrage kunt leveren.
✨Leef je in in de business case
Tijdens de interviews kunnen ze je vragen om een business case te analyseren of oplossingen voor te stellen op basis van gegevens. Dit is een kans om je analytische vaardigheden te laten zien, dus zorg ervoor dat je niet alleen de technische kanten belicht, maar ook hoe jouw aanpak waarde toevoegt aan het bedrijf.
