In één oogopslag
- Taken: Ontwerp en lever multi-petabyte opslag systemen voor AI-training en -inferentie.
- Bedrijf: Samen AI, een innovatieve AI-onderzoeksorganisatie met een passie voor technologie.
- Voordelen: Flexibele werkuren, hybride werken, en kansen voor professionele groei.
- Overige informatie: Word lid van een gepassioneerd team dat de toekomst van AI vormgeeft.
- Waarom deze baan: Werk aan baanbrekende technologieën en maak impact in de AI-wereld.
- Kwalificaties: Minimaal 8 jaar ervaring in opslagtechnologie en sterke programmeervaardigheden in Go en Python.
Het verwachte salaris ligt tussen 51300 - 62700 € per jaar.
In deze rol ontwerp en lever je multi-petabyte opslag systemen die speciaal zijn gebouwd voor de grootste AI-trainings- en inferentieworkloads ter wereld. Je zult hoge-prestatie parallelle bestandssystemen en objectopslagarchitecturen ontwerpen, evalueren en integreren van geavanceerde technologieën zoals WekaFS, Ceph en Lustre, en agressieve kostenoptimalisatie aansteken - regelmatig 30-50% besparingen behalen door middel van intelligente tiering, levenscyclusbeleid, capaciteitsprognoses en het optimaliseren van de grootte. Je bouwt ook Kubernetes-native opslagoperators en zelfbedieningsplatforms die automatische provisioning, strikte multi-tenancy, prestatie-isolatie en quotabeheer op clusterniveau bieden.
Dagelijks optimaliseer je end-to-end datastromen voor 10-50 GB/s per node, ontwerp je multi-tier caching architecturen, implementeer je intelligente prefetching en model-gewicht distributie, en tune je parallelle bestandssystemen voor AI workloads.
Verantwoordelijkheden:
- Ontwerp multi-petabyte AI/ML opslag systemen; integreer WekaFS, Ceph, enz.; leid capaciteitsplanning en kostenoptimalisatie (30-50% besparingen via tiering, levenscyclusbeleid, optimalisatie van de grootte).
- Ontwerp/optimaliseer RDMA, InfiniBand, 400GbE netwerken; tune voor maximale doorvoer/minimale latentie; implementeer NVMe-oF/iSCSI; los knelpunten op; optimaliseer TCP/IP voor opslag.
- Bouw Kubernetes opslagoperators/controllers; maak automatische provisioning mogelijk, zelfbedieningsabstracties, multi-tenant isolatie, quotas; creëer herbruikbare Helm/Terraform patronen.
- Lever 10-50 GB/s per GPU-node; optimaliseer caching (gewichten/datasets/checkpoints), parallelle bestandssystemen en datastromen; los problemen op met profileringshulpmiddelen; schaal naar duizenden nodes.
- Bouw multi-tier caches (lokale NVMe, gedistribueerd, object); optimaliseer gegevenslocaliteit en model-gewicht distributie; implementeer slimme prefetching/evictie.
- Implementeer monitoring, waarschuwingen, SLO's; ontwerp DR/back-ups met runbooks; voer chaos engineering uit; zorg voor 99.9%+ uptime via proactieve/geautomatiseerde remediering.
- Werk samen met ML/SRE teams; mentor over opslag best practices; draag bij aan open-source; schrijf documentatie, postmortems en publieke leerervaringen.
Vereisten:
- 8+ jaar ervaring in opslagengineering met 3+ jaar ervaring in het beheren van gedistribueerde opslag op multi-petabyte schaal.
- Bewezen staat van dienst in het implementeren en bedienen van hoge-prestatie opslag voor GPU/HPC clusters.
- Diepe Kubernetes en cloud-native opslagervaring in productieomgevingen.
- Sterke programmeervaardigheden in Go en Python met aangetoonde capaciteit om productieklare tools te bouwen.
- BS/MS in Computer Science, Engineering of gelijkwaardige praktische ervaring.
- Geschiedenis van technische leiderschap: systemen ontwerpen die de prestaties aanzienlijk verbeterden (>3x), betrouwbaarheid (99.9%+ uptime) of kostenefficiëntie.
- Diepe expertise in WekaFS, Lustre, GPFS, BeeGFS of vergelijkbare parallelle bestandssystemen op multi-petabyte schaal.
- Productie-ervaring met S3, MinIO, Ceph of R2 inclusief prestatieoptimalisatie en kostenbeheer.
- CSI-drivers, StatefulSets, PersistentVolumes, opslagoperators en aangepaste controllers.
- Opslagoptimalisatie voor GPU workloads, RDMA/InfiniBand netwerken, optimalisatie van parallelle bestandssystemen (100+ GB/s totale clusterdoorvoer).
- Automatisering, operators en tooling in Go en Python.
- Infrastructure as Code: Terraform, Ansible, Helm, GitOps (ArgoCD).
- Geavanceerde kennis van bestandssystemen (ext4, xfs), LVM, NVMe-optimalisatie, RAID-configuraties.
- Observability: Prometheus, Grafana, Thanos architectuur en operaties.
Aanvullende vaardigheden:
- GPU Direct Storage (GDS), NVMe-oF, opslagnetwerken (100GbE/400GbE).
- Opslag snapshots, klonen en dunne provisioning.
- Back-up en disaster recovery (Velero, Restic, cross-region replicatie).
- Opslagversleuteling (in rust en tijdens transport), beveiliging en compliance.
- Opslag benchmarking en profileringshulpmiddelen (fio, iperf3, iostat, blktrace).
Together AI is een onderzoeksgestuurde kunstmatige intelligentiebedrijf. We geloven dat open en transparante AI-systemen innovatie zullen stimuleren en de beste resultaten voor de samenleving zullen creëren. Samen zijn we op een missie om de kosten van moderne AI-systemen aanzienlijk te verlagen door software, hardware, algoritmen en modellen gezamenlijk te ontwerpen. We hebben bijgedragen aan toonaangevend open-source onderzoek, modellen en datasets om de grens van AI te bevorderen, en ons team heeft technologische vooruitgang geboekt zoals FlashAttention, Hyena, FlexGen en RedPajama.
Together AI is een werkgever die gelijke kansen biedt en is trots om gelijke werkgelegenheid te bieden aan iedereen, ongeacht ras, kleur, afkomst, religie, geslacht, nationale oorsprong, seksuele geaardheid, leeftijd, burgerschap, burgerlijke staat, handicap, genderidentiteit, veteranenstatus en meer.
Staff Engineer, Distributed Storage,HPC & AI Infrastructure in Amsterdam werkgever: Together Computer Inc
Together AI is een uitstekende werkgever die een stimulerende werkomgeving biedt in Amsterdam, waar innovatie en samenwerking centraal staan. Met een hybride werkmodel en de mogelijkheid om te werken aan baanbrekende AI-infrastructuur, biedt het bedrijf volop kansen voor professionele groei en ontwikkeling. Werknemers profiteren van een cultuur die diversiteit waardeert en gelijke kansen biedt, waardoor iedereen zich kan ontplooien in hun rol.
Contactgegevens:
Recruitmentteam van Together Computer Inc
Hupjob Expertadvies🤫
Zo denken wij dat je Staff Engineer, Distributed Storage,HPC & AI Infrastructure in Amsterdam kunt binnenhalen
✨Verken de Automatisering Gemeenschap
Sluit je aan bij lokale of online communities die zich richten op automatisering en regeltechniek. Neem deel aan discussies en vraag om advies; dit kan je een voorsprong geven bij het vinden van kansen en connecties die leiden tot een functie bij bedrijven zoals Together Computer Inc.
✨Deel je Projecten
Laat zien wat je kunt door je projecten en ervaringen te delen op platforms zoals GitHub of Behance. Dit laat toekomstige werkgevers zien wat je in huis hebt en kan ervoor zorgen dat Together Computer Inc jouw profiel opmerkt.
✨Neem deel aan Netwerkbijeenkomsten
Ga naar netwerkbijeenkomsten of seminars over automatisering en technologie. Deze evenementen zijn ideaal om professionals in het veld te ontmoeten en meer te leren over openstaande vacatures bij bedrijven zoals Together Computer Inc.
✨Bouw een Sterk Online Profiel
Zorg ervoor dat je LinkedIn-profiel indrukwekkend is en relevante projecten, certificaten en ervaringen benadrukt. Dit helpt je op de radar te komen bij recruiters van Together Computer Inc en helpt je om jezelf te onderscheiden in de competitieve markt.
Wij denken dat je deze vaardigheden nodig hebt om als Staff Engineer, Distributed Storage,HPC & AI Infrastructure in Amsterdam te schitteren
Een paar tips voor je sollicitatie 🫡
Benadruk je technische vaardigheden:In de automatisering en regeltechniek waardeert men technische vaardigheden enorm. Zorg ervoor dat je CV je ervaring met relevante software, programmeertalen en technologieën benadrukt. Laat ons zien waar je goed in bent!
Voeg projecten of cases toe:Heb je aan interessante automatiseringsprojecten gewerkt? Voeg voorbeelden van succesvol afgeronde projecten of case studies toe in je CV of motivatiebrief. Dit laat zien dat je niet alleen theoretische kennis hebt, maar ook praktische ervaring kunt toepassen.
Spreek je leergierigheid uit:In een fulltime rol in deze sector is het belangrijk om je bereidheid om te leren en jezelf te ontwikkelen aan te tonen. In je motivatiebrief kun je vertellen hoe je je vaardigheden tot nu toe hebt uitgebreid en waarom je deze kans bij Together Computer Inc zo waardevol vindt voor je ontwikkeling.
Organiseer je documenten overzichtelijk:Voor een fulltime functie is het essentieel om je CV en motivatiebrief overzichtelijk en goed gestructureerd te laten zijn. Zorg dat ze makkelijk te lezen zijn, gebruik duidelijk titels en bullets, en houd het professioneel. Maak het ons gemakkelijk om te zien waarom jij de juiste kandidaat bent voor Staff Engineer, Distributed Storage,HPC & AI Infrastructure bij Together Computer Inc.
Zo bereid je je voor op een sollicitatiegesprek bij Together Computer Inc
✨Ken de nieuwste automatiseringstools
Zorg ervoor dat je goed op de hoogte bent van de laatste ontwikkelingen in automatiseringstools die binnen jouw vakgebied worden gebruikt. Kun je bijvoorbeeld de voordelen uitleggen van tools zoals UiPath of Automation Anywhere? Dit laat zien dat je niet alleen technisch onderlegd bent, maar ook proactief je kennis bijhoudt.
✨Voorbereiding op technische vragen
Verwacht dat je technische vragen moet beantwoorden die specifiek zijn voor automatisering en regeltechniek. Dit kan bijvoorbeeld inhouden dat je situaties moet oplossen of je aanpak moet uitleggen voor het automatiseren van specifieke processen. Zorg ervoor dat je deze concepten goed begrijpt, zodat je helder kunt uitleggen hoe je ze zou toepassen.
✨Je ervaring met projecten delen
Aangezien het een fulltime functie betreft, willen ze weten over je ervaringen in eerdere projecten. Bereid een paar concrete voorbeelden voor waarin je betrokken was bij automatiseringsprojecten, de uitdagingen die je tegenkwam en hoe je die hebt overwonnen. Dit laat zien dat je niet alleen de theorie kent, maar ook echt praktijkervaring hebt.
✨Passie voor efficiëntie
Toon je enthousiasme voor efficiëntie en optimalisatie tijdens het interview. Deel waarom je gepassioneerd bent over automatisering en wat je motiveert in dit vakgebied. Dit kan je onderscheiden van andere kandidaten die misschien meer focussen op de technische aspecten alleen.
