Senior Software Engineer (Agentic Search) - Web Access Engineer in Amsterdam

Nebius is leidend in een nieuw tijdperk van cloudinfrastructuur voor de wereldwijde AI-economie. We bouwen een full-stack AI-cloudplatform dat ontwikkelaars en bedrijven ondersteunt van data- en modeltraining tot productie-implementatie, zonder de kosten en complexiteit van het bouwen van grote interne AI/ML-infrastructuren.

We zijn op zoek naar een Senior Software Engineer om te werken aan de webtoegangsinfrastructuur van een nieuwe zoekmachine die speciaal is ontworpen voor agentic AI-consumptie. In deze rol richt je je op het betrouwbaar en efficiënt maken van onze toegang tot openbare webinhoud. Je onderzoekt hoe moderne websites en browsers communiceren gedurende de volledige aanvraagcyclus, vindt de oorzaak wanneer een aanvraag mislukt of iets onverwachts retourneert, en bouwt de oplossingen in productiesystemen die op internetniveau opereren.

In deze functie zijn je verantwoordelijkheden:

• Diagnose van mislukte of gedegradeerde aanvragen op het juiste niveau: netwerk en IP, TLS en HTTP/2-gedrag, headers en sessietoestand, client-side scripts, of browserkenmerken.
• Analyseren hoe websites clients verifiëren en classificeren, inclusief hoe client-side scripts en protocolgedrag bepalen wat een site aan verschillende clients serveert.
• Bouwen van clients en tooling die consistent en compatibel zijn met standaardbrowsers over al deze lagen, waarbij een echte browser wordt gebruikt waar een lichte client niet voldoende is.
• Toezicht houden op de toegangskwaliteit naarmate websites veranderen: regressies detecteren, de oorzaak vinden en succes meten op echte inhoud in plaats van op statuscodes.
• Bouwen van de tooling om dit op schaal te doen: verkeerscaptatie en vergelijking met echte browsers, per-site en per-methode succestracking, en de kosten van elke succesvolle fetch.
• Kiezen van de fetch-methode voor elke host, van een lichte HTTP-client tot een volledige browser, waarbij kwaliteit tegen kosten wordt afgewogen.

Je bent mogelijk een goede fit als je:

• 5+ jaar ervaring hebt met het bouwen van productiesystemen en een expert bent in verschillende van de volgende gebieden.
• HTTP/1.1, HTTP/2 en HTTP/3, TLS-handshakes en TLS-vingerafdrukken (JA3/JA4), en headergedrag.
• Een debuggingmethode hebt, geen gissingen: het opnieuw afspelen van vastgelegde browserverkeer, vergelijken met een echte browser op hetzelfde netwerkpad, en één variabele tegelijk veranderen.
• Complexe of obfuscated JavaScript kunt lezen en analyseren, en observeren wat een script meet door browser-API's te hooken.
• Browserinstrumentatie en het Chrome DevTools Protocol kunt gebruiken als tools voor onderzoek.
• Dit in productie hebt uitgevoerd en cijfers kunt geven: aanvragen per dag, sites of hosts, en het succespercentage en hoe je dit hebt gemeten.
• Sterke programmeervaardigheden hebt in ten minste één van Go, Python, Rust of C++.

Sterke kandidaten hebben mogelijk ook ervaring met:

• Werken bij een webdataleverancier, een browser- of webbeveiligingsbedrijf, of een bedrijf dat gegevens verzamelt uit complexe bronnen.
• Bijdragen aan open-source tooling gerelateerd aan browsernetwerken of fingerprinting, of publieke beschrijvingen van hoe clientverificatie werkt.
• Bouwen of onderhouden van een gepatchte browser.
• Netwerken, proxies en IP-reputatie.
• Internet-schaal gedistribueerde systemen, Kubernetes en cloudinfrastructuur.

Wat voor soort problemen je zult aanpakken:

• Een site retourneert een andere reactie aan onze client dan aan Chrome op hetzelfde netwerkpad. Vind uit waarom en los die oorzaak op.
• Een site verandert hoe het clients verifieert en het succes daalt over een groep sites. Vind uit wat er is veranderd, pas aan en maak de volgende wijziging goedkoper om op te vangen.
• Overschakelen naar een browser-achtige netwerkprofiel maakt resultaten slechter op sommige hosts. Ontdek wat er niet meer overeenkomt.

Voordelen & Voordelen:

• Competitieve compensatie.
• Carrièregroei en leermogelijkheden.
• Flexibiliteit en eigenaarschap.
• Samenwerkende en innovatieve cultuur.
• Kans om aan impactvolle AI-projecten te werken.
• Internationale omgeving en getalenteerde teams.

Nebius is een werkgever die gelijke kansen biedt. We zijn toegewijd aan het bevorderen van een inclusieve en diverse werkplek en aan het bieden van gelijke werkgelegenheid in alle aspecten van werkgelegenheid.