Emploi hybride
HybrideMember of Technical Staff (Web Access Engineer, Crawler)
Perplexity
Briefing du poste
Lu dans l’annonce et comparé à notre index d’offres
- Bureau à
- London, Belgrade, Ireland
- Mode de travail
- Hybride, en partie sur site
- Salaire
- Non précisé
- Niveau
- Senior
Le poste en 30 secondes
Traduit de l’anglaisAu sein de l’équipe Crawler, tu développeras des systèmes fiables de récupération et de rendu de contenus web publics pour la recherche assistée par l’IA. Ce poste s’adresse à une personne expérimentée en développement logiciel, avec un parcours en infrastructure web, navigateurs, CDN ou crawling.
Vos missions
- Améliorer les systèmes de récupération et de rendu, de l’analyse au déploiement en production
- Étudier les échecs de récupération et de rendu, puis en déterminer les causes
- Améliorer le chargement des pages, la détection de fin de chargement et la capture du contenu utile
- Créer des outils pour reproduire les échecs et transformer les constats en tests de régression
- Définir des indicateurs de fiabilité, d’exhaustivité et de classification des erreurs pour guider les améliorations
- Go
- Python
- Rust
- C++
- Chrome DevTools
- CDP
- curl
Ce qui est attendu
Compétences requises
- Au moins 5 ans d’expérience en développement logiciel dans l’infrastructure web, les navigateurs, les CDN ou le crawling
- Solides compétences en programmation dans au moins un langage parmi Go, Python, Rust et C++
- Maîtrise approfondie de HTTP/1.1, HTTP/2 et HTTP/3, ainsi que de TLS, DNS, des cookies et des sessions
- Connaissance du cache CDN, de la diffusion de contenu, des erreurs HTTP, du backoff des nouvelles tentatives et des limites de débit
- Connaissance du cycle de vie des pages, de network idle, des service workers, du rendu côté client et du shadow DOM
- Expérience du débogage JavaScript et maîtrise de Chrome DevTools, CDP, des fichiers HAR, de curl et des captures de paquets
Savoir-être
- Être à l’aise pour travailler en autonomie lorsque la marche à suivre n’est pas encore clairement définie
Bon à savoir
- Dans notre index depuis le
- 13 novembre 2026
- Employeur
- 6 autres postes ouverts chez Perplexity dans notre index. Dont 1 entièrement à distance.
Avant de postuler
Ces termes figurent mot pour mot dans l’annonce. Si vous les maîtrisez, ils ont aussi leur place dans votre CV.
- web infrastructure
- HTTP/1.1
- HTTP/2
- HTTP/3
- TLS
- DNS
- Chrome DevTools
- retry backoff
Généré automatiquement par nomado24 à partir de l’annonce et de notre index. Il ne s’agit pas d’une déclaration de l’employeur. Seule l’annonce d’origine fait foi.
Description du poste
Perplexity is hiring a Web Access Engineer for the Crawler team to build reliable fetching and rendering systems for AI-powered search. You'll work on freely available public web content, within site permissions and approved access policies, and develop the infrastructure that supplies content to downstream indexing and retrieval systems.
Your focus will be diagnosing network errors, page-loading issues, and incomplete rendering. You'll trace problems from network protocols through client-side execution, distinguish technical failures from intentional access restrictions, and turn findings into production fixes that improve content quality and efficiency at scale.
Responsibilities
- Own fetching and rendering improvements end to end, from investigation through implementation and production rollout, partnering with crawler engineers and SREs.
- Investigate fetch and rendering failures across DNS, TLS, HTTP, caching, redirects, and client-side rendering, and classify root causes.
- Improve page loading, completion detection, and content capture to preserve relevant content and handle dynamic pages reliably.
- Ensure the crawler respects site-imposed access restrictions and rate limits, identifies itself clearly, and retries only transient technical errors.
- Build tools to reproduce failures, compare crawler output against expected page content, and turn findings into regression tests.
- Define metrics for fetching reliability, content completeness, and error classification, and use them to prioritize improvements.
Qualifications
- 5+ years of software engineering experience in web infrastructure, browsers, CDNs, or crawling, with strong programming skills in at least one of Go, Python, Rust, or C++.
- Deep understanding of HTTP/1.1, HTTP/2, and HTTP/3, including status semantics, caching, conditional requests, content encoding, and redirects; strong knowledge of TLS, DNS, cookies, and sessions.
- Understanding of CDN caching and content delivery, HTTP error handling, retry backoff, and server-defined rate limits.
- Knowledge of page lifecycle, network idle, service workers, client-side rendering, and shadow DOM; experience debugging JavaScript and fluency with Chrome DevTools, CDP, HAR files, curl, and packet captures.
- Comfort working independently when the path forward is not fully defined.
Nice to have
- Experience developing CDN, caching, or web performance systems.
- Experience operating crawlers, headless browsers, or distributed content-acquisition systems at scale.
- Contributions to a browser engine or JavaScript runtime.
Cette offre provient d'une source externe. Les candidatures sont gérées sur le site de la source.
