Member of Technical Staff (Search Quality Analyst)
De onde veio esta listagem
Esta vaga foi obtida de uma publicação pública. Perplexity ainda não reivindicou a listagem, então ninguém de lá se comprometeu a entrevistar pelo VoxJobs ainda — você é entrevistado por nós, a empresa é procurada com os candidatos, e você é avisado no momento em que ela entrar.
Sobre a vaga
Perplexity is looking for an experienced analyst to help us build and improve our core search technologies. You'll work at the intersection of data analysis and engineering - designing metrics, building data pipelines, and improving the quality of our search and answer systems.
This role is hybrid in Belgrade, London or Berlin.
Responsibilities
- Find and diagnose quality issues in our search pipeline
- Design metrics from scratch to track and measure search quality
- Build datasets for model training, including LLM-as-a-judge labeling pipelines
- Improve search snippet quality and page selection algorithms for indexing
- Design and analyze A/B experiments to validate improvements
Qualifications
- 4+ years of experience as a data analyst or in a related role
- Strong coding skills — expected to write production-grade code at a mid-level backend engineer level
- Proficiency with SQL and Python
- Demonstrated hands-on experience with at least one of the following:
- Designing metrics from scratch (not just analyzing existing A/B experiments)
- Building labeling pipelines using LLM-as-a-judge
- Training ML models that shipped to production with measurable metric improvements
- Designing evals with known ground truth (e.g. SimpleQA, BrowseComp) or driving meaningful improvements on such evals
Nice to have
- Experience working on search-related products
- Knowledge of statistics and A/B experiment design
- Experience with Apache Spark or Databricks
Como você vai ser avaliado
Seu currículo e suas respostas escritas contra a rubrica deste empregador. Os pesos são dele, e estão publicados aqui embaixo.
A conversa em vídeo: como você pensa e explica. A IA avalia o que você diz — o vídeo existe para uma pessoa assistir, e nunca é analisado por modelo nenhum.
Cada sub-nota cita o trecho da transcrição ou a linha do currículo que a produziu. Você vê a sua banda e o raciocínio — sempre.
Conta pontos
Soma no seu score. Nunca é o motivo de uma recusa.
- Machine learning · peso 13%
- LLMs and generative AI · peso 13%
- Data engineering · peso 13%
- Statistics · peso 13%
- Apache Spark · peso 13%
Sobre esta empresa
Perfil montado a partir de fontes públicas — não foi escrito pela empresa, e ela ainda não confirmou nada por aqui.