Member of Technical Staff (Product Data Scientist, Search Quality)

Perplexity ищет Member of Technical Staff, специализирующегося на продуктовой data science для качества поиска в Белграде. Роль сосредоточена на использовании данных о поведении пользователей и результатах экспериментов для улучшения качества поиска, определения полезных метрик отслеживания и поддержки улучшений ранжирования с помощью пайплайнов разметки данных, использующих как человеческую обратную связь, так и feedback от LLM. Требуется 4+ года опыта в аналитике или аналогичной роли, опыт работы с поисковыми продуктами и A/B testing, уверенные навыки Python и SQL, умение работать с BI tools и хорошее знание статистики. Опыт работы с Spark, Databricks и системами LLM-as-a-judge является преимуществом.

Perplexity is looking for an experienced Product Data Scientist to accelerate the development of advanced search technologies. You will identify robust and sensitive signals from user behavior to help us gather insights from A/B experiment data more efficiently. Responsibilities - Develop data-driven insights from user behavior to inform our product roadmap and accelerate adoption - Formulate hypotheses and validate them by designing, running, and analyzing A/B tests - Determine appropriate metrics and visualizations for tracking, and implement them in dashboards - Design new pipelines that will help to deliver better ranking quality. From discovering new signals, producing metrics and construct data labeling pipelines with human and LLM feedback Qualifications - 4+ years of experience working as a data analyst or in a related role - Experience working on search-related products, with emphasis on designing online metrics and analyzing A/B experiments - Strong Python skills (expected to write production-grade code) - Proficiency with SQL - Experience with Business Intelligence (BI) tools - Deep knowledge of statistics Preferred Qualifications - Proficiency with Apache Spark - Experience with Databricks - Experience with development of LLM-as-a-judge systems