Руководитель направления качества поиска — международная поисковая платформа (NDA)

Январь 2016 — март 2019 · Амстердам, Нидерланды · Полная занятость · Основное место работы в этот период

Название работодателя не разглашается по соглашению о конфиденциальности (NDA). Это была основная работа Olena на полной занятости с января 2016 по март 2019 года. Конфиденциальные продукты, внутренние методики, сведения о командах и клиентах, а также закрытые метрики не раскрываются.

• Руководство направлением оценки релевантности, точности, полноты и полезности поисковых результатов.
• Разработка стратегии и процедур оценки релевантности, мониторинга качества ранжирования и документирования изменений поискового продукта.
• Организация работы аналитиков качества поиска, продуктовых, инженерных, аналитических и исследовательских команд; согласование приоритетов оценки поиска.
• Разработка подходов к ручной и автоматизированной оценке релевантности; исследование запросов, намерений аудитории и причин неудовлетворительных результатов.
• Работа с метриками NDCG, MRR, точности (Precision), полноты (Recall), кликабельности (CTR) и доли успешных поисковых сессий (Search Success Rate), экспериментальными методиками, качественными оценками и сигналами пользовательского опыта, как указано в профессиональном профиле.
• Анализ поисковых логов, пользовательских маршрутов, сегментов, неудачных запросов и обратной связи для улучшения доступности информации в поиске и удовлетворённости пользователей.
• Совместная работа со специалистами по машинному обучению, анализу данных и разработке над семантическим поиском, обучением ранжированию, рекомендательными системами и экспериментальной оценкой улучшений без раскрытия собственных решений и внутренней архитектуры платформы.
• Руководство проверкой качества релизов и мониторингом изменений поведения поиска.

Характер результатов: руководство сложной межфункциональной системой оценки качества поиска. Точные коммерческие или алгоритмические KPI не публикуются из-за NDA и отсутствия согласованных разрешений на раскрытие.