Сравнение методов оценки качества поиска

  • Краткая история возникновения задачи оценки качества, маркер.
  • Понятие релевантности, метрики Average Precision, DCG, nDCG и т.д.
  • Интересные факты об экспертной оценке запросов и документов.
  • Время до результата, параллельное сравнение выдач.
  • Позапросные кликовые метрики (abandonment rate, время до клика и т.п.).
  • Смешивание результатов, team-draft-interleaving.
  • Другие характеристики поведения пользователя (время отсутствия).