pavel braslavski related queries braslavski yandex
TRANSCRIPT
Что такое близкие запросы, как их найти и использоватьиспользовать
Павел Браславский
Лия Карепова
Максим Королев
Светлана Шорина
ЧТО ТАКОЕ «БЛИЗКИЕ ЗАПРОСЫ»?
2
михаил булгаков
мастер и маргарита
богдан ступка
михаил боярский мастер и маргарита
мастер и маргарита фильм
владимир бортко
тарас бульба фильм
3
михаил боярский
д'артаньян
три мушкетера
александр дюма
Подробнее1. Уточнение :
золотое кольцо � золотое кольцо с бриллиантом
2. Снятие неоднозначности: 2. Снятие неоднозначности:
ягуар � ягуар животное
3. Расширение:
золотое кольцо � ювелирные украшения
4. Синоним:
японская вишня � сакура4
Подробнее – 2 5. Другой запрос на ту же тему:
мерседес � ауди
6. Смена поисковой цели:6. Смена поисковой цели:
купить санки � детский мир
7. Перевод:
коралловый клуб � coral club
5
Близкие, но «про другое»• Опечатки: курсовая робота – курсовая работа
• Транслитерация: золото – zoloto• Транслитерация: золото – zoloto
• Раскладка: lbvf ,bkfy – дима билан
• Реникса: otbeptka – отвертка
6
ХОРОШИЙ ЗАПРОС – ЭТО НЕПРОСТО
7
Назовите глагол из вопроса, помещенного
на борту транспортного средства
подопечных Фатиха Теримаподопечных Фатиха Терима
на первенстве континента?
IX Кубок Яндекса по поиску
8
Работа мысли• Фатих Терим
• сборная турции на борту самолета
• сборная турции "на борту" самолета • сборная турции "на борту" самолета
• сборная турции надпись "на борту" самолета
• сборная турции надпись "на борту" автобуса
• сборная турции надпись на автобусе
• футбол "сборная турции" надпись на автобусе
• чемпионат европы футбол "сборная турции" надпись на автобусе
9
Ответ
Вместит ли автобус всю страсть Турции?Вместит ли автобус всю страсть Турции?
10
ПОМОЧЬ ПОЛЬЗОВАТЕЛЮ
11
12
13
14
15
16
17
ГДЕ ИСКАТЬ, КАК ИЗВЛЕЧЬ?
18
Источники данных
• Лог запросов
• Текст ссылок • Текст ссылок
• Корпус текстов
ford � ford focus, ford fusion, ford mondeo
карта � карта памяти, карта города
машина � стиральная машина, швейная машина
19
Близость запросов
q2 q3 q4q1
слова/буквы сессии
20
слова/буквы сессии
клики
Требования1. Семантическая близость запросов
2. Без ошибок, опечаток, обрезанных словосочетаний
3. Без смысловых дублей (шарон стоун, шерон стоун)
4. Недопустимо – порно, мат, оскорбительная лексика
5. Плохо: гео-зависимые запросы в чужом регионе,
неактуальные запросы (о прошедших событиях)
21
1. выделение сессий (по времени)
0. чистка лога (порно, Яндекс, «подсказки», язык запросов, опечатки)
запрос=<timeStamp, userId, queryText>
2. выделение пар (в.ч. транзитивно)
22
3. нормализация запросов (стоп-слова, капитализация,
лемматизация, сортировка слов + выбор лучшего обратного
преобразования)
23
4. Борьба со флешмобами и «событийными» ассоциациями
5. Матрица частоты переходов «запрос-запрос» (пороги для пользователя, ограничение на абсолютную частоту)
6. weight(q1 � q2)= f(freqq1, freqq2, freqq1q2)*f(freqq2q1)
7. ранжирование, отсечение по порогу
24
7. ранжирование, отсечение по порогу
8. индекс: q � q1, q2, q3… (оригинальные запросы)
Оценка
• «оценка глазами»
• «классы объектов»• «классы объектов»
• кластеры запросов Яндекс.Директа
• кликабельность
25
РЕЗУЛЬТАТ
26
27
Выбор пользователей
другой запрос на ту же тему
уточнениеуточнение
расширение понятия
синоним
перевод
смена цели
снятие неоднозначности
28
Спрос/предложение
40%
50%
60%
клики показы
0%
10%
20%
30%
40%
другой запрос на
ту же тему
уточнение расширение
понятия
синоним смена цели перевод снятие
неоднозначности29
Где еще можно использовать?
• Реклама
• Качество поиска• Качество поиска
30
СПАСИБО ЗА ВНИМАНИЕ!
31