Что такое близкие запросы, как их найти и использоватьиспользовать

Павел Браславский

Лия Карепова

Максим Королев

Светлана Шорина

ЧТО ТАКОЕ «БЛИЗКИЕ ЗАПРОСЫ»?

2

михаил булгаков

мастер и маргарита

богдан ступка

михаил боярский мастер и маргарита

мастер и маргарита фильм

владимир бортко

тарас бульба фильм

3

михаил боярский

д'артаньян

три мушкетера

александр дюма

Подробнее1. Уточнение :

золотое кольцо � золотое кольцо с бриллиантом

2. Снятие неоднозначности: 2. Снятие неоднозначности:

ягуар � ягуар животное

3. Расширение:

золотое кольцо � ювелирные украшения

4. Синоним:

японская вишня � сакура4

Подробнее – 2 5. Другой запрос на ту же тему:

мерседес � ауди

6. Смена поисковой цели:6. Смена поисковой цели:

купить санки � детский мир

7. Перевод:

коралловый клуб � coral club

5

Близкие, но «про другое»• Опечатки: курсовая робота – курсовая работа

• Транслитерация: золото – zoloto• Транслитерация: золото – zoloto

• Раскладка: lbvf ,bkfy – дима билан

• Реникса: otbeptka – отвертка

6

ХОРОШИЙ ЗАПРОС – ЭТО НЕПРОСТО

7

Назовите глагол из вопроса, помещенного

на борту транспортного средства

подопечных Фатиха Теримаподопечных Фатиха Терима

на первенстве континента?

IX Кубок Яндекса по поиску

8

Работа мысли• Фатих Терим

• сборная турции на борту самолета

• сборная турции "на борту" самолета • сборная турции "на борту" самолета

• сборная турции надпись "на борту" самолета

• сборная турции надпись "на борту" автобуса

• сборная турции надпись на автобусе

• футбол "сборная турции" надпись на автобусе

• чемпионат европы футбол "сборная турции" надпись на автобусе

9

Ответ

Вместит ли автобус всю страсть Турции?Вместит ли автобус всю страсть Турции?

10

ПОМОЧЬ ПОЛЬЗОВАТЕЛЮ

11

12

13

14

15

16

17

ГДЕ ИСКАТЬ, КАК ИЗВЛЕЧЬ?

18

Источники данных

• Лог запросов

• Текст ссылок • Текст ссылок

• Корпус текстов

ford � ford focus, ford fusion, ford mondeo

карта � карта памяти, карта города

машина � стиральная машина, швейная машина

19

Близость запросов

q2 q3 q4q1

слова/буквы сессии

20

слова/буквы сессии

клики

Требования1. Семантическая близость запросов

2. Без ошибок, опечаток, обрезанных словосочетаний

3. Без смысловых дублей (шарон стоун, шерон стоун)

4. Недопустимо – порно, мат, оскорбительная лексика

5. Плохо: гео-зависимые запросы в чужом регионе,

неактуальные запросы (о прошедших событиях)

21

1. выделение сессий (по времени)

0. чистка лога (порно, Яндекс, «подсказки», язык запросов, опечатки)

запрос=<timeStamp, userId, queryText>

2. выделение пар (в.ч. транзитивно)

22

3. нормализация запросов (стоп-слова, капитализация,

лемматизация, сортировка слов + выбор лучшего обратного

преобразования)

23

4. Борьба со флешмобами и «событийными» ассоциациями

5. Матрица частоты переходов «запрос-запрос» (пороги для пользователя, ограничение на абсолютную частоту)

6. weight(q1 � q2)= f(freqq1, freqq2, freqq1q2)*f(freqq2q1)

7. ранжирование, отсечение по порогу

24

7. ранжирование, отсечение по порогу

8. индекс: q � q1, q2, q3… (оригинальные запросы)

Оценка

• «оценка глазами»

• «классы объектов»• «классы объектов»

• кластеры запросов Яндекс.Директа

• кликабельность

25

РЕЗУЛЬТАТ

26

27

Выбор пользователей

другой запрос на ту же тему

уточнениеуточнение

расширение понятия

синоним

перевод

смена цели

снятие неоднозначности

28

Спрос/предложение

40%

50%

60%

клики показы

0%

10%

20%

30%

40%

другой запрос на

ту же тему

уточнение расширение

понятия

синоним смена цели перевод снятие

неоднозначности29

Где еще можно использовать?

• Реклама

• Качество поиска• Качество поиска

30

СПАСИБО ЗА ВНИМАНИЕ!

31

Павел Браславскийpb@yandex-team.ru

Лия Карепова

32

Лия КареповаМаксим КоролевСветлана Шорина