64
Поиск и контекстная реклама в Рунете аналитический обзор, октябрь 2008 И. АшмАнов, А. ТуТубАлИн, К. РощупКИн, л. КудРявцевА

Ashmanov&Partners SearchAds A4 2008

  • Upload
    -

  • View
    225

  • Download
    0

Embed Size (px)

DESCRIPTION

аналитический обзор IT-компании

Citation preview

Page 1: Ashmanov&Partners SearchAds A4 2008

1

Поиск и контекстная реклама в Рунетеаналитический обзор, октябрь 2008

И. АшмАнов, А. ТуТубАлИн, К. РощупКИн, л. КудРявцевА

Page 2: Ashmanov&Partners SearchAds A4 2008

2

1. введение 3

2. Текущее состояние поискового рынка в Рунете 4

2.1. Инструменты для оценки доли поисковиков 4

2.2. Доли поискового рынка 10

2.3. Доли рынка в тематических нишах 12

3. Рынок контекстной рекламы в Рунете 16

3.1. Распространённость систем контекстной рекламы в Рунете 18

3.2. Доля систем контекстной рекламы по трафику 20

4. Качество поиска: способы оценки и динамика 22

4.1. Влияет ли качество поиска на долю рынка? 22

4.2. Как оценить качество поиска? 25

4.3. Типы запросов и качество поиска 26

4.4. Как работают анализаторы качества поиска 26

4.5. Навигационное качество 28

4.6 Анализатор качества тематического поиска 29

4.7. Качество информационного поиска — цитаты 30

4.8. Качество исправления опечаток 31

4.9. Спамеры и оптимизаторы 33

4.10. Уровень порнографии 39

5. основные новости и события поисковиков Рунета 41

5.1. Яндекс 42

5.2. Google 45

5.3. Рамблер 47

5.4. Поиск@Mail.ru 49

5.5. Остальные поисковые системы 50

5.6. Выводы, тенденции 52

6. приложение: как работают анализаторы поисковых систем 56

ЭТоТ оТчёТ посвящён сосТоянИю РынКА поИсКовых сИсТем И КонТеКсТной РеК-

лАмы в РоссИйсКом сегменТе ИнТеРнеТА. Рассматриваются доли поисковых систем,

борьба Google и яндекса за доминирование, основные события в мире поисковых систем

Рунета за 2008 год. обсуждается распространённость и распределение рекламных систем

основных игроков — яндекс.директа, бегуна и Google AdSense. Рассматривается понятие

качества поиска и его влияние на доли рынка.

Page 3: Ashmanov&Partners SearchAds A4 2008

3

Введение1.

сегодня русскоговорящие пользователи Интернета

для поиска сайтов и информации пользуются в

основном четырьмя поисковыми системами: ян-

дексом, Google, Рамблером и поиском на портале Mail.ru

(далее — поиск@Mail.ru). Небольшое количество пользо-

вателей ищет поиском от Microsoft (MSN и Live.com), ниг-

мой, Yahoo и другими, мало заметными в России, система-

ми поиска.

Рынок поиска в Рунете очень быстро меняется. Два ос-

новных игрока на нём, которые ведут борьбу за доминиро-

вание — яндекс и Google.

Google стал вторым поисковиком в конце 2007 года,

обогнав Рамблер. Доля Рамблера продолжает снижаться,

осенью 2008 года его обогнал поиск на Mail.ru. Остальные

поисковики или слишком маленькие (нигма, Gogo, янга,

Апорт), или их большим западным «родителям» сейчас не

до Рунета (Live.com и MSN от Miscrosoft и Yahoo).

Page 4: Ashmanov&Partners SearchAds A4 2008

4

наиболее распространённым способом узнать о

распределении долей поиска между основными

поисковыми системами Рунета является статисти-

ка счётчика Liveinternet.ru, которая показывает количество

переходов с поисковых систем на сайты, на которых стоит

счётчик Liveinternet.

Такие же расчёты по количеству переходов приводит и

счётчик SpyLOG, но его сегодняшний сервис «Тренды» на-

ходится в статусе беты и, по нашему мнению, показывает

искаженные данные.

Нужно понимать, что количество переходов — показа-

тель, который позволяет судить о доле рынка только кос-

венно. Тому есть несколько причин:

1. поКРыТИе. Счётчик Liveinternet установлен не на

всех сайтах Рунета. Этот счётчик не установлен на некото-

рых очень крупных сайтах, а также на множестве совсем

опИсывАя общую КАРТИну нА КАКом-лИбо РынКе, обычно нАчИнАюТ с долей его

ИгРоКов. доли выражаются в процентах, и по этим числам сразу понятно: кто первый, кто

второй, кто аутсайдеры, насколько динамично развивается и увеличивает свою долю тот

или иной игрок. но откуда взять данные по долям поисковиков в Рунете? верить ли им?

Инструменты для оценки2.1. доли поисковиков

2.1.1. Количество переходов на сайты

Page 5: Ashmanov&Partners SearchAds A4 2008

5

Текущее состояние поискового рынка в Рунете

маленьких, хозяева которых просто не знают о существо-

вании счётчиков или не нуждаются в них. Впрочем, коли-

чество сайтов, охваченных статистикой Liveinternet, всё

равно очень велико, так что можно говорить о репрезента-

тивности данных.

2. Косвенный смысл поКАзАТеля. Неизвестно, как

трактовать этот показатель, ведь большое количество пе-

реходов с поисковой системы не обязательно говорит о

высоком качестве её работы или популярности у пользо-

вателей. Теоретически вполне возможна ситуация, когда

поисковая система А выдаёт на первом месте сайт, идеаль-

но соответствующий запросу пользователя, и в результате

производит только один переход на сайт. Другая поисковая

система B выдаёт некачественную, заспамленную выдачу,

заставляющую пользователя просмотреть множество сай-

тов в поиске нужного.

2.

Page 6: Ashmanov&Partners SearchAds A4 2008

6

Количество кликов в результатах поиска также прямо

зависит от качества аннотаций сайтов (или сниппетов) —

небольших фрагментов текста со страницы сайта, которые

показываются в результатах поиска. Если аннотации очень

информативны, то переходов на сайты может быть меньше.

Действительно, если пользователь вводит запрос, напри-

мер «столица Конго», он может прямо в

результатах поиска увидеть ответ на свой

вопрос, а значит, не будет переходить ни

на какие сайты.

3. КАКИх пользовАТелей учИТы-

вАТь? Есть ещё одно тонкое обстоятельс-

тво, которое нужно иметь в виду при ана-

лизе статистики переходов от Liveinternet.

Если учитывать все переходы всех поль-

зователей, то мы обнаружим равенство

долей Google и яндекса или даже, в неко-

торые периоды, превосходство Google.

В то же самое время можно с уверен-

ностью сказать, что большое количество

переходов с Google — на самом деле так

называемые idiot clicks. Это словосочета-

ние обозначает западных пользователей

Google, «залетевших» в Рунет нечаянно, случайно щёлкнув

по русскому сайту в результатах поиска (например, потому,

что увидели знакомое англоязычное название товара или

понравившуюся картинку). Такие пользователи тут же по-

кидают сайт, увидев непонятную им кириллицу, и, по сути,

пользователями Рунета не являются. Google — большая

поисковая машина с сотнями миллионов запросов в день,

поэтому даже ошибки пользователей могут составлять

большие числа в масштабе Рунета.

«ЕДИНСТВЕННым

НАДёжНым

ИНСТРУмЕНТОм

ОцЕНКИ ДОлИ

ПОИСКОВИКОВ

В РУНЕТЕ ЯВлЯЕТСЯ

СТАТИСТИКА

ПЕРЕхОДОВ

ОТ Liveinternet»

Page 7: Ashmanov&Partners SearchAds A4 2008

7

Учитывать idiot clicks для оценки доли поисковиков в

Рунете — неправильно. Если же брать анализ переходов с

поисковиков только по пользователям, имеющим россий-

ские iP-адреса, то эти данные не будут учитывать русско-

язычных пользователей Рунета из-за рубежа.

мы, тем не менее, предпочитаем именно такой срез по

российским пользователям, считая, что он ближе к истине.

Естественно, в яндексе для оценки своей доли рынка

также берут срез по российским пользователям, а в рос-

сийском Google популярна общая статистика, потому что

доля Google в ней значительно больше.

во второй половине 2008 года международная ана-

литическая компания ComScore впервые начала

измерять аудиторию Рунета.

Данные собираются на основе исследования панели, то

есть выборки из 20 тысяч российских пользователей Ин-

тернета. У этих пользователей установлено специальное

программное обеспечение ComScore — тулбар, который

работает в браузере, запоминает посещаемые пользовате-

лем сайты и передаёт данные на сервер статистики.

Аналогично тулбару ComScore работает тулбар сервиса

Alexa. Alexa — это самый популярный американский изме-

ритель трафика на сайтах, обсчитывающий посещаемость

сайтов по данным активности миллионов пользователей,

у которых установлен тулбар от Alexa. Данные Alexa для

Рунета можно использовать, учитывая две особенности:

во-первых, можно сравнивать между собой сайты, то есть

2.1.2. Панель: анализ поведения пользователей

Page 8: Ashmanov&Partners SearchAds A4 2008

8

измерять относительные значения посещаемости, а не

абсолютные, во-вторых, данные будут достоверны толь-

ко для очень посещаемых сайтов Рунета. Для небольших

сайтов данные будут сильно смещены, поскольку пользо-

вателей с тулбаром Alexa в России очень мало. К тому же

Alexa показывает данные для всего сайта целиком, то есть

можно сравнивать между собой только порталы rambler.ru

и yandex.ru, а не поисковые сервисы.

методика ComScore вызывает нарекания по двум при-

чинам:

А) мАлАя велИчИнА выбоРКИ. 20 тысяч пользовате-

лей — слишком мало для оценки всех категорий пользо-

вателей. Скажем, тулбар Алексы установлен у миллионов

пользователей.

б) выбоРКА явно смещенА. В эту выборку попадают

в основном опытные интернет-пользователи — потому что

неопытный российский пользователь вряд ли установит

себе на компьютер неизвестную ему (и бесполезную) про-

грамму с интерфейсом на английском языке. Насколько

можно судить, в первое время её устанавливали в основ-

ном сотрудники российских офисов западных компаний,

экспаты. Что заведомо даёт довольно большое смещение

выборки в пользу Google. Кроме того, есть подозрения, что

выборка охватывает в основном жителей москвы и Петер-

бурга.

Отметим, что яндекс в августе 2008 начал привлекать

аудиторию для участия в панели исследований Permission

Research (research.yandex.com), которая является подраз-

делением ComScore. Это поможет получать в будущих ис-

следованиях ComScore более точные данные по Яндексу.

По такой же схеме — установка панели на компью-

тер — измеряет аудиторию сайтов Рунета группа компа-

Page 9: Ashmanov&Partners SearchAds A4 2008

9

ний TNS. Недостатки исследований tnS такие же, как у

исследований ComScore — малая выборка и смещение в

сторону продвинутых московских пользователей Интерне-

та. И имеется такой же недостаток, как у Alexa — изме-

рение аудитории порталов в целом, без отдельного учета

популярности поиска.

ещё один источник статистики посещаемости поис-

ковиков — их собственные данные. Но мы не уде-

ляем этому источнику особого внимания, потому

что здесь есть сразу несколько проблем. Во-первых, дан-

ные собираются по-разному: в яндексе используется обра-

ботка лог-файлов серверов, а в Рамблере и Mail.ru — ис-

пользование собственных счётчиков Rambler’s Top100 и

top.mail.ru, поэтому сравнивать между собой такие данные

некорректно.

Во-вторых, получить точные данные возможно не во

всех случаях, например, из общей статистики главной

страницы Рамблера и его поиска нужно вручную вычле-

нять данные только по поиску. В-третьих, Google не пре-

доставляет вообще никакой статистики о посещаемости

своих проектов. В этом смысле Google — самый закрытый

поисковик.

Других сколько-нибудь достоверных методик измере-

ния доли поисковых систем в Рунете пока нет.

2.1.3. Собственные данные поисковиков

Page 10: Ashmanov&Partners SearchAds A4 2008

10

Итак, вот какие доли поисковых систем Рунета можно по-

лучить по данным ComScore и Liveinternet (таб. 1):

Как видим, ComScore показыва-

ет несколько большую долю у Google,

что, как говорилось выше, скорее всего,

обусловлено смещённостью выборки. С

другой стороны, даже такая смещённая

выборка на качественном уровне даёт

более-менее близкие результаты, что

подтверждает гипотезу, что в Liveinternet

нужно брать данные именно по российс-

ким пользователям.

Наиболее интересно следить за до-

лями поисковиков в динамике, посколь-

ку в распределении долей происходят

бурные события. Вот как по данным

Liveinternet менялось распределение

долей переходов с поисковых систем за

последние два года (рис. 1):

ТАблИцА 1. долИ поИсКовых сИсТем РунеТА по дАнным COMSCORe И LiveiNTeRNeT

поИсКовАя сИсТемА доля по COMSCORe, % доля по LiveiNTeRNeT, %

YAndex.ru 47 55

GooGLe.ru 28 22

rAMBLer.ru 12 10

MAiL.ru 7 9

ОСТАльНыЕ 6 4

2.2. Доли поискового рынка

«ЯНДЕКС —

лИДЕР. В 2007

гОДУ ЕгО ДОлЯ

мЕДлЕННО ПАДАлА,

В 2008 ПАДЕНИЕ

ОСТАНОВИлОСь.

GooGLe УСТОйЧИВО

РАСТёТ, В 2008

ОН СТАл ИгРОКОм

№ 2»

Page 11: Ashmanov&Partners SearchAds A4 2008

11

Как видно из этого графика, доли Google и поиска Mail.

ru устойчиво растут.

В 2007 году Google бурно рос, а яндекс в 2007 году

терял свою долю (с 60% до 55%), что заставило сторонни-

ков Google предрекать быструю смена лидера. Но яндекс в

2008 году остановил падение и даже начал немного расти.

Стало ясно, что Google каннибализирует именно Рамблер.

Доля Рамблера последние два года постоянно падает,

причём падение ускоряется. Последнее ускорение падения

могло быть связано с редизайном сайта Рамблера. После

редизайна в октябре 2008 года поиск на search.mail.ru стал

третьим в Рунете по трафикогенерации.

ЯНДЕКС GooGLe rAMBLer [email protected]

РИс. 1. пеРеходы РоссИйсКИх пользовАТелей с поИсКовых сИсТем РунеТА, Liveinernet.ru

Page 12: Ashmanov&Partners SearchAds A4 2008

12

Liveinternet также позволяет брать тематические сре-

зы по статистике переходов, то есть статистику пе-

реходов с поисковых систем на сайты определённой

тематики. Это даёт информацию к размышлению о составе

и интересах аудитории каждого из поисковиков.

Например, на сайты тематики «Знакомства и общение»

с яндекса переходят больше пользователей, и относитель-

ные доли конкурентов пока не меняются (рис. 2).

Для сайтов категории «Товары и услуги» яндекс пос-

тавляет ещё больше трафика по сравнению с Google (рис. 3).

А вот на сайты категории «Интернет» с конца 2007 года

Google раздаёт больше трафика, чем яндекс (рис. 4).

Доли рынка в тематических2.3. нишах

ЯНДЕКС GooGLe

РИс. 2. пеРеходы с яндеКсА И GOOGLe нА сАйТы КАТегоРИИ «знАКомсТвА И общенИе», Liveinernet.ru

Page 13: Ashmanov&Partners SearchAds A4 2008

13

Эти тематические срезы говорят о том, что портрет

аудитории (возраст, социальное положение, привычки) у

разных поисковых систем разный.

можно с уверенностью сказать, что среди пользовате-

лей Google больше компьютерных специалистов («гиков»,

техноманьяков), интернетчиков, профессиональная де-

ятельность которых связана с Интернетом. Это активные

пользователи, предпочитающие американские сервисы

отечественным аналогам. Они проводят в Интернете много

времени, в том числе по выходным (рис. 5).

ЯНДЕКС GooGLe

РИс. 3. пеРеходы с яндеКсА И GOOGLe нА сАйТы КАТегоРИИ «ТовАРы И услугИ», Liveinernet.ru

Page 14: Ashmanov&Partners SearchAds A4 2008

14

ЯНДЕКС GooGLe

РИс. 4. пеРеходы с яндеКсА И GOOGLe нА сАйТы КАТегоРИИ «ИнТеРнеТ», Liveinernet.ru

«В АУДИТОРИИ GooGLe бОльшЕ ДОлЯ

ТЕхНОмАНьЯКОВ И ИНТЕРНЕТЧИКОВ,

А У ЯНДЕКСА бОльшЕ ОфИСНОгО

ПлАНКТОНА. ПОЭТОмУ ДОлЯ ЯНДЕКСА

ПО ВыхОДНым ПАДАЕТ НА 5 – 10%,

А ДОлЯ GooGLe СООТВЕТСТВЕННО

РАСТёТ»

Page 15: Ashmanov&Partners SearchAds A4 2008

15

Напротив, среди пользователей яндекса больше обыч-

ных пользователей, офисных сотрудников и студентов, это

непрофессионалов в высоких технологиях, которые поль-

зуются Интернетом преимущественно из офиса (поэтому

по выходным дням доля Google вырастает на 5-10% за счет

уменьшения доли Яндекса.

ЯНДЕКС GooGLe

РИс. 5. КолебАнИя долей пеРеходов с яндеКсА И GOOGLe по выходным дням, Liveinernet.ru

«В “РАЗВлЕЧЕНИЯх, ЗНАКОмСТВАх

И ТОВАРАх” ЯНДЕКС гЕНЕРИТ бОльшЕ

ТРАфИКА, ЧЕм GooGLe. В КАТЕгОРИИ

“ИНТЕРНЕТ” гУгл УжЕ лИДЕР»

Page 16: Ashmanov&Partners SearchAds A4 2008

16

Контекстная реклама бывает по-

исковой и контекстно-чувстви-

тельной. Поисковая контекст-

ная реклама показывается на странице

результатов поиска и зависит от вводи-

мого запроса. Контекстно-чувствитель-

ная реклама показывается на сайтах,

входящих в рекламные сети, и зависит

от тематики веб-страницы.

Заметных игроков на рынке кон-

текстной рекламы в Рунете три — ян-

декс.директ, бегун и Google AdWords.

Первые две компании вместе занима-

ют большую часть рынка.

По разным оценкам, объем рынка

контекстной рекламы в России в 2008

году составит 370 – 380 миллионов

долларов. Из них примерно 220 млн.

достанутся яндексу, примерно 120

млн. — бегуну. Доходы Google здесь

практически невидимы (скорее всего,

они составляют максимум 10 – 15 мил-

лионов долларов).

КонТеКсТнАя РеКлАмА — это рекламные

объявления, которые зависят от тематики

страницы, на которой показывается реклама.

Page 17: Ashmanov&Partners SearchAds A4 2008

17

Доходы яндекса на 80% состоят из доходов от продаж

контекстной рекламы, для бегуна контекстная реклама яв-

ляет единственным источником доходов.

летом 2008 года Google сделал энергичную попытку

изменить структуру рынка и сделал предложение о покуп-

ке бегуна компании Рамблер за 140 миллионов долларов.

В этой ситуации Google получил бы готовую сильную

команду продавцов контекстной рекламы, несколько де-

сятков тысяч рекламодателей бегуна и несколько тысяч

площадок, на которых установлен код этой рекламной

системы. Однако в октябре 2008 г. федеральная Антимо-

нопольная Служба Рф заблокировала эту сделку.

Рынок контекстной рекламы в Рунете3.

«В 2007 гОДУ КОНТЕКСТНО-

ЧУВСТВИТЕльНАЯ РЕКлАмА былА

УСТАНОВлЕНА лИшь НА 5% САйТОВ.

В ОКТЯбРЕ 2008 ТАКИх САйТОВ

СТАлО 10%»

Page 18: Ashmanov&Partners SearchAds A4 2008

18

Распространённость систем3.1. контекстной рекламы в Рунете

воктябре 2007 года партнёр компании «Ашманов

и партнеры» и известный исследователь Рунета

Алексей Тутубалин в рамках своего проекта «Чер-

ный квадрат» (www.rukv.ru) провел исследование сайтов в

доменах ru и Su, чтобы оценить распространённость сис-

тем контекстной рекламы на сайтах Рунета.

Для исследования были выкачаны главные страницы и

по 2 внутренних страницы с «живых» сайтов в доменах ru

и Su. Затем были выявлены установленные на этих стра-

ницах системы контекстной рекламы.

Всего исследовалось 868 944 сайта, из них контекстная

реклама обнаружилась на 43 953 сайтах, то есть всего на

5%. Из этих 43 953 сайтов системы контекстной рекламы

распределились следующим образом: Google AdSense —

57%, бегун — 41%, яндекс — 16% (сумма больше 100%,

потому что на одном сайте можно устанавливать контекс-

тную рекламу от разных систем одновременно), таб. 2.

По результатам новейшего исследования Алексея Ту-

тубалина в октябре 2008 года были получены новые, акту-

ТАблИцА 2. доля сАйТов с Кодом сеТИ в 2007 году

РеКлАмнАя сеТь доля сАйТов, %

GooGLe AdSenSe 57

бЕгУН 41

РЕКлАмНАЯ СЕТь ЯНДЕКСА 16

Page 19: Ashmanov&Partners SearchAds A4 2008

19

альные данные по состоянию систем контекстной рекламы в Рунете.

Всего в октябре 2008 было проанализировано 1 099 883 сайта. Контекстная реклама обнаружилась на 10% сайтов (107 055 сайтов). Таким образом, доля сайтов с контекс-тной рекламой выросла за год в два раза!

Из этих 107 055 сайтов системы контекстной рекламы распределились следующим образом: Google AdSense — 64%, бегун — 29%, яндекс — 22% (сумма больше 100%, потому что на одном сайте можно устанавливать контекс-тную рекламу от разных систем одновременно), таб. 3.

мы видим некоторое перераспределение сайтов в пользу Рекламной сети яндекса и двукратный рост коли-чества кодов всей контекстной рекламы в Рунете.

Таким образом, можно сказать, что контекстная рек-лама очень быстро захватывает Рунет, причём рост во многом обеспечен ростом Рекламной сети яндекса, значи-тельно снизившего требования к сайтам для вхождения в

рекламную сеть.

ТАблИцА 3. доля сАйТов с Кодом сеТИ в 2008 году

РеКлАмнАя сеТь доля сАйТов, %

GooGLe AdSenSe 64

бЕгУН 29

РЕКлАмНАЯ СЕТь ЯНДЕКСА 22

Page 20: Ashmanov&Partners SearchAds A4 2008

20

Из открытой статистики счётчи-

ка Rambler’s Top100 по каж-

дому сайту с установленными

системами контекстной рекламы была

взята его посещаемость. были полу-

чены следующие оценки трафика рек-

ламных систем, выраженные в доле

показов рекламных блоков, таб. 4:

В октябре 2008 года доли трафика

систем контекстной рекламы измени-

лись следующим образом, таб. 5:

Как видим, яндекс кардинально

увеличил долю трафика своей реклам-

ной сети, в основном за счёт быстрого

роста рекламной сети и частично за счёт

бегуна.

Доля систем контекстной 3.2. рекламы по трафику

«РЕКлАмНАЯ

СЕТь ЯНДЕКСА

К ОКТЯбРю 2008

гОДА ОбгОНЯЕТ

бЕгУН В ТРИ РАЗА

ПО ТРАфИКУ.

гУгл СОхРАНЯЕТ

СВОю ДОлю»

Page 21: Ashmanov&Partners SearchAds A4 2008

21

ТАблИцА 4. доля в общем чИсле поКАзов РеКлАмных блоКов в 2007 году

РеКлАмнАя сеТь доля по ТРАфИКу, %

GooGLe AdSenSe 47

бЕгУН 24

РЕКлАмНАЯ СЕТь ЯНДЕКСА 29

ТАблИцА 5. доля в общем чИсле поКАзов РеКлАмных блоКов в 2008 году

РеКлАмнАя сеТь доля по ТРАфИКу, %

GooGLe AdSenSe 45

бЕгУН 10.3

РЕКлАмНАЯ СЕТь ЯНДЕКСА 44

Page 22: Ashmanov&Partners SearchAds A4 2008

22

Влияет ли качество поиска4.1. на долю рынка?

Разработчики большинства

поисковиков без колебаний

отвечают на этот вопрос ка-

тегорическим «да». Они считают, что

качество — это главная, самая важная

причина популярности поисковика.

В корпоративной легенде Google

качество — это единственное, что

дало ему мировое господство на по-

исковом рынке. У нас на этот счёт

мнение более умеренное, поскольку

несомненно, что маркетинг и реклама

также крайне важны.

На наш взгляд, качество (опирав-

шееся на инновационную для того

времени концепцию учёта ссылок

PageRank) было очень важно, но не

менее важную роль в успехе Google

сыграли:

КАчесТвом поИсКА мы нАзывАем удовлеТвоРенИе поТРебносТИ пользовАТелей

в поИсКе нужной (РелевАнТной) ИнфоРмАцИИ в сеТИ. в более узком смысле под ка-

чеством поиска понимается релевантность поисковой выдачи, то есть количество сайтов,

отвечающих на заданный пользователем запрос. влияет ли качество поиска на долю поис-

ковиков? Это не такой простой вопрос.

Page 23: Ashmanov&Partners SearchAds A4 2008

23

1) ТехнИчесКое РАзвИТИе: пост-

роение ферм компьютеров и собствен-

ной распределённой файловой системы,

позволившие справиться с бурным рос-

том Интернета в 2000 – 2008 гг.,

2) ЭнеРгИчное пРодвИженИе

Google как самой научной, «заводной»,

свободной и раскованной поисковой сис-

темы, «этичной», без рекламы и «втюхи-

вания»;

3) щедРое венчуРное фИнАн-

сИРовАнИе как раз на фоне краха ин-

тернет-пузыря 1999 – 2000 годов, когда

прочие конкуренты-поисковики были в

упадке или вообще закрылись.

Корпоративная легенда яндекса также опирается на

идею категорического технологического превосходства

яндекса, доставившего ему победу на поисковом рынке

Рунета.

Качество поиска: способы оценки и динамика4.

«КАЧЕСТВО

ПОИСКА ЯВлЯЕТСЯ

НЕОбхОДИмым

УСлОВИЕм УСПЕхА

ПОИСКОВИКА,

А мАРКЕТИНг

И ПИАР —

ДОСТАТОЧНым»

Page 24: Ashmanov&Partners SearchAds A4 2008

24

И здесь также мы считаем, что качество играло важную,

но отнюдь не единственную и даже не главную роль. Авто-

ры этого отчёта (партнёры компании «Ашманов и партне-

ры») наблюдали изнутри историю соперничества Рамблера

и яндекса в 1999 – 2000 годах, когда Рамблер был безуслов-

ным лидером, не имея технического превосходства, а потом

снаружи — в 2002 – 2003 годах, когда качество поиска Рам-

блера и яндекса было сравнимо, и, тем не менее, Рамблер

быстро потерял своё место безусловного лидера в Рунете.

мы считаем, что маркетинг как минимум не менее ва-

жен. В истории яндекса массированные рекламные кампа-

нии, продвижение и маркетинг, а также доступ к необхо-

димым для развития венчурным деньгам ровно в момент

падения доткомов и интернет-зимы 2001 – 2002 годов, сыг-

рали не менее важную роль, чем в истории Google.

Сформулируем наше мнение так: качество поиска яв-

ляется необходимым условием успеха поисковика, а мар-

кетинг и пиар — достаточным.

В любом случае какая-то корреляция качества и доли

наблюдается и сейчас в Рунете: в 2007 – 2008 годах мы на-

блюдали сначала доминирование Google по качеству по-

иска и быстрый рост его доли рынка, яндекс же в этот пе-

риод имел худшее качество и медленно падающую долю,

а затем начался бурный рост качества поиска яндекса и

падение его доли остановилось.

Впрочем, игроки рынка не улучшают качество поиска

в вакууме, и параллельно, конечно, энергично вкладыва-

ются в рекламу и пиар, а также в развитие боковых «пор-

тальных» проектов, так что картина сейчас, как и раньше,

неизбежно смешанная.

Теперь поговорим подробнее о том, что же такое ка-

чество поиска и как его оценивать.

Page 25: Ashmanov&Partners SearchAds A4 2008

25

Качество поиска невозможно оценить «на глаз»,

прежде всего потому, что у каждого пользователя

свои привычки поиска и склонность к своему типу

запросов. Для кого-то лучше ищет Google, а для кого-то —

Рамблер. Для объективной количественной оценки нужна

теория оценки и система независимых тестов.

мы создали такую достаточно простую методику и ле-

том 2007 года запустили наши Анализаторы качества по-

исковиков, доступные на сайте по адресу www.analyzethis.

ru. В настоящее время эти анализаторы — единственный

независимый тест качества поиска в Рунете.

Помимо качества поиска, анализаторы оценивают ус-

тойчивость поисковых систем к различным видам прес-

синга вебмастеров, а также показывают данные об об-

новлении индекса поисковых систем — так называемых

апдейтах. Подробное описание работы всех анализаторов

вы найдете в приложении. Для оценки качества по различ-

ным срезам мы создали анализаторы для разных пользо-

вательских моделей поиска.

4.2. Как оценить качество поиска?

«КАЧЕСТВО НА глАЗ ОцЕНИТь НЕВОЗмОжНО.

КАжДый ПОльЗОВАТЕль ИмЕЕТ СВОИ

ПРИВыЧКИ ПОИСКА И СКлОННОСТь К СВОЕмУ

ТИПУ ЗАПРОСОВ»

Page 26: Ashmanov&Partners SearchAds A4 2008

26

мы делим запросы к поисковым системам на три

основных типа: навигационные, транзакцион-

ные и информационные.

• нАвИгАцИонный зАпРос — это запрос типа «где?».

Его задает пользователь, который уже знает, что ему нуж-

но, на какой именно сайт он хочет попасть. Таковым явля-

ется, например, запрос «сайт Сбербанка».

• ИнфоРмАцИонный зАпРос —

это запрос типа «Что?». Он выражает

потребность пользователя получить

какую-то информацию, независи-

мо от места её расположения в сети.

Например, запрос «день рождения

Пушкина».

• ТРАнзАКцИонный зАпРос —

вопрос типа «Что сделать?». Он отра-

жает желание пользователя что-то сде-

лать, например, «купить телевизор».

На навигационный запрос в боль-

шинстве случаев заведомо существует

один правильный ответ, ожидаемый

пользователем от поисковой системы.

Так, по запросу «библиотека мошко-

ва» должен выдаваться именно сайт

библиотеки lib.ru. На транзакционный

и информационный запрос единствен-

ного верного ответа обычно не бывает, правильных отве-

том много, ведь информационный запрос — это не только

Типы запросов и качество4.3. поиска

для нАшИх АнАлИзАТоРов

мы выбРАлИ меТодИКу мАР-

КеРов. Маркеры — это поис-

ковые запросы определённого

типа, для которых известно, ка-

кого примерно результата сле-

дует ожидать от поисковиков.

мы используем сотни и тысячи

маркеров, состав которых ме-

няется каждый день.

4.4. Как работают

Page 27: Ashmanov&Partners SearchAds A4 2008

27

простой «день рождения Пушкина», но и, например, «ре-

цепт салата Оливье».

Конечно, существуют также и «смешанные» типы за-

просов, про которые нельзя сказать точно, что именно

хочет пользователь. Например, запрос «Samsung d900»

может быть задан как с целью купить данную модель мо-

бильного телефона, так и с целью найти его описание или

руководство пользователя.

Что же считать качеством поис-

ка? У нас нет единого ответа на этот

вопрос, как, впрочем, нет его и у поль-

зователей. Некоторые пользователи

используют поисковики исключитель-

но для поиска нужных им сайтов, а

другие — только для покупок. Естест-

венно, если один поисковик лучше об-

рабатывает навигационные запросы,

а другой — транзакционные, то они

будут нравиться разным категориям

пользователей.

Чтобы не вызывать нареканий на

методику и не испытывать давления

Pr-служб поисковиков (для которых

единый независимый показатель ка-

чества очень неудобен), мы пока не

стали выводить единый показатель

качества поиска, а сделали несколько анализаторов — по

одному на каждый вид поиска.

Подробнее о принципах работы

анализаторов можно посмот-

реть в Приложении.

мы запустили анализато-

ры летом 2007 года и с тех пор

наблюдаем динамику развития

поисковых алгоритмов основ-

ных игроков поискового рынка

Рунета. Вот какие результаты

показывают наши анализаторы

за 2008 год.

анализаторы

Page 28: Ashmanov&Partners SearchAds A4 2008

28

4.5. Навигационное качество

яндекс в 2008 году — абсолютный

лидер в навигационном поиске (за-

метим, что в 2007 году лидером был

Google), это видно на рис.  6. Второе место

Google далеко не столь прочно, молодой и

амбициозный Gogo.ru вырвался вперед в тот

период, когда Google немного потерял в ка-

честве «навигации». Потом он опять оказался

третьим, а совсем недавно его обогнал Рам-

блер, к которому подключили «вертикальный

поиск» (см. посвященный Рамблеру раздел

главы о новостях поиска).

РИс. 6. КАчесТво поИсКА по нАвИгАцИонным зАпРосАм в поИсКовИКАх РунеТА в i-iii КвАРТАлАх 2008

ЯНДЕКС GooGLe rAMBLer GoGo

Page 29: Ashmanov&Partners SearchAds A4 2008

29

Анализатор качества те-

матического поиска оце-

нивает выдачу поисковых

систем на предмет разнообразия

выдачи, то есть того, насколько

широко она охватывает тематику

запроса. Например, мы считаем,

что по запросу «автомобили» в

выдаче поисковой системы долж-

ны найтись и автосалоны, и сайты

компаний, сдающих автомобили

в аренду, и сайты с информацией

Качество4.6. тематического поиска

РИс. 7. КАчесТво поИсКА по ТемАТИчесКИм зАпРосАм в поИсКовИКАх РунеТА в i-iii КвАРТАлАх 2008

ЯНДЕКС GooGLe rAMBLer GoGo APort YAhoo

о разнообразных марках машин,

тест-драйвами и т.п.

Как видно на графике (рис. 7),

в лидеры по тематическому поис-

ку этим летом неожиданно вы-

рвался Gogo.ru, поисковик компа-

нии Mail.ru. Вместе с ним лидеры

поиска в Рунете — Google и ян-

декс — составляют тройку поис-

ковых систем с самым хорошим

тематическим поиском. Осталь-

ные игроки заметно отстают.

Page 30: Ashmanov&Partners SearchAds A4 2008

30

понять, какой запрос явля-

ется информационным,

довольно трудно. В как

бы информационном запросе мо-

жет быть «зашит» также интерес

части пользователей найти конк-

ретный сайт или что-то купить.

Чтобы точно оценить качес-

тво обработки информационных

запросов, мы взяли узкий класс

заведомо информационных за-

просов и создали Анализатор ка-

чества поиска цитат.

Цитатный поиск — поиск кон-

кретного текста по его фрагменту,

а именно точной цитате. Обычно

таким образом ищут тексты лите-

РИс. 8. КАчесТво цИТАТного поИсКА в поИсКовИКАх РунеТА в i-iii КвАРТАлАх 2008

ЯНДЕКС GooGLe rAMBLer GoGo Live.CoM YAhoo

Качество информационного 4.7. поиска, цитаты

ратурных произведений. мы счита-

ем, что поисковик с хорошей обра-

боткой информационных запросов

должен как можно выше ставить в

выдаче страницу, на которой опуб-

ликован текст, содержащий цитату.

главным специалистом по по-

иску цитат оказался Google (рис. 8).

яндекс за вторую половину 2008

года значительно улучшил качес-

тво цитатного поиска. Неожидан-

но хорошие результаты показал

Live.com от Microsoft. Gogo.ru и

Рамблер прогрессируют, но очень

незначительно, даже Yahoo обго-

няет их в Рунете по способности

выдавать источник цитаты.

Page 31: Ashmanov&Partners SearchAds A4 2008

31

Анализатор качества подска-

зок показывает, насколько

эффективно поисковики по-

могают своим пользователям (рис. 9).

У Google качество подсказок ста-

бильно высокое; яндекс — лидер ка-

тегории — постоянно это качество по-

вышает; неплохо подсказывает Апорт,

а Gogo.ru летом пережил резкий взлёт

качества подсказок (разработчики об-

новили «подсказывающий» алгоритм)

и занимает теперь третье место. ве-

бальта, как видно на графике, в апре-

ле 2008 года прекратила работу.

4.8.1. Качество подсказок

пользовАТелИ поИсКовИ-

Ков очень чАсТо ошИбАюТ-

ся, вводя зАпРосы в сТРо-

Ку поИсКА. Списки запросов к

поисковикам полны как опеча-

ток, так и неграмотных написа-

ний слов. хороший поисковик

должен быть устойчивым к

ошибкам своих пользователей.

У поисковика есть два способа

реагировать на ошибки: пред-

лагать подсказки правиль-

ного написания слов, чтобы

пользователь выбрал нужный

вариант, или просто сразу от-

правляться искать правильное

слово. Для оценки того, как по-

исковики справляются с этой

задачей, мы создали два ана-

лизатора обработки опечаток.

Качество4.8. исправления опечаток

«ПРИ ВВОДЕ ЗАПРОСОВ

ПОльЗОВАТЕлИ

ОшИбАюТСЯ

В 15% СлУЧАЕВ.

ПОИСКОВИК мОжЕТ

лИбО САм ИСПРАВИТь

ОПЕЧАТКУ, лИбО

ПРЕДлОжИТь

ПОльЗОВАТЕлю

ВАРИАНТы ЗАмЕНы»

Page 32: Ashmanov&Partners SearchAds A4 2008

32

ванализаторе устойчивос-

ти к опечаткам сравнива-

ется поисковая выдача по

запросу, напечатанному правиль-

но, и по нескольким вариантам

возможных написаний с опечатка-

ми. Оценивается степень близос-

ти поисковой выдачи по запросу

4.8.2. Устойчивость к опечаткам

с опечаткой к выдаче по правильному

запросу (рис. 10).

яндекс и с недавнего времени

Gogo.ru оказались абсолютными ли-

дерами по качеству автоматическо-

го исправления опечаток в запросах.

Остальные поисковики обрабатывают

ошибочные запросы плохо.

РИс. 9. уРовень КАчесТвА подсКАзоК в поИсКовИКАх РунеТА в февРАле-сенТябРе 2008

ЯНДЕКС GooGLe rAMBLer GoGo APort weBALtA

«мЕНьшЕ ВСЕгО СПАмА В ЯНДЕКСЕ,

бОльшЕ ВСЕгО В YAhoo. GooGLe И

РАмблЕР — СЕРЕДНЯЧКИ»

Page 33: Ashmanov&Partners SearchAds A4 2008

33

Кроме пользователей и поисковиков в Интернете

действует третья сила — вебмастера и владельцы

сайтов. У них в отношении поисковиков есть свои

интересы — а именно, получить как можно более высокий

рейтинг в результатах поиска, поскольку это даёт целевых

посетителей и в конечном итоге деньги.

Продвижение сайта в поисковиках называется поиско-

вой оптимизацией. Существуют также поисковые спамеры,

которые продвигают в поисковиках специальные техничес-

кие страницы, предназначенные для зарабатывания денег.

Для понимания ситуации с качеством поиска и давлением

вебмастеров на поисковики, важно различать оптимизато-

ров и поисковых спамеров.

Оптимизаторы (SEO-специалисты ) — это консультанты

по интернет-маркетингу, оказывающие услуги по продви-

4.9. Спамеры и оптимизаторы

РИс. 10. уРовень усТойчИвосТИ К опечАТКАм в поИсКовИКАх РунеТА в февРАле-сенТябРе 2008

ЯНДЕКС GooGLe rAMBLer GoGo APort

Page 34: Ashmanov&Partners SearchAds A4 2008

34

жению сайтов. У оптимизаторов есть клиенты, тратящие

довольно много ресурсов на свои сайты. Сайты клиентов

оптимизаторов — обычно качественные, полезные, часто

обновляющиеся. Как правило, продвигаемые оптимизато-

рами сайты релевантны запросу пользователя и содержат

актуальную информацию. С точки зре-

ния поисковика обычно неважно, какой

сайт поставить первым в результатах

поиска — поскольку все они примерно в

одинаковой степени релевантны запро-

су, особенно транзакционному.

Однако большое количество оптими-

зированных сайтов в выдаче поискови-

ков может приводить к «коммерциализа-

ции» выдачи, поскольку некоммерческие

проекты обычно не имеют сравнимых

финансовых и человеческих ресурсов

для продвижения.

Поисковые спамеры — это самосто-

ятельные интернет-деятели, зарабатыва-

ющие на «краже» трафика из поисковых

систем и продаже его системам контекс-

тной рекламы или партнёрским сетям.

У них нет клиентов, спамеры обычно

продвигают в поисковиках спам, то есть

«мёртвые» сайты, технические вебстра-

ницы, как правило, с синтезированным содержанием, с

целью захвата пользовательского трафика и перенаправ-

ления его на рекламу или в партнёрские сети. массовое

применение спамерских технологий приводит к тому, что в

современном Интернете чудовищно много бессмысленных

страниц, псевдосайтов, фальшивых каталогов, загажен-

«ОПТИмИЗАТОРы

РАбОТАюТ ДлЯ

КлИЕНТОВ И

ПРОДВИгАюТ

РЕлЕВАНТНыЕ,

жИВыЕ САйТы.

СПАмЕРы

РАбОТАюТ НА СЕбЯ

И ЗАмУСОРИВАюТ

СЕТь фАльшИВымИ

СТРАНИцАмИ»

Page 35: Ashmanov&Partners SearchAds A4 2008

35

ных гостевых книг и форумов (по нашим оценкам, 70 – 90%

всех вебстраниц — спам).

Поисковики обычно довольно напряжённо борются с

деятельностью поисковых спамеров, загрязняющих вы-

дачу, и почти не замечают оптимизаторов (как раз по той

причине, что сайты оптимизаторов — настоящие и реле-

вантны запросам).

Конечно, существует и промежуточная зона так назы-

ваемой «чёрной оптимизации», где оптимизаторы продви-

гают сайты своих клиентов с использованием спамерских

методов. Это довольно рискованный бизнес, часто приво-

дящий к санкциям поисковиков против сайтов клиентов.

Поисковый спам — это совокупность технологий обмана

поисковиков, которые используются для повышения

рейтинга вебстраницы в результатах поиска поисковых

систем.

Наш анализатор поискового спама выделяет следую-

щие категории поискового спама:

• doorway — дорвеи, страницы, не имеющие самоцен-

ного содержания и существующие только для перена-

правления пользователя на другой сайт;

• spamcatalog — спамерские каталоги;

• spamcontent — спамерский заимствованный контент;

• pseudosite — сайт, маскирующийся под корпоратив-

ный («псевдофирма»);

• catalog — каталоги;

• board — доски объявлений;

• domainsale — домены на продажу;

• secondary — вторичный, заимствованный контент;

4.9.1. Что такое поисковый спам

Page 36: Ashmanov&Partners SearchAds A4 2008

36

• partner — любые партнерские программы;

• linksite — сайты, на котором размещаются «ссылочные свал-

ки», ссылки для наращивания авторитетности других сайтов;

• spamforum — заспамленный форум;

• techspam — технический спам;

• searchres — результаты поиска.

Анализатор оценивает долю вышеописанных видов спама в

поисковой выдаче. лучшим в данном тесте является поисковик с

наименьшим показателем уровня спама. Динамика уровня поис-

кового спама за 2008 год видна на рис. 11.

На графике видно, что меньше всего поискового спама в ян-

дексе, больше всего — в Yahoo. Очевидно, это отражает количес-

тво усилий компаний по подавлению русскоязычного спама.

На протяжении всего 2008 года ситуация менялась незначи-

тельно. Заметно только увеличение количества спама в поиско-

вике Live.com с мая по август и нестабильная ситуация в Yahoo.

РИс. 11. КолИчесТво РуссКоязычного спАмА в поИсКовИКАх в i-iii КвАРТАлАх 2008

ЯНДЕКС GooGLe rAMBLer GoGo Live.CoM YAhooРИс. 13. уРовень АпдейТов в поИсКовИКАх в i-iii КвАРТАлАх 2008

Page 37: Ashmanov&Partners SearchAds A4 2008

37

Количество русскоязычного поискового спама в Google постепен-

но снижается.

Анализатор давления оптимизаторов на поисковую выда-

чу (Seo-прессинга) — это «анализатор коммерциализи-

рованности выдачи».

Часто результатом деятельности Seo-специалистов стано-

вится то, что в поисковой выдаче на первых позициях можно най-

ти только «продающие» сайты.

Например, набирая в поисковике по-

исковый запрос «цветы», пользователь

может рассчитывать увидеть в выдаче

4.9.2. Давление оптимизаторов

«ПОИСКОВый

СПАм — ЭТО

мЕТОДы ОбмАНА

ПОИСКОВИКОВ ДлЯ

КРАжИ ТРАфИКА

С НИх. ОСНОВНыЕ

ВИДы СПАмА —

ВОРОВАННый

КОНТЕНТ, ДОРВЕИ,

ПСЕВДОСАйТы,

СПАм-КАТАлОгИ»

РИс. 13. уРовень АпдейТов в поИсКовИКАх в i-iii КвАРТАлАх 2008

Page 38: Ashmanov&Partners SearchAds A4 2008

38

сайт о сортах и выращивании цветов, о составлении буке-

тов и значении каждого цветка в букете и другую познава-

тельную информацию.

Но, например, в яндексе выдача по запросу «цветы»

столь активно «обрабатывается» оптимизаторами, что

чуть ли не до пятидесятой позиции показываются только

предложения доставки цветов по москве и другим круп-

ным городам.

Обычно такая ситуация складывается с информаци-

онными запросами. Качественная поисковая система по

запросам такого типа должна предлагать пользователю

выдачу с широким набором разной информации. Seo-

прессинг сужает этот охват до одной-единственной кате-

гории: коммерческих сайтов. Поисковые системы должны

уметь с этим бороться.

ЯНДЕКС GooGLe rAMBLer GoGo Live.CoM YAhoo

РИс. 12. уРовень «КоммеРцИИ» в выдАче поИсКовИКов в i-iii КвАРТАлАх 2008

APort

Page 39: Ashmanov&Partners SearchAds A4 2008

39

Наименее коммерциализована поисковая выдача в

Yahoo, причем на протяжении 2008 года уровень Seo-

прессинга в Yahoo только снижался (рис. 12). больше всего

«коммерции» в яндексе и Рамблере, это можно объяснить

популярностью этих поисковиков в Рунете. Обновления

поисковых алгоритмов Яндекса летом-осенью 2008 года

пошли ему на пользу — давление со стороны оптимизато-

ров удалось немного снизить.

Уровень комерциализации Google в Рунете медленно

растёт. Внимание оптимизаторов к Google растёт вместе с

ростом трафикогенерации этой поисковой системы.

ЯНДЕКС GooGLe rAMBLer GoGo Live.CoM YAhoo

РИс. 13. доля «сАйТов для взРослых» в выдАче поИсКовИКов в Июле-сенТябРе 2008

APort

4.10. Уровень порнографии

Page 40: Ashmanov&Partners SearchAds A4 2008

40

Анализатор порнографии про-

веряет выдачу поисковых

систем по запросам, которые

могут трактоваться двояко — и как

относящиеся к порнографии, и как

совершенно безобидные. Например,

запрос «киски» или «любители». Уро-

вень «порнографичности» поисковой

системы — это доля сайтов в выдаче,

которые можно отнести к тематике

«только для взрослых». Выше нахо-

дятся поисковики, у которых порног-

рафии больше.

Наш анализатор уровня порног-

рафии был запущен в мае 2008 года

(рис. 13).

Абсолютные чемпионы по уровню

порнографии — яндекс и Рамблер,

причём последний за август выбился

вперед. На роль «семейных» поиско-

виков, которыми можно давать поль-

зоваться детям, претендуют Yahoo и

Page 41: Ashmanov&Partners SearchAds A4 2008

41

Основные новости и события поисковиков Рунета5.

Gogo.ru, который этим летом победил

порно одним решительным изменени-

ем алгоритма.

Google показывает любопытную

тенденцию к стремительному росту

порнографизации в Рунете. В целом,

снижается этот показатель только у

яндекса и Gogo.ru. Остальные поиско-

вые системы либо не поставили себе

целью уменьшить количество «сайтов

для взрослых» в выдаче, либо пока не

преуспевают в достижении этой цели.

«ЯНДЕКС И GooGLe

ПРОДВИгАюТ

СВОй ПОИСК

КАК ОТВЕТ НА

любыЕ ВОПРОСы,

А РАмблЕР

ПРОДВИгАЕТ СЕбЯ

КАК ПОРТАл, гДЕ

ЕСТь ВСё НА ВСЕ

ВКУСы»

Page 42: Ashmanov&Partners SearchAds A4 2008

42

все три основных поисковика — яндекс, Google,

Рамблер — в 2008 году провели массированные

рекламные кампании в офлайне. Отличия кампа-

ний заключаются в позиционировании своих продуктов:

Яндекс и Google продвигают поиск как ответ на любые воп-

росы, а реклама Рамблера продвигает вообще портал, как

место, где есть всё.

Google размещал наружную рекламу, а также постеры

и баннеры в заведениях общепита с полезной контекстной

информацией и отправлял на поиск за подробностями. ян-

декс размещал рекламные модули в метро и билборды на

дорогах — выдумка рекламщиков Яндекса была в том, что

на модулях были только ответы на всем известные воп-

росы. По отзывам пользователей, задумка Яндекса оказа-

лась интереснее.

5.1. Яндекс

Page 43: Ashmanov&Partners SearchAds A4 2008

43

летом 2007 года поисковик яндекса довольно

сильно проигрывал Google по качеству поиска (по

данным наших анализаторов), доля поисковика

заметно и стабильно падала.

Осенью 2007 года и в 2008 году яндекс серьёзно занял-

ся повышением качества поиска. Для решения этой задачи

специалисты Яндекса, помимо совершенствования самих

индексно-поисковых алгоритмов, вплотную занялись ра-

ботой с поисковыми запросами пользователей, ввели об-

работку опечаток и подсказки для пользователей.

Новости, касающиеся непосредственно поисковых тех-

нологий, яндекс предпочитает освещать минимально. Тех

же принципов относительно самого главного придержива-

ются, впрочем, и остальные поисковые системы. В блоге

для вебмастеров поисковая команда Яндекса анонсирует

запуски новых версий поискового алгоритма и очень крат-

ко освещает их главные отличия от предыдущих версий. В

2008 году таких выпусков новых версий было два (Яндекс

назвал их именами городов, находка и магадан).

ТехнологИчесКИе улучшенИя. Чтобы помочь лю-

дям искать и находить, яндекс в 2008 году добавил к по-

иску следующие возможности:

• АвТомАТИчесКое ИспРАвленИе опечАТоК. Если

пользователь набирает в строке запроса слово, ошибоч-

ность которого очевидна, как и его правильная форма,

яндекс автоматически ищет по этой правильной форме.

Например, при запросе «карова» пользователь получит

поисковую выдачу по запросу «корова». Если же правиль-

Page 44: Ashmanov&Partners SearchAds A4 2008

44

ный вариант написания не очевиден, на-

пример, задан запрос «каров» (то есть

непонятно, «коров» это или «кров»),

пользователь увидит выдачу по своему

запросу, а сверху будет ссылка «возмож-

но, вы искали «коров»?», кликнув по ко-

торой пользователь увидит результаты

поиска «коров».

• подсКАзКИ в поИсКовой сТРо-

Ке. Теперь, когда пользователь набирает

первые буквы запроса в яндексе, ему ав-

томатически выдаётся список наиболее

популярных запросов, начинающихся на

те же буквы. Если запрос имеет навига-

ционный характер, например, «сайт сбер-

банка», ссылка на сайт Сбербанка будет

прямо в подсказках, так, что пользова-

телю вообще не придётся делать поиск.

Подобная возможность уже несколько

лет есть в поиске Google.

• улучшеннАя обРАбоТКА Родс-

Твенных слов. Теперь яндекс понимает,

что «московские музеи» и «музеи моск-

вы» — это один и тот же запрос. Яндекс научился отож-

дествлять некоторые переходы одной части речи в другую

(существительное «москва» в прилагательное «московс-

кий»).

• АлгоРИТм РАсКРыТИя АббРевИАТуР, благодаря

которому по запросу «мгу» выдаются и сайты, отвечаю-

щие запросу «московский государственный университет».

• обРАбоТКА ТРАнслИТА: распознаются и конвертиру-

ются запросы, набранные транслитом (mercedec –> мерседес).

«В 2008 гОДУ

ЯНДЕКС ЭНЕРгИЧНО

РАЗВИВАл

ТЕхНОлОгИИ,

ВышЕл ЗА

ПРЕДЕлы РУНЕТА,

А ТАКжЕ ПОКУПАл

КОмПАНИИ

И КОмАНДы,

ОСТАНОВИл

ПАДЕНИЕ ДОлИ

РыНКА. НО НЕ СмОг

ВыйТИ НА бИРжУ»

Page 45: Ashmanov&Partners SearchAds A4 2008

45

пРИобРеТенИе пРоеКТов. В июле 2008 года яндекс

завершил сделку по покупке компании смИлинк, кото-

рая собирает и предоставляет информацию о пробках на

дорогах. В начале 2008 года Яндекс приобрел программу

Punto Switcher, которая автоматически исправляет ввод с

неправильной раскладкой клавиатуры, и начал её актив-

но рекламировать. В октябре к Яндексу присоединилась

компания медиаселлинг, которая занимается разработкой

технологий для медийной рекламы в Интернете.

поИсК по вИдео. В июле яндекс открыл бета-версию

поиска по видео-роликам. Поиск ведется по базам несколь-

ких десятков основных видео-хостингов. Пока яндекс.ви-

део не вышел из беты, но после выхода финальной версии

можно ожидать появления ссылки «Видео» над строкой

поиска Яндекса.

выход зА пРеделы РунеТА. Второе важное направ-

ление развития поиска яндекса в 2008 году — поддержка

международных стандартов, добавление в индекс сайтов

на иностранных языках, расширение вовне из статуса на-

ционального поисковика. В апреле Яндекс объявил о том,

что теперь индексирует (добавляет в собственную базу, по

которой производится поиск) веб-страницы на иностран-

ных языках. В базу начали добавляться сайты на доменах

стран СНг и крупные сайты со всего мира (в основном, из

англоязычной зоны).

Кроме того, Яндекс начал поддерживать ряд междуна-

родных стандартов передачи данных: Sitemaps, протокол

GZiP, MediaRSS и FOAF.

оТКРыТИе КАлИфоРнИйсКого офИсА. В июне ян-

декс открыл дочернюю исследовательскую компанию

Yandex Laboratories в Кремниевой Долине, Калифорния,

СшА. Возглавил компанию Виш махеджани, бывший ру-

Page 46: Ashmanov&Partners SearchAds A4 2008

46

ководитель поиска Yahoo.

оТложенный выход нА бИРжу. Весь 2008 год ян-

декс готовился к выходу на биржу в СшА. многие дейс-

твия компании пресса считала связанными с этой подго-

товкой. Информация о том, что российский поисковый

гигант собирается выйти на биржу, оказалась интересна и

западным газетам. Про Яндекс написали многие деловые

и технологические издания, например the Sunday times.

Однако iPo Яндекса было отложено на 2009 год, очевидно,

из-за мирового финансового кризиса.

Google в России продолжает активно развиваться и

увеличивать свою долю поискового рынка Рунета.

попыТКА КупИТь бегун. Самый заметный

ход Google в 2008 году — это, конечно, попытка летом

2008 приобрести компанию бегун, которая является одним

из ведущих провайдеров контекстной рекламы. Google со-

бирался приобрести бегун у компании Рамблер. Рамблер

владел только половиной бегуна. Вторую половину он

должен был выкупить у холдинга финам, после чего бегун

перешёл бы в распоряжение Google.

усТАновКА поИсКА нА поРТАл РАмблеР. Согласно

пакетной сделке по покупке бегуна между Рамблером и

Google, последний должен был установить на rambler.ru

5.2. Google

Page 47: Ashmanov&Partners SearchAds A4 2008

47

собственный поисковый движок вместо рамблеровского.

Это означало бы, что доля рынка Рамблера, одной из ста-

рейших и известнейших поисковых систем Рунета, при-

плюсовывалась к доле Google.

Передел поискового рынка, однако, пока не состоялся.

федеральная Антимонопольная Служба Рф не дала разре-

шения Google приобрести бегун. Поиск от Google на Рамб-

лере тоже пока не заработал. Пока неизвестно, заработает

ли он когда-нибудь.

выплАТы AdSeNSe чеРез РАпИду. Google после дол-

гого тестирования запустил возможность для вебмастеров

получать через платёжную систему «Рапида» (почтовые

отделения по России) деньги, которые они заработали за

клики по контекстным объявлениям AdSense на их сайтах.

поИсК по объявленИям. В августе Google открыл

бета-версию поиска по объявлениям. Пользователи теперь

могут искать по частным объявлениям, опубликованных на

крупнейших сайтах Рунета (например, Slando, oLx, «Из рук

в руки» и др.).

пРодвИженИе сеРвИсА вопРосов И оТвеТов. Google

открыл сервис вопросов и ответов (только в России) и

продвигал его различными способами: собирал блоггеров

в кафе, организовывал коммьюнити, нанимал для этого

экспертов. Важно то, что в результаты поиска Google стали

«замешиваться» страницы с Вопросов и Ответов. Это озна-

чает, в частности, что оптимизаторы могут воспользовать-

ся этим проектом для продвижения своих сайтов.

5.3. Рамблер

Page 48: Ashmanov&Partners SearchAds A4 2008

48

«оТКРыТый поРТАл». В 2008 году Рамблер продол-

жал терять свою долю поискового рынка, измеряемую

статистикой Liveinternet. Осенью компания объявила о

том, что парадигма работы rambler.ru изменяется. Теперь

Рамблер — это открытый портал. Открытость в данном

контексте означает, что Рамблер будет предоставлять

пользователям доступ не только к своим многочисленным

сервисам, но и к чужим. Так, запущен был блоговый аггре-

гатор «Рамблер.друзья», а также появилась рубрика «Сай-

ты дня», где ежедневно в обзорах упоминаются не только

независимые сайты, но и сервисы-конкуренты Рамблера,

например, фотохостинг яндекса.

Очевидно, концепция открытости подготавливалась

как раз к переводу Рамблера на поиск от Google. Но пос-

кольку этого не произошло, Рамблер пока продолжает ис-

пользовать свои поисковые технологии.

«веРТИКАльный поИсК». С конца 2007 года Рамблер

довольно долго готовил общественность к выпуску новой

версии поиска, состоящей из «вертикалей». «Вертикаль» в

данном контексте — это тематические агрегаторы контен-

та, например, агрегатор товаров и цен nova.rambler.ru/price,

созданный на основе каталога price.ru, или поиск по вакан-

сиям nova.rambler.ru/vacancy.

Затем пришли вести о покупке бегуна и установке на

Рамблер поиска Google. «Вертикальный поиск» так и не

был выпущен.

Сейчас не очень понятно, что стало с «вертикальным

поиском», о котором представители Рамблера начали рас-

сказывали ещё с ноября 2007 года на конференции «Поис-

Page 49: Ashmanov&Partners SearchAds A4 2008

49

5.4. Поиск@Mail.ruковая оптимизация и продвижение сайтов в Интернете».

В интервью Seonews.ru Аркадий мОРЕйНИС сказал,

что «вертикального поиска» как отдельного продукта не

будет, вертикали будут «замешаны» в основной поиск.

Вертикальный поиск теперь представляет собой совокуп-

ность тематических каталогов на поддомене nova.rambler.

ru, содержимое которых выдаётся в результатах основного

поиска на rambler.ru по соответствующим запросам.

Однако сейчас, если искать что-то в Рамблере,

urL выдачи будет выглядеть как http://nova.rambler.ru/

srch?query=поисковый запрос. Из этого можно сделать

вывод, что «вертикальный поиск» всё же заработал на

Рамблере.

РедИзАйн И КАТАсТРофА с долей РынКА. Переход к

концепции «открытого портала» сопровождался редизай-

ном сайта rambler.ru. Редизайн произошел в первых чис-

лах октября 2008, и именно на эти дни, согласно статис-

тике Liveinternet, приходится огромный спад доли рынка

у поиска Рамблера. Третьего октября он упал ниже поис-

ка@Mail.ru. C того дня и до сих пор Рамблер больше не

поисковик номер три, это место теперь занимает поиск на

портале Mail.ru.

соТРуднИчесТво с BLiNkX. В июле компания BlinkX

объявила, что будет сотрудничать с Рамблером — пре-

доставит порталу технологии поиска по видеороликам.

На новом Рамблере уже работает поиск по видео.

Page 50: Ashmanov&Partners SearchAds A4 2008

50

лИцензИонный поИсК. У поиска search.mail.ru, кото-

рый является одним из сервисов портала Mail.ru, относи-

тельно небольшая доля рынка (7% – 8%). Несмотря на это,

поиск@Mail.ru — это очень важная фигура на поисковой

сцене. Сейчас этот поиск использует поисковую техноло-

гию яндекса.

Таким образом, теоретически 8% рыночной доли поиска

Mail.ru можно приплюсовать к доле яндекса. Если посчитать

таким образом, Яндекс становится не так легко досягаем

для Google. хотя с точки зрения осведомлённости о бренде

этой доли у Яндекса всё-таки нет — логотипа Яндекса на

Mail.ru нет и большинство пользователей поиска на Mail.ru

даже не знают, что пользуются поиском от Яндекса.

Когда заканчивается срок договора между Mail.ru и

яндексом, представители компаний не раскрывают, но по

словам Дмитрия гришина, генерального директора Mail.ru,

Google тоже активно предлагает свой поиск порталу Mail.ru.

собсТвенный поИсКовИК GOGO. Кроме того, у ком-

пании Mail.ru есть поисковый алгоритм собственного из-

готовления. Он работает по адресу Gogo.ru. Эта поисковая

система появилась не так давно, но успела за счёт быст-

рого роста качества поиска, а также активной рекламной

поддержки Mail.ru, набрать заметную пользовательскую

аудиторию. Gogo.ru позиционируется как энергичная, мо-

лодежная поисковая система, которая хорошо умеет ис-

5.5. Остальные поисковые системы

Page 51: Ashmanov&Partners SearchAds A4 2008

51

кать видеоролики. Однако, совсем недавно компания Mail.

ru приняла решение развивать и рекламировать видеопо-

иск на основном портале, по адресу video.mail.ru. О целях

компании в отношении Gogo.ru можно лишь строить пред-

положения.

«На GoGo.ru мы внедряем все наши инновационные

разработки, тестируем новые dозможности и алгоритмы, не

беспокоя аудиторию «большого» поиска», — так проком-

ментировала этот вопрос для рассылки компании «Ашманов

и Партнеры» Анна АРТАмОНОВА, вице-президент Mail.ru.

По поводу дальнейшей судьбы поисковых проектов Mail.ru

Анна сообщила следующее: «Пока эти проекты существуют

отдельно, у них своя аудитория, отдельные — причем рав-

но амбициозные — планы по развитию. GoGo.Ru частично

уже интегрирован с ‘большим’ поиском Mail.Ru — в той его

части, которая ищет по видео. GoGo.ru же используется для

‘локального поиска’ по разным проектам портала. Что будет

дальше — посмотрим». По данным наших анализаторов,

технология поисковика Gogo довольно быстро развивается.

остальные поисковые системы заметны на фоне че-

тырех лидирующих гораздо меньше.

Nigma.ru, детище программистов из мгУ — это

метапоиск, на котором его создатели регулярно внедряют

экспериментальные поисковые технологии (у Нигмы есть

свой поисковый индекс). На Нигме есть некоторые соб-

ственные технологии (кластеризация, поиск по электрон-

ным библиотекам), но аудитория у неё всё равно растёт не

очень заметно.

Метапоиск — это технология, объединяющая по одно-

му запросу выдачи нескольких поисковых систем и пре-

вращающая их в единую выдачу метапоисковой системы.

Конкретный способ смешения выдач, пропорции в ней

Page 52: Ashmanov&Partners SearchAds A4 2008

52

сайтов из разных поисковиков — это вопросы, которые

решает алгоритм метапоиска. Таким образом, метапоис-

ковик — это не просто паразит на теле чужих поисковых

систем, но и самостоятельный алгоритмический продукт.

Самая последняя новость от Нигмы — появление у поиско-

вика «способности» решать уравнения. Например, такие:

x^4-x^2-2=0.

В 2008 году появилась новая русскоязычная систе-

ма полнотекстового поиска: янга. Создал её Алексей гУ-

РЕшОВ, под руководством которого в 2006 – 2007 годах

разрабатывалась поисковая система Webalta.ru. Запуск и

развитие Вебальты сопровождались активным продвиже-

нием системы, амбициозными обещаниями руководства

захватить значительную долю рынка, частыми и шумными

запусками новых возможностей и сервисов. К 2008 году,

однако, поиск по адресу webalta.ru закрылся. Поисковая

система была продана, а Алексей гурешов сделал ещё

одну. Она работает по адресу Yanga.net.ru. Разработчики

системы экспериментируют с самыми разными параме-

трами поискового алгоритма, вследствие чего в Анализа-

торах поисковых систем показатели Янги скачут вверх и

вниз со впечатляющими амплитудами.

Поисковая система портала Liveinternet.ru — это вооб-

ще «поиск наизнанку». Она ранжирует сайт по конкретно-

му запросу в зависимости от того, насколько часто счётчик

Liveinternet фиксирует переходы на этот сайт по данному

5.6. Выводы, тенденции

Page 53: Ashmanov&Partners SearchAds A4 2008

53

запросу, то есть без яндекса, Google, Рамблера этот поис-

ковик вообще не мог бы работать.

Поисковые системы американских компаний Yahoo

(search.yahoo.com) и Microsoft (msn.com, live.com) в своих

рунетовских версиях пока пребывают в анабиозе — за-

метных информационных поводов не создают, аудиторию

увеличить не пытаются, и их доля поискового рынка оста-

ется стабильно маленькой.

Итак, что можно сказать о рынке поиска в Рунете на

современном этапе? Очевидно, что Google хочет за-

нять первое место, но номером 1 в Рунете всё ещё не

является и пока медленно запрягает: русифицирует сервисы,

начинает рекламные кампании. Доля Google растёт, но мо-

жет стабилизироваться в пределах 20 – 25%, если Google не

сможет перепрыгнуть пропасть, отделяющую его аудиторию

«гиков» и ориентированных на западные продукты пользова-

телей от обычного массового пользователя Рунета.

яндекс справился с внутренним кризисом роста

в 2006 – 2007 годах и начал быстро улучшать качество по-

иска. В настоящее время по большинству категорий Яндекс

является лидером, а доля рынка перестала падать и вроде

бы даже начинает расти.

Рамблер стремительно теряет долю, перелома в этом

процессе пока не видно. Какое решение примут владельцы

компании в отношении развития своего поисковика или

замены его на поиск Google, пока неясно. Тем временем из

компании начался отток кадров.

Поиск на Mail.ru стабильно, хотя и медленно, растёт.

Есть целый ряд маленьких поисковиков со своей ау-

диторией, своими целями, своими интересными функция-

ми. Вряд ли в ближайшее время кто-то из этого «длинно-

Page 54: Ashmanov&Partners SearchAds A4 2008

54

го хвоста» сможет подняться до уровня яндекса и Google.

Скорее, все эти поисковые системы выберут себе специа-

лизацию и будут её придерживаться. Специализации уже

угадываются:

Gogo.ru — поиск видео и картинок.

Nigma.ru — поиск для любителей швейцарских ножей

(возможность спросить все поисковики

в одном месте), площадка для экспери-

ментов.

янга — система, ориентированная

на поисковых оптимизаторов: она пока-

зывает обратные ссылки на сайт и сооб-

щает об этих ссылках много ценной для

Seo информации.

MSN и Live.com — это поисковики

Microsoft, софтверного гиганта, который

уже много лет пытается достичь в обла-

сти интернет-сервисов высот, сравни-

мых с успехом в разработке программ-

ного обеспечения. Несомненно, такая

компания сможет сделать свой поиск за-

метным на любом рынке благодаря од-

ним только своим рекламным возмож-

ностям. Но какой-то индивидуальности, особенности у её

поисковиков в Рунете пока не заметно.

можно заключить, что классический горизонтальный

(полнотекстовый) поиск ещё долго будет оставаться основ-

ным способом навигации по интернету как для новичков в

нём, так и для профессионалов. «Эпоха web 2.0» заметно-

го влияния на развитие поисковых технологий не оказала.

Основная тенденция развития больших поисковиков в

2008 году — переход к синтетической выдаче, когда по за-

«РАСКлАД СИл

мЕНЯЕТСЯ.

ЯНДЕКС СТАбИлЕН,

GooGLe И ПОИСК@

MAiL.ru РАСТУТ,

РАмблЕР ПАДАЕТ.

мЕлОЧь НЕ мОжЕТ

ПРЕОДОлЕТь ПОРОг

ВхОжДЕНИЯ»

Page 55: Ashmanov&Partners SearchAds A4 2008

55

просу выдаётся не 10 ссылок на сайты,

а разнообразные поля, включающие

ссылки на словари, энциклопедии,

карты, фото, видео, блоги и всё это в

единой странице результатов поиска.

Некоторые поисковые компа-

нии, развивающие классический по-

иск, пробуют использовать обратную

связь от пользователей (uGC — user

Generated Content) для расширения

возможностей поиска и повышения его

качества. В первую очередь это Google,

который в рамках Google Labs (экспе-

риментально-исследовательского под-

разделения) позволяет пользователям

добавлять или удалять сайты в свою

выдачу, а также влиять на выдачу не-

которыми другими способами. Правда,

любые действия пользователя влияют

лишь на его, «индивидуальную» выда-

чу Google.

Таким образом, персонализа-

ция поиска — это ещё одно важное

направление его развития. Сделать

качественный поиск, оставляющий

удовлетворенными пользователей с

разными типами поведения, очень

сложно. гораздо проще создать поль-

зователю условия для самостоятель-

ной «подстройки» поиска под свои

требования. Такая возможность есть

у Google, а у яндекса в 2008 году по-

«ОСНОВНыЕ

ТЕхНОлОгИЧЕСКИЕ

ТЕНДЕНцИИ

2008: ПЕРЕхОД К

СИНТЕТИЧЕСКОй

ВыДАЧЕ

РЕЗУльТАТОВ

ПОИСКА,

СОцИАльНый

ПОИСК, ПОНИмАНИЕ

СмыСлА

ЗАПРОСОВ»

Page 56: Ashmanov&Partners SearchAds A4 2008

56

явился сервис «находки», который «записывает» запросы

пользователя в его пользовательский профиль. Это пер-

вый шаг в сторону персонализации поиска.

Ещё одна стратегия добавления пользовательского

контента в классический поиск — это использование при

построении поисковой выдачи информации, сгенериро-

ванной пользователями сервисов типа «вопросы и отве-

ты». И наиболее заметные игроки, которые это делают, —

Google и Mail.ru.

Что касается «поисковых стартапов», судьба их крайне

неопределённа. Создание поиска требует огромных интел-

лектуальных и технических ресурсов. Не меньшие усилия

нужны и для того, чтобы новый поисковик был замечен

рынком и чтобы он набрал хоть какую-то аудиторию.

На Западе «поисковый стартап» в настоящее время —

это компания, которая развивает отдельную поисковую

технологию, решающую одну из множества задач поис-

ка. Если разработка идет успешно, компания привлекает

к себе внимание и покупается одним из ведущих игроков

поискового рынка. Обычно это Google или Microsoft.

мы в КомпАнИИ «АшмАнов И пАРТнеРы» РешИлИ ИзмеРяТь КАчесТво поИсКА в Рус-

сКИх поИсКовИКАх и вот уже более года анализируем и собираем информацию о качестве

поиска на специальном сайте www.analyzethis.ru. Рассмотрим подробнее эти показатели.

6.1.1. Анализатор качества навигационного поиска

Page 57: Ashmanov&Partners SearchAds A4 2008

57

Сразу построить большой поисковик масштаба всего

Интернета сейчас довольно сложно, поскольку сильно по-

высился порог вхождения (из-за величины Интернета).

хотя интерес у венчурных инвесторов к поисковым

стартапам по-прежнему очень острый, новых «больших»

поисковиков пока на горизонте не видно (не считая не-

удачного дебюта Cuil.com), возможно, они заявят о себе в

2009.

Как работают анализаторы поисковых систем6.

РИс. 14. ТАблИцА знАченИй поКАзАТеля КАчесТвА ТемАТИчесКого поИсКА

Page 58: Ashmanov&Partners SearchAds A4 2008

58

навигационный поиск — это поиск по навигацион-

ным запросам. Навигационным запросом считает-

ся запрос, с помощью которого человек ищет опре-

деленный сайт, например, запросы «библиотека мошкова»,

«газета жизнь», «телеканал спорт». Если нужный сайт есть

на первой странице результатов поиска — хорошо, а если

этот сайт на первом месте — это отлично.

Если взять несколько сотен навигационных запросов и

проверить их все в русских поисковиках, то мы сразу уви-

дим: в каких поисковиках нужные сайты находятся на пер-

вых местах, в каких поисковиках сайты находятся, но не на

первом месте, а в каких — вообще нужных сайтов нет.

Именно это и делает каждый день анализатор качест-

ва навигационного поиска — проверяет поисковики с по-

мощью 200 навигационных запросов и выдаёт каждому

поисковику оценку. лучшим результатом в ответ на нави-

гационный запрос является искомый сайт (маркер) на пер-

вой позиции поисковой выдачи. В Топ10 поисковой выда-

чи ищутся вхождения сайтов-маркеров. Если для запроса

сайтов-маркеров задано несколько — учитывается вхож-

дение любого из них на верхней позиции. Далее рассчи-

тывается доля запросов, для которых на первой странице

найден сайт-маркер. Это и является сводным показателем

качества навигационного поиска.

лучшим считается поисковик с наибольшим сводным

показателем по заданному анализатору. На рис. 14 можно

увидеть результаты работы анализатора качества навига-

ционного поиска в табличном виде. Ячейка со значением

окрашивается в определенный цвет — чем хуже, тем боль-

ше красного цвета.

6.1.2. Анализатор качества тематического поиска

Page 59: Ashmanov&Partners SearchAds A4 2008

59

поисковые запросы бывают разные. В основном по-

исковые запросы состоят из существительных и

прилагательных. большинство запросов — инфор-

мационные, то есть пользователь вводит слова в поиск,

чтобы получить информацию, связанную с этими слова-

ми. Смысл таких запросов, конечно, человек может понять

лучше, чем робот поисковой системы. Человек бы составил

ответ на такой запрос с учетом предположения о том, ка-

кую информацию хотел бы получить спрашивающий, и с

учетом того, что уже есть в Интернете на эту тему.

мы взяли 100 составленных вручную подборок сайтов

в ответ на разные информационные запросы из экспертной

системы Нейрон (www.neiron.ru). Важно, чтобы эти сайты

охватывали разные темы и отвечали максимально воз-

можным ожиданиям пользователя. Например, для запроса

«автомобили» среди отобранных должны быть сайты по

продаже и аренде автомобилей, сравнительной оценке и

тестам автомобилей, устройству и ремонту автомобилей,

перспективным направлениям в развитии автомобилест-

роения и пр.

Затем анализатор тематического поиска стал каждый

день сравнивать выдачу поисковиков Рунета с выдачей,

составленной экспертами. В идеале поисковики должны

находить сайты, которые указали эксперты. То есть выда-

ча поисковиков должна быть максимально похожа на под-

борку сайтов, составленную экспертами. Сводным пока-

зателем данного анализатора является доля результатов

поисковой выдачи, совпавших с мнением экспертов, без

учета позиции «совпавшего» сайта. лучшим считается по-

исковик с наибольшим значением сводного показателя.

6.1.3. Подсказки и опечатки

* http://download.yandex.ru/company/ yandex_search_autumn_2008_ru.pdf

Page 60: Ashmanov&Partners SearchAds A4 2008

60

по информации, полученной яндексом в ходе иссле-

дования поисковых запросов за все 10 лет своей

работы выяснилось, что 14 – 15% запросов пользо-

вателей к Яндексу содержат ошибки или опечатки*. Поис-

ковики определяют ошибку или опечатку на основе своей

информации о том, какое написание слова встречается в

Интернете наиболее часто. Возможны три стратегии обра-

ботки ошибочного запроса:

• искать именно по этому запросу, никак не реагируя

на его ошибочность;

• показать выдачу по ошибочному запросу, но напи-

сать сверху подсказку: «возможно, вы искали <правиль-

ная форма запроса>?»;

• понять, какое слово на самом деле имел в виду

пользователь и показать выдачу по запросу с правильным

написанием.

яндекс, например, использует и вторую, и третью стра-

тегию исправления запросов. Google — только вторую. А

Рамблер сейчас вообще никак не реагирует на опечатки.

Анализатор качества подсказок работает с исправле-

нием ошибок по второй стратегии. В данном анализаторе

используются запросы с ошибочным написанием. Подсчи-

тывается количество случаев, в которых поисковая маши-

на предложила в подсказке правильный вариант.

большинство поисковых систем, заподозрив при вводе

поискового запроса ошибку, пытаются предложить поль-

зователю правильное написание запроса (правильным на-

писанием, с точки зрения поисковика, является то, которое

есть в словаре или чаще всего встречается в Интернете на

6.1.4. Анализатор качества поиска цитат

Page 61: Ashmanov&Partners SearchAds A4 2008

61

сайтах). Качество подсказок является важным дополне-

нием к общему качеству поиска. Анализатор подсказок

ищет правильную подсказку (которую проверили люди) в

поисковой выдаче по запросу с заведомой опечаткой. Чем

больше случаев, когда подсказка содержит «правильную»

форму запроса, тем лучше работает поисковик.

Опечатки — это ошибки в слове, которые можно лег-

ко понять и исправить. Когда пользователи вводят в поиск

«агенство» или «абреввиатура», то очевидно, что они прос-

то сделали опечатку, и надо показывать результаты поиска

по запросам с правильным написанием. Анализатор опе-

чаток сравнивает результаты поиска по правильному на-

писанию с результатами поиска по нескольким неправиль-

6.1.5. Анализатор апдейтов поиска

ЯНДЕКС GooGLe rAMBLer GoGo Live.CoM YAhoo

РИс. 13. уРовень АпдейТов в поИсКовИКАх в i-iii КвАРТАлАх 2008

APort

Page 62: Ashmanov&Partners SearchAds A4 2008

62

ным написанием запросов. Чем больше совпадений — тем

лучше поиск.

цитатный поиск — это поиск конкретного текста по

его известному фрагменту. Часто таким образом

ищутся оригиналы литературных произведений.

Качественный поисковик должен выдавать ссылку на стра-

ницу, где содержится текст произведения, цитата из кото-

рого запрашивается. И желательно — поставить ее первой.

Например, давая запрос «Я памятник себе воздвиг неру-

котворный», пользователь скорее всего ищет текст стихот-

ворения Пушкина, и ссылку именно на этот текст поисковик

должен выдать на первой странице.

Анализатор качества цитатного поиска проверяет в

поисковиках несколько десятков запросов цитат и под-

считывает, сколько ссылок на страницы с нужным текс-

том поисковик показал на первой странице. Чем больше

таких найденных оригиналов текстов, тем лучше работает

поиск.

Апдейт (от англ. update — «обновлять») — это про-

цесс обновления результатов поиска за счёт добав-

ления в индекс поисковой машины новых сайтов и

вебстраниц, а также за счёт доработки поисковых алгорит-

мов. Анализатор апдейтов ежедневно проверяет позиции

первых десяти ссылок (Тор10) по 140 запросам и сравни-

вает, для какого количества сайтов позиция изменилась, а

также насколько значительно она изменилась (значитель-

ное изменение — это, например, скачок сайта с первого

места в выдаче на восьмое). То, насколько часто у поис-

ковой системы проводятся апдейты, а также то, насколько

сильно каждый апдейт меняет выдачу, может многое ска-

зать о жизнедеятельности этой поисковой системы.

Так, например, у Апорта апдейты очень редкие и очень

Page 63: Ashmanov&Partners SearchAds A4 2008

63

сильные. Это говорит о том, что жизнь поисковой системы

складывается из длительных периодов «спячки» и бур-

ных коротких пробуждений. Это соответствует тому, что

мы знаем об Апорте: система давно потеряла свои когда-

то очень солидные позиции на поисковом рынке, никаких

новостей от неё не слышно, никаких признаков желания

развиваться не заметно.

У Google апдейты очень частые и очень «лёгкие», не

перекраивающие полностью выдачу. Это говорит о том,

что поисковая система постоянно обновляется, растёт ко-

личественно и качественно — но простой пользователь

этой работы не замечает.

Встает вопрос — а замечает ли вообще апдейты прос-

той пользователь? Или это интересно исключительно по-

исковым оптимизаторам, для которых апдейт — момент

истины, возможность увидеть результаты собственной ра-

боты (и показать их своему клиенту)?

Изучение поведения пользователей позволяет ответить

положительно — людям апдейты небезразличны. Пользо-

ватели, особенно не интернет-профессионалы, часто ис-

пользуют поисковик, как своеобразный сервис хранения

закладок. Например, вводят запрос «погода», открывают

первую ссылку, по которой находится сайт www.gismeteo.

ru, и смотрят прогноз погоды. А иногда поисковая строка

даже замещает адресную строку в браузере: яндекс фик-

сирует большое количество запросов вида odnoklassniki.ru.

Если в результате апдейтов «апортовской» силы и «гуглов-

ской» частоты ссылка на Gismeteo будет скакать по выдаче

с первого места на десятое, а потом на пятое, пользова-

теля это не обрадует. Да и вообще, по выражению одного

сотрудника Яндекса, «нехорошо вываливать на всеобщее

обозрение унылые технологические кишки». А частые

Page 64: Ashmanov&Partners SearchAds A4 2008

РыжКовА КсенИя, ДИРЕКТОР ПО СВЯЗЯм С ОбщЕСТВЕННОСТьюкомпания «Ашманов и Партнеры»

Раб.: +7 (495) 741-77-75моб.: +7 (926) 528-62-40факс: +7 (495) 741-77-75e-mail: [email protected]

www.ashmanov.comwww.optimization.ru