Всё-таки хитрая это штука- Интернет. Человек может сгинуть с горизонта, а его сайты- сервисы- шопы продолжают трудиться, как ни в чём ни бывало, скрупулезно исполняя делегированные им полномочия, причём на полном автомате. Если человеку хватит сил отвечать на письма, то вообще никто не заметит потери бойца, как в песне поётся.

Но сегодня Мастер Ласто вновь с вами. Давайте он чего-нибудь расскажет, Вы сопроводите крамольную мысль своими соображениями в комментах, а целые поколения начинающих вебмастеров будут потом воспринимать всё это совокупно как откровение и практическое руководство к действию.

Чем там обычно озадачен вебмастер? Да, точно, раскруткой своего ресурса. Давайте про то.

Однако одно стартовое замечание системного толка.

Договоримся о терминах. Мы можем иметь абсолютно не раскрученный, но очень успешный ресурс. Как, впрочем, и наоборот. Сайт с великим ТИЦ и офигенным ПиАром (PageRank) вполне способен приносить одни лишь убытки. Потому, раз уж мы затеваем дискуссию о вкусе устриц с теми, кто их ел, неплохо было бы сперва выяснить, кто такие устрицы, и как они вообще выглядят.

Не будет большой натяжкой считать, что всё-таки раскрутка есть ни что иное, как продвижение себя в поисковиках (да, это то самое «поднимите свой ТИЦ, увеличьте PageRank сайта» и тому подобное). Собственно же привлечение трафика иной, не поисковой природы, правильнее именовать промоушеном. И этот самый промоушен вполне возможен без раскрутки. Как и раскрутка совершенно независима от промоушена. Они вообще ортогональны, как инь и янь.

Теперь давайте маленько похулиганим, и возведём хулу на промоушен, сравнив эффективность двух этих эфемерных субстанций.

Допустим, Вы- вебмастер новорожденного сайта, и решили поведать о нём миру. Тут есть два пути, которые можно проходить как последовательно, так и параллельно, причём не по одному разу.

Промоушен.

Договариваемся с владельцем тематической рассылки в сто тысяч подписчиков, и публикуем рекламу. Речь не идёт о высоком копирайтинге- мы ничего не впариваем, а просто заявляем о наличии в природе какого-то сервиса- он или нужен человеку, или нет. Капание на мозги тут неуместно, мы от него абстрагируемся.

Эффективность рекламы через рассылку редко превышает 0.1% - в данном примере на Ваш сайт придут сто человек, причём конверсия такого трафика возможна на уровне пары процентов. Это реальные цифры: всего пара юзеров, порождённая стотысячной аудиторией. Прочтите и ужаснитесь.

Раскрутка.

Тут всё иначе- не гора идёт к Магомеду, а Магомед совершает столь необходимый ему хадж. Он посещает место, где есть информация о нужном ему сервисе (видимо, это будет поисковик), и идёт в ту сторону, в которую там ткнут пальцем. Скорее всего, это будет или Палец Яндекса, либо Перст Гугла.

И, друзья мои, Вы и сами знаете, что ничуть не трудно получать сотню посетителей с поисковиков в день, приходящих именно по нужному запросу. Пара из этих серферов станет юзерами сервиса.

Теперь сопоставьте стоимость промоушена (аренда крупной рассылки задарма не прокатит) и раскрутки в том понимании, которое тут вкладывается в данный термин (это почти даром). И не удивляйтесь, почему промоушеном почти никто не занимается, и даже о термин такой многие читатели споткнулись первый раз в жизни.

Если с промоушеном всё понятно, то потолкуем теперь за раскрутку- под оной подразумевается комплекс мероприятий по продвижению в SE (настаиваю на таком понимании термина, ибо по сути и смыслу так оно и есть). И что у нас стоит первым пунктом? Точно, прописка сайта в каталогах. Вот давайте откровенно об этой процедуре.

Сразу оговоримся, что раскрутка через прописку в каталогах совершенно не преследует цель получения оттуда посетителей напрямую. Элементов промоушена тут не содержится.

Договоримся также считать глупостью прописку в каталогах ради увеличения каких-то там ТИЦ, PageRank и, упаси боже, заниматься автоматическим линкообменом с той же целью. Давайте только про осмысленные действия, хорошо?

Так нафига ж нужны каталоги? Да и вся затеваемая вокруг них пляска с раскруткой?

Истинное предназначение каталогов в аспекте раскрутки.

Всё просто- допустим, Ваш сайт продвигает на рынок нетленного пепетуна. Сайт только что родился, поискового трафика ноль, но очень хочется, чтобы был не ноль. Ибо Вы прекрасно понимаете, что промоушен сожрёт бюджет, толку с этого никакого не будет, и проект умрёт совершенно банальнейшим образом (см. выше). Трафик же с SE никаких особых затрат не подразумевает, но его эффективность куда как существеннее.

Естественно, Вы первым делом идёте в гости к искалкам, и заявляете свой сайт для индексации. Спустя несколько дней наблюдаете в их индексе морду своего сервиса, и ничего более. Трафика нет и не будет.

Вы понимаете, что статус сайта мало того что никакой, но и его контент не релевантен реальным запросам серферов (это обычное дело). Ибо юзер что у поисковика спрашивает? «хочу пепетуна, дайте мне пепетуна сейчас же, пепетун с доставкой, пепетун недорого, куплю пепетуна» и т. п.

Поэтому умный вебмастер, конечно же, не станет уродовать сайт под такие запросы, а найдёт очень простой выход. Он, прикинув длинное к носопырчатому, посетит сервис наподобие 1ps.ru, подарит ему два уя, и зарегистрирует в куче каталогов свой сайт с описанием типа:

Ясен пень, что такое описание полностью релевантно реальным запросам потенциальных клиентов, а сами сайты каталогов достаточно статусны, чтобы без проблем находиться во всех важнейших искалках, привлекая тем самым трафик в нужное место, даже если статус этого нужного места в SE никакой, а само это нужное место в серпе не видно вообще.

Понятное дело, что каталогов много, и после каждой пары-тройки дюжин субмитов необходимо варьировать описание, чтобы охватить максимум самых ходовых вариантов поисковых запросов. Автоматическая регистрация везде под копирку толку не даёт- тут думать надо.

Если Вы всё делаете именно так, то не удивительно, что даже на сайт, не содержащий в контенте своих страниц завлекаловок про пепетуна (что не редкость для официозных ресурсов), но прилинкованный к каталогам таким вот нехитрым образом, спустя недельку начнёт поступать строго целевой трафик с Яндекса, а недельки через три- и с Гугла. Причём не имеет принципиального значения, в каком количестве каталогов Вы профигурировали- если процесс пошёл, то это необратимо. Иногда и сотни каталогов достаточно.

Больше от каталогов требовать нечего. Употребили правильные ключевые слова, заложили верный вектор движения- и баста. Можете с чистым сердцем считать мероприятия по раскрутке завершёнными- для промоушена каталоги не годятся совершенно, а в плане ТИЦ и ПиАра (если Вас развлекают такие штуки) какая-нибудь партнёрка по продвижению на рынок пепетунов куда как более приспособлена.

Не согласны с ролью каталогов в пересечении Вашего сайта с целевой аудиторией, отнимаемой у искалок, и идущей транзитом через каталоги указанным способом? Думаете, каталоги годятся для чего-то большего? Аргументированно ругайтесь в комментах.

Однако практикующий вебмастер, юзающий закон больших чисел, и заводящий по домену еженедельно, указанным способом легко стронет сайты с прикола в область видимости поисковиков, по крайней мере в случае русскоязычного контента (для ресурсов с оным нет «песочницы», будь она трижды проклята хорошим русским матерным словом).

Тысячи научных исследований наконец-то достоверно зафиксировали, чем же отличаются сайты Рунета от заморских- иноземных. Сегодня речь вдруг и с испугу как раз про то. Про юзабилити.

Нет, то, что юзабилити в нашем отечестве никому не ведомо, это всем хорошо известно, доподлинно и точно. Такой вот парадокс. Что имеет свои исторические корни: если обитатель буржуинства издревле привык жить в целесообразном мире, то мы о существовании такого мира вообще не догадываемся. Да просто сравните нашу скамейку из не струганных и не крашенных досок с сантиметровыми занозами, и их элегантное и утончённое изделие того же назначения. Про обводы и начинку образцов автопрома я уж не заикаюсь- но лавку-то толковую соорудить можно? Чай, не военно-космические технологии?

Ворчу. Очень, знаете ли, трудно и неудобно из задницы занозы вытаскивать. Можно реально вывихнуть позвоночник в четырёх местах, и уйти на больничный.

Если же вернуться к сайтам, то там все многократно усугубляется. Импортный человек, привыкший к продуманности самых незначительных мелочей, просто откажется перемещаться по неюзабилитипригодному сайту, или иметь дело с ресурсом, дизайн которого ему отвратителен. Вам должно быть знакомо это чувство- личной антипатии к человеку достаточно, чтоб никогда не иметь с ним никаких дел.

Посему над претендующими на что-то ресурсами в буржуинстве трудятся специалисты своего дела. Они и дизайн вылижут, и код, и контент, и интерфейс. У нас, понятно, всё делается своими руками, как бог на душу положит. Отсюда и рашен юзабилити.

О, иной раз это приносит сильные ощущения. Увидишь такое, и так захочется человечку, сотворившему сию несуразность, выдрать и руки, и ноги, и что там у него ещё осталось- и это тоже заодно. Чтоб не позорил державу.

Причём бог бы с ним, дизайном. Но ведь юзабилити ресурса есть нечто большее, чем боевой раскрас морды сайта. Это не только заточенность под юзера, но и оптимизация под искалки, под линии связи, под социотип целевой аудитории, под ПО на компе серфера (вот у меня в системе нет и никогда не будет флаша- по некоторым сайтам вообще перемещаться не могу. Значит, тьфу на них).

И самое-то смешное, что юзабилитипригодность ресурса не выразить словами, и не разложить по косточкам скелета. Ибо слова про то, что навигация должна быть удобной (это как?) и однозначной, странички обязаны грузиться легко и весить мало, не должны нести в себе избыточности с точки зрения серфера, а сам визуал должон быть шедевриален- это всё из сказочки про Му-Му в исполнении Герасима. Блин, покажите мне эталон, и дайте шкалу с процентами. Чтоб я прислонял к ней сайты и получал цифры респекта.

Ну и. Дождались. А вот есть такой сервис. Берем свои сайты в охапку и тащим их прислонять. Можете тащить прямо сюда- вот форма:

Понятно, что первым был прислонён данный блог- на шкале респекта ему отщёлкано 1513 баллов, с выдачей комментария: «Верстка выполнена на высоком профессиональном уровне. Качество технической реализации практически безупречно. Гармонично организованная навигация. Функциональность на высшем уровне. Все удобно и практично. Качественный дизайн и хорошо подобранная цветовая гамма. Тщательно прорисованные графические элементы. Отличная работоспособность во многих современных и старых браузерах. Грамотный баланс изящества и совместимости».

Подсовывание этой пузомерке других сайтов, даже выглядящих отвратительно, дало соответствующий результат. В принципе, всё достаточно объективно. И если Ваш сайт попадёт в первую сотню рейтинга качества этой пузомерки, то Вы Великий Вебмастер.

Вперёд. Прислоняйте Ваши сайты, господа.

Славные гуру манимейкинга, коих у нас так любят переводить на великий и могучий, выставляя по ходу дела чуть ли не оракулами ранга пророка Мухаммеда, крайне склонны делать упор на прямолинейное и не осмысливаемое действие. Мы абсолютно уверены только в том, чего не понимаем. И придать нам такую уверенность очень просто, директивой: пиши так, говори этак, думай то-то, и никак иначе. Потому что если в человеке засел червь сомнения, может налететь стая, и заклевать его насмерть. Бездумным- проще. Хотя излишняя уверенность обычно ведет к беде...

Самое страшное, что заокеанские гуру, пишущие для масс, в собственно вебмастеринге на самом деле мало что смыслят, хотя иной раз и пытаются взять менторский тон. Поэтому все их рекомендации, хоть сдуру и воспринимаются нами как величайшее откровение, с благоговением и подобострастным выпучиванием глаз, по сути своей являются инструкциями по бросанию гранаты, записанными со слов сержанта запаса. Да, сержант чётко расскажет, за что эту чёртову штуку дёрнуть, чтоб она дьявольски зашипела, и как быстро метнуть вдаль, чтоб самого не порвало на запчасти, но и не более того. Хотя винить сержанта за поверхностность его инструкций не нужно.

Простите меня за не очень прозрачную аналогию, но все сержантско- программерские дела на родине гуру отданы на откуп специально обученным людям, которые никаких солюшенов сочинять точно не будут, ни за что и никогда. Если гуру что-то такое и пишут в своих опусах, то это лишь результат наблюдения со стороны за действиями сержанта. Причём с порядочной дистанции, чтоб не зацепило ненароком. Сопутствующий сочный мат до слуха гуру не долетает, они видят лишь гламурную картинку. И свято верят, что сам процесс вблизи и изнутри столь же гламурен, как видится в бинокль.

Посему в подавляющем большинстве случаев, занимаясь практическим манимейкингом и столкнувшись с какой-то хитрой задачей вебмастеринга, будьте готовы к тому, что почитать на тему Вашей головной боли просто элементарно негде. И остаётся одно из двух- либо махнуть на проблему рукой, либо учинять экспириенс. Вариант с обращением к специально обученным людям отпадает сам собой- Вы не гуру, и живёте не за океаном.

Махать мы, конечно, все мастера. Но как Вы догадываетесь, сия заметка вовсе не про эмулирование ветряной мельницы подручными средствами, а про вещи чуть более серьёзные. Давайте на том предельно сконцентрируемся.

Итак, озадачившись совсем недавно сверхтрафиком ботовой природы, я решил учинить экспириенс, и поиграться в пределах своего блога метатегами, оговоренными спецификацией, но до той поры на блоге не употреблявшимися вовсе. Это очень интересная задачка сама по себе. Как говорится, не соблазняйте пионера- он и так всегда готов...

Надо сказать, что в самой спецификации заложена сильная концепция. Беда в том, что все тонкости всевозможных метатегов и прочих хедеров трудно постижимы вебмастерами, пользуются ими как бог на душу положит, а потому никто не ведает, насколько все эти метатеги на самом деле задействованы ботами SE. Посему любые сведения, добытые эмпирически, ценятся буквально на вес золота.

Итак.

Первое, что было добавлено в шаблон дизайна, это тег:

<meta name="Resource-type" content="document">

Далее все страницы совершили свой выбор в пользу одного из вариантов метатега:

<meta name="Document-state" content="Static">

<meta name="Document-state" content="Dynamic">

Понятно, что хотя абсолютно все страницы виртуальные, творятся движком в статичном расширении .html, они делятся на не обновляемые (собственно посты блога и документы, бегающие на его движке), и таки модифицируемые (оглавление, комментарии к постам, всякая статистика с поиском...). Назначение и смысл этого тега очевиден- мы просто даём понять ботам поисковых систем, какие документы в принципе подвержены модификации, а какие нет.

Дальше интереснее.

Самый проблемный метатег, с которым сайты почему-то всё никак не заведут интимную дружбу, это дата последней модификации документа:

<meta http-equiv="Last-Modified" content="Fri, 30 Jun 2006 16:04:44 GMT">

Обидно, что грамотно употреблять сей хитрый метатег в рамках движковых ресурсов не всегда возможно. Но так как у нас движок блога свой собственный, и есть пара рук, растущих из нужного места нужным концом, то мы легко подшаманим код под корректную генерацию данного тега. И будем формировать тег в зависимости от реальной даты модификации документа, либо самого позднего времени изменения любого из файлов, участвующих в синтезе контента этого документа.

Вроде бы всё просто, логично и понятно. Искалкам больше нет нужды догадываться, когда же контент блога шевелится, и на каких именно страницах. SE просто смотрят дату последней модификации страниц, и переиндексируют их при необходимости. Туда же, где тишь да гладь, толстый слой пыли, и только асимптотически затухающее в ноль эхо, гонять ботов на разведку и смысла никакого нет.

Но это всё голая теория- пусть даже и засунутая в золочёную рамочку, она являет собой желанное зрелище лишь для эстетов и интеллектуалов, плохо совмещающихся с действительностью и реальным миром. Нудистский пляж мало похож на галерею с полотнами великих мастеров, но там уже больше правды жизни, хотя меньше изысканности.

В полном соответствии с законом несовпадения по форме и содержанию голой теории со столь же голой практикой, находящихся в таком же соотношении, как залы Лувра с пляжами Новосибирского Академгородка, славящимися своими безбашенными натуристами, все эти хитрые метатеги, нарисованные в блог совершенно корректным образом, дали совсем не тот результат, которого бы хотелось. Отсюда внемлите со вниманием.

Несмотря на то, что блог по всем понятиям стал более кошерным, поисковый трафик почти сразу просел в полтора-два раза. Это означает, что документы блога в серпе сместились вниз, и не очень катастрофично, но заметно уступили свои позиции. И я связываю этот результат только с употреблением тега ласт модифиеда.

Тут немного не логично получилось.

С одной стороны, мы позаботились об искалках, указав явным образом степень древности всех наших документов, чтобы ботам не нужно было педантично отслеживать факт модификации контента, и догадываться о периодичности обновления каждого из документов.

С другой стороны, ответной любви явно не случилось- весь из себя кошерный блог попал под фильтры искалок, уважающих свеженькие документы, а не замшелые и покрытые плесенью опусы годовалой давности. Каковая давность предельно чётко обозначена нами посредством ласт модифиеда.

В пользу этого предположения красноречиво свидетельствует и факт пропадания страничек постов из списка популярных документов в статистике блога. Если раньше трафик поступал именно на эти документы с отдельными заметками, то сейчас- исключительно на страницы брогскролла. Ибо каждая такая страница несёт в себе по три смежных поста, но, в отличие от постов, имеет датой ласт модифиеда время создания последнего из постов, так как именно в тот момент произошло смещение заметок в блогскролле вниз, и все страницы блогскролла обновили свой контент на грубо говоря 30%

Что поделать- дерьмо случается.

Результаты моего эксперимента свидетельствуют о несомненной вредности тега Last-Modified. Для блогов классической структуры в частности. Да, ботовый трафик несколько снизился, но общая пессимизация документов в SE свела на нет все мнимые выгоды такой вот «оптимизации» ботового трафика.

Это, естественно, промежуточный, хотя и донельзя очевидный результат- эксперимент решено не прерывать, и пока не ворачивать всё, как росло. Возможно, три недели- не срок, и какая-то внутренняя инерционность искалок (интересует и отслеживается в первую очередь Гугл) пока не позволяет SE оценить всю кошерность и несомненную породистость блога, а также воспылать к нему пылкой страстью.

Хотя, справедливости ради стоит заметить, что кой-какая положительная динамика поискового трафика в последнее время наблюдается- возможно, тот же Гугл таки переосмысливает своё поведение, и апеллировать к святой инквизиции столь категорично не стоит. Поживём- увидим.

Я пока не знаю, стоит ли поставить тут точку, и должна ли она быть жирной. Потому пускай их будет три, худых и дистрофичных.

А что бы стоило сделать ?

Да просто проанализировать бесполезность ботового трафика. Скажем, вот есть у меня такая статистика за пару недель:

5321
2678
1432
1002
638
502
468
459
118

Googlebot/2.1 - маскируется под Mozilla/5.0 
larbin_2.6.3 larbin2.6.3@unspecified.mail
msnbot-media/1.0 
Mediapartners-Google/2.1
Yandex/1.01.001 
msnbot/1.0 
Yahoo! Slurp; - маскируется под Mozilla/5.0 
Java/1.5.0_08
NutchCVS/0.7.2

713
-
-
AdSense
4
18
36
?
?

13.4%



 0.6%
 3.6%
 7.7%

Чьи два последних бота, я не знаю. Но про остальных (за вычетом медиаботов) можно порассуждать.

Поделив количество запросов, поступивших с поисковой системы (это живые серферы) на число визитов бота этой искалки на блог, мы легко поимеем эффективность привлечения трафика с различных поисковых систем в относительных процентах.

• Как и следовало ожидать, первенство держат Гугл и Яха. Вы должны хорошо знать эти SE- любой вебмастер сочтёт за счастье с ними работать.
  
  
• Эффективность msn куда как ниже- и это даже без учёта трафика медиабота msn. В принципе, медиабота можно было бы и побрить- вряд ли он найдёт на блоге хоть что-то интересное для себя.
  
  
• Чётко видно, что бота поиска по блогам Яндекса брить не только можно, но и нужно. Четыре несчастных визита, порождённых его сервисом поиска по блогам- это даже не смешно. Баним.
  
  
• А вот архиватора Интеренета, как и его бота larbin_2.6.3 банить нужно всенепременно- трафик этот бот накручивает гигантский, а вот толку от него Вам лично нет никакого совершенно.

Так что прописав пару-тройку ботов в robots.txt, можно сразу сэкономить четверть объёма ботового трафика без всяких потерь для себя. А если ещё и знать назначение и принадлежность прочих ботов, коим несть числа, то и добрую половину, никак не меньше.