Поскольку популярно о серьёзном больше нигде, кроме как в блоге, не напишешь, сегодня мы будем прикалываться на тему индексируемости ресурса поисковиками. И Вам познавательно (кому это, естественно, интересно), и мне хорошо- всех вопрошающих по поводу технологии запуска на орбиту всяких там эмуляторов сайта, буду адресовать в это место.

Но сначала о сути проблематики.

Представьте себе большую контору, тысяч на несколько трудящихся. И директора этой конторы, к которому вдруг нагрянули люди в штатском. Серьёзные такие дядьки, с полномочиями, простирающимися безгранично. Или люди совсем даже не в штатском- вот хрен знает, кто из них страшнее. С вопросом, простым, как балалайка: а что ты знаешь, мил человек, о таком-то? Всё до последней копейки. Как на духу и под запись. Слушаем сюда внимательно.

Ясное дело, контора- это не мафиозный клан, в котором просто нет людей случайных. Мафия потому и бессмертна, что каждый человечек многократно перепроверен, прозрачен в своих помыслах и действиях. Более того, он встроен в жёсткую иерархию, и кто-то за него персонально ответственен своим здоровьем, грубо говоря. А посему руководитель конторы, в отличие от своего мафиозного коллеги, может и понятия не иметь о существовании в природе человечка, по душу которого пришли люди в штатском, с таким вот безразмерным любопытством.

Руководитель конторы может качественно настучать лишь на ближайших своих приближённых, с которыми вместе водку пьёт, по бабам ходит, да контору на бабки разводит, изощрённо и самыми извращёнными методами. А про незначительных сотрудников, в сию катавасию не вовлечённых, у кормушки не стоящих, он имеет полное право и не знать ничего. Ибо тьфу на них- не тот уровень.

Да простится мне столь банальная ссылка на конгруэнтность сущностей, но, други мои, с чего Вы вообще взяли, что Ваш ресурс должен отыскиваться в поиске по каким-то нужным Вам запросам, и обязан содержаться в индексе поисковика? В Сети сотни миллионов достойных сайтов, миллиарды страниц на любимейшем всеми искалками английском языке, а у поисковых ботов работы на триста лет вперёд. И у новенького сайта нет никаких веских оснований быть сходу проиндексированным, ибо:

• Ни один ресурс не является настолько уникальным, чтобы из-за него копья ломать.
• Неизвестно, как долго ресурс будет жить, и стоит ли его вообще индексировать.
• Да и просто не мешает к сайту сначала присмотреться, что это за зверь такой.

Каждое из трёх положений справедливо железобетонно. И в том или ином виде заложено в алгоритмы любой уважающей себя поисковой системы. Вкратце все эти хитрые алгоритмы можно озвучить единственной фразой: "сайт должен доказать поисковику свою ценность". Давайте дадим расшифровку, как это понимать.

А просто понимать: Вы не можете повысить ценность своего сайта для SE изнутри. Например:

• Было бы наивно уповать на мета-теги, которыми, начитавшись всяких умных книжек и мануалов, вебмастера с покорностью бандерлогов под надзором удава нашпиговывают свои странички, радуясь собственной крутизне, аки дети.
  Титла и дискрепшена за глаза хватит. Увидев ещё с десяток других хитрых тегов, поисковик не воспылает любовью к столь хрестоматийному сайту.
  Ему и андеграунд по барабану.
  
  
• Никакая структуризация страницы абсолютно не влияет на собственно её индексируемость. Пишите каким угодно шрифтом и любым размером заголовка, выделяя стронгом и жирнилкой любые слова и фразы- на решение бота, занести ли это в индекс, или слить в корзину, Вы не повлияете никоим образом.
  
  
• Внутренняя иерархия страниц на этапе проникновения сайта в индекс поисковика последнему вообще безразлична.
  То есть, грубо говоря, заюзав всего 5 тегов-контейнеров HТML,HЕAD,TIТLE,BОDY,PRЕ, и вогнав в них вот этот текст, я получу документ, ничуть не менее привлекательный для поисковика, чем всё то же самое, но нафаршированное всевозможными вебмастерскими изысками и секретами, за которые гуру имеют наглость ещё и денег хотеть.

Более того, чем меньше всяких изысков в коде паги будет изначально, тем больше SE на этапе занесения в индекс ресурс понравится. Лишь бы на странице было много уникального, разнообразного и качественного текста. Не стыбренного тупо из других мест.

Другой вопрос, на каком основании поисковики решают, достоин ли данный конкретный ресурс быть представленным в индексе. Мы уже поняли, что само поведение сайта в расчёт не берётся. Мало ли что он там о себе думает, как понтуется и пальцы топорщит. Внимание уделяется только внешним ссылкам на ресурс. С других сайтов.

Вот тут надо чётко отделить мух от котлет. То есть понимать, чем отличаются шаги, действительно увеличивающие ценность сайта как структурной единицы Сети, от бестолкового шаманства, суеты на ровном месте. Смешно, но факт- очень немногие могут отличить одно от другого. Давайте вникать:

• Множество всякого рода каталогов будут с пеной у рта уверять Вас и самих себя, что они крайне полезны, и их услуги чуть ли не денег стоят. Но ставят ссылку на Вас через скрипт учёта исходящего трафика, то есть не ссылаются напрямую. А потому на самом деле бесполезны совершенно- каталоги созданы всевышнем вовсе не для получения с них трафика.
• Фактически все рейтинги и входящий, и исходящий трафик пропускают через пузомерку. Опять-таки прямой ссылки не дождётесь.
• Всевозможные трафикообменные системы, с их консолями и фреймами, в принципе не могут изобразить из себя Чипа и Дейла. Тех, что спешат на помощь.

А что же оборачивается благом?

Всё, что приводит к появлению прямых ссылок с других ресурсов на Ваш. Чем больше таких ссылок с сайтов высокого полёта (статуса), тем лучше. Статус- тот самый ТИЦ, ВИЦ, PageRank, а также всё, что будет изобретено впредь, но имеет тот же смысл.

Да, тут есть маленький нюанс. Если раньше сайтов было немного, и имело смысл тупо скармливать УРЛ нового ресурса поисковику для полной индексации, то сейчас это силы не имеет. Возникла потребность в предварительном наличии известных поисковику внешних ссылок (по которым он и сам ресурс отыщет в стиле элементарного Ватсона). Эти ссылки как бы являют собой рекомендацию, без которой в приличном обществе на порог не пустят. Собственно, в том же Гугле такой подход почти приобрёл силу закона- без внешнего линка полноценной индексации новорожденного сайта не дождётесь.

К этому моменту усталость Вас должна одолеть и сморить, так что будем подводить итоги и подбивать бабки:

• Организуйте ссылочки на свой сайт с других ресурсов, известных поисковикам.
• Пусть эти линки будут со страниц с высоким PageRank'ом.
  Можете полгода заниматься онанизмом с форумами, гостевыми книгами и досками объявлений, и добиться точно такого же результата, как и от аренды рекламных мест на морде нескольких сайтов с пейджранком в пятёрку или шестёрку.
  Месяца будет достаточно :)

Господа, это все премудрости скорейшего проникновения в индекс SE до копейки. Другой вопрос, зачем это Вам понадобилось, что сим достигается, и как вести себя дальше, дабы понадобившееся достиглось наилучшим образом. Но эти вопросы являются поводом для отдельного разговора с не столь очевидными и прямыми рекомендациями.

А пока, памятуя, что слова мудрости кратки, а мудрствования долги, запомните хорошенько выделенное чуток выше цветом индиго, и пусть это звучит, как последний аминь.

Да снизойдёт на Вас просветление.