Вступление
В начале было слово. Какое именно, история умалчивает, но это и неважно, важно то, что инновация прижилась и живет до сих пор. Когда слов стало достаточно, нашелся умелец, который сложил из них первый рассказ, людям понравилось и автор тут же был одарен земными ценностями - молоком, маисовыми лепешками и съедобными плодами. Так появился первый писатель.
Когда слов стало еще больше и появилось много созвучных, кому-то удалось сложить из них стихи. Людям, а особенно женщинам опять понравилось. Так появился первый поэт. Его, как и положено, опять одарили земными ценностями: вином, признанием и женской любовью.
Шло время, росло количество писателей и поэтов, а с ним и количество произведений. Одни были интересными и заставляли читателей переживать описываемое, а другие никому не нравились, одни рассказы были про любовь, другие про ненависть, третьи о том, как в домашних условиях изготовить взрывчатку. Возникла проблема: на выбор стало уходить слишком много времени, ведь если с тематикой еще можно было определиться по названию, то о качестве произведения можно было судить только после прочтения.
Так возникли предпосылки для появления первого каталога...
Небольшой экскурс в историю
Задача любого каталога - систематизировать информацию и в настоящее время Интернет каталоги практически ничем не отличаются от любых других каталогов, существующих в мире. За маленьким исключением: в 99% случаев Интернет каталог создается совершенно не для помощи пользователям Интернета.
Нет, так конечно было не всегда, был промежуток времени, когда каталоги создавали на благо, их создатели были чудаками альтруистами, которые действительно хотели сделать мир лучше. Когда они тратили годы своего времени на составление своих каталогов, они вряд ли задумывались о PR, мордах, Adsence и т.д., единственным более-менее материальным стимулом в то время был трафик, и то больше ради морального удовлетворения, чем ради заработка, ведь реклама еще не завладела Интернетом. Каталоги составлялись на совесть - прежде чем занести в каталог новый ресурс, модератор внимательно изучал сайт, потом сам писал описание и заносил его в каталог. И неудивительно, что те каталоги начали пользоваться огромной популярностью - народ, что называется повалил, ведь каталоги реально экономили время, а ни одна поисковая машина в то время еще не могла похвастать относительно качественным поиском.
Популярность давала свои плоды, люди на своих страничках стали рекомендовать каталоги другим, начал накапливаться главный капитал Интернета - ссылки. Поисковые машины тоже во многом опирались на базы данных каталогов и все были довольны. Все, кроме самих поисковых машин, БД каталогов не были достаточно полными, а ключевыми словами уже вовсю манипулировали "продвинутые" вэб мастера. Все изменилось, когда компания Google запатентовала алгоритм Page Rank, благодаря чему ее поиск стал на порядок качественнее конкурентов. Page Rank стал прорывом в поисковых технологиях. Принципы алгоритма Page Rank стали использовать все поисковые машины, и с этого момента в Интернете начинается ссылочная гонка. И именно с этого момента начинается эволюция современных каталогов, заполонивших Интернет.
Главный капитал сети
Ссылки, ссылки, ссылки... Каким бы хорошим не был бы ваш сайт, но без ссылок он не будет найден, это истина, а значит нужно придумать способ получать ссылки, ведь как известно: мы не собираемся ждать милости от природы, взять их самостоятельно наша задача!
Решение было быстро найдено - обмен ссылками с коллегами. На сайтах начали появляться зачатки первых линкопомоек - разделы "наши друзья". В то время многие вэб-мастера были еще интеллигентными людьми - обмен ссылками велся только с тематическими сайтами, и многих от тотального обмена ссылками удерживал эстетический фактор. Мало, кто соглашался меняться ссылками с сайтами совершенно несоответствующими тематике.
Но некоторые все же не удержались, и вскоре выяснилось, что меняться нужно со всеми подряд! Вот и первая линкопомойка. Секрет успеха найден - чем больше поменялся, тем больше Pr (здесь и далее под "Pr" следует понимать не именно Page Rank, или ТИЦ, а обобщенную величину , характеризующую суммарный вес ссылок, не привязанный к той или иной поисковой машине), тем выше в выдаче, тем больше хостов, тем больше кликов, тем больше заработал на рекламе или получил клиентов.
Вскоре тотальный обмен охватил почти всех, многие админы пожертвовали эстетикой, ради тридцати серебренников. Ситуация привела к тому, что в выдаче на первых местах начали появляться сайты совершенно не соответствующие поисковым запросам, но имеющие высокий Pr. Оптимизаторы ("продвинутые" вэб-мастера уже определились с названием) сделали свой ход, настала очередь поисковиков, и они не заставили себя ждать: за некоторое время практически все поисковые машины скорректировали свои алгоритмы так, что обменные пары ссылок потеряли свой вес, а сайты с линкопомойками начали сначала вручную, а потом и автоматически пессимизироваться, или вообще исключаться из результатов выдачи.
Ход скажем прямо не супер и противоядие было найдено очень быстро: меняемся по треугольнику (сайт 1 ставит ссылку на сайт 2, сайт два ставит ссылку на сайт 3 и т.д.) Вот здесь уже вычислить обмен намного сложнее, линкопомойки расцвели во всей красе. Теперь у каждого более менее серьезного сайта "за спиной" был другой сайт-линкопомойка, куда сливались ссылки по обмену и продолжают сливаться до сих пор, обмен организуется по разному, но в конечном счете все сводится к одной схеме: ты ставишь ссылку, в ответ ставят на тебя, идея, провозглашенная в алгоритме Page Rank была испохаблена со всей циничностью, свойственной интернету.
Но как то это все несерьезно, ручной труд дорогое и медленное удовольствие. И вполне закономерно, что параллельно "ручным" стали развиваться автоматические системы по получению ссылок, работающие по разным принципам, например линкатор или спам боты для форумов и гостевух. Линкаторы продержались очень недолго - сама идея имела настолько много слабых мест, что поисковики очень быстро научились их вычислять (действительно - разве сложно идентифицировать код линкатора в теле страницы. Со спам ботами поисковики тоже справились, но с переменным успехом, способ в общем работает до сих пор - на радость (особенно дорвейщикам) и на горе админов форумов.
Но это все не то, т.к. все эти способы напрямую нарушают лицензию многих поисковых машин, следовательно рано или поздно будут разоблачены, а виновные наказаны. А есть ли безболезненный способ поиметь немеряно ссылок не нарушая лицензию? Ха! Конечно есть! И он существует дольше, чем сами поисковики! Каталог ресурсов! Вот это действительно задачка для поисковых машин - каталог не противоречит ни одной лицензии поисковой машины, и формально систематизирует информацию. Действительно: если есть ODP, Yaka, или List.ru - (старейший каталог Рунета), то почему не имеет права на существование katalog.vasi.pupkina.ru? Нет проблем, пусть существует, маленькие каталоги существовали всегда и будут существовать, пока есть люди, любящие раскладывать все по полочкам, мало того, такие каталоги нужны, но почему же каталогов развелось ТАК много?
Неужели тысячи оптимизаторов задались целью систематизировать Интернет? Да нет конечно же! Каталог чего? Ссы-лок! Именно! Ресурс, где главным контентом являются ссылки, среди которых даже сам черт не сможет найти ссылки ваших партнеров по обмену! Кроме того, оказалось, что каталог ресурсов обладает гораздо большим потенциалом, чем мерзкая линкопомойка: правильно организовав регистрацию в каталоге можно довольно быстро нарастить Pr, что в сочетании с продуманной организацией каталога, даст неплохой трафик с поисковиков! А где трафик, там и Бегун, там и Google Adsence, и баннеропоказы и все остальное, к чему стремится почти каждый вэб-мастер.
Представляете какая заманчивая перспектива - иметь линкопомойку, которая к тому же еще и зарабатывает деньги, причем часто даже больше чем основной сайт! Вот вам и причина, бурного развития каталогов - необходимость + выгода. Нужны ли каталоги посетителям? Конечно да, но не в таком количестве! Нужны ли каталоги поисковикам? Конечно да, но только "свои, проверенные". Потребности и первых и вторых давным давно удовлетворены, а вот потребности оптимизаторов не будут удовлетворены никогда, пока существует принцип Page Rank. Все стало на свои места, и теперь самое время отделить зерна от плевел!
Классификация каталогов
Каталоги можно классифицировать по многим факторам, но самый главный конечно же польза для взаимодействующих сторон - пользователь сети, поисковая машина, оптимизатор. (классификация далеко не полная и недоработанная, но я надеюсь она раскрывает вопрос достаточно).
- По пользе:
- Каталоги полезные посетителям (П)
- Каталоги полезные поисковым машинам (SE)
- Каталоги полезные админам сайтов (SEO)
- Каталоги вредные посетителям (П)
- Каталоги вредные поисковым машинам (SE)
- Каталоги бесполезные админам сайтов (SEO)
- По ссылочной политике:
- Каталоги ставящие видимую поисковикам ссылку SEO
- Каталоги ставящие невидимую поисковикам ссылку SEO
- Каталоги ставящие видимую поисковикам ссылку при выполнении доп. условий.
- По политике регистрации в каталоге:
- Платные
- Бесплатные
- Платно/бесплатные
- С ограничениями на количество знаков в описаниях
- С ограничениями по тематике
- С ограничениями по географии
- С ограничениями на урл ресурса (ссылка только на главную, или ссылка на любую страницу)
- По проверке выполнения условий регистрации:
- Требующие обратную ссылку и проверяющие выполнение требования регулярно SE
- Требующие обратную ссылку и проверяющие выполнение требования только при регистрации SE, SEO
- Требующие обратную ссылку и не проверяющие выполнение требования SE, SEO
- Не требующие обратную ссылку SEO, SE
(почему некоторые факторы выделены красным, будет объяснено ниже по статье)
- По качеству модерации:
- Немодерируемые (принимаются любые описания сайтов) П
- Полумодерируемые (описания сайтам пишет админ регистрирующегося сайта, но сайт вносится после одобрения описания модератором каталога)
- Модерируемые администрацией каталога (описания сайтам пишет модератор каталога) П, SE
- Модерируемые администрацией каталога и привлеченными добровольцами (описания сайтам пишет модератор каталога и доверенные лица со стороны) П
- По степени автоматизации управления каталогом:
- Полностью автоматизированные
- Частично автоматизированные
- Полностью ручные
- По выдаче результатов:
- Посетитель направляется на описываемый ресурс. П
- Посетитель направляется на страницу в каталоге с описанием ресурса или ресурсов. П, SE
- Посетитель направляется на паразитную страницу с рекламой П, SE
- По детализации:
- Общие (нет или не более 1 тематических подрубрик)
- Детализированные (есть более 2 ступеней подрубрик) П
- Сильно детализированные (есть более 3 ступеней подрубрик) П, SE
- Детализированные частично
- По сортировке ссылок по рубрикам:
- Каталоги рейтинги
- Каталоги конкурсы
- Каталоги рейтинги с возможностью влияния на место в выдаче
- Сортировка по дате занесения в каталог
- Сортировка по алфавиту/региону/другим параметрам, не привязанным к дате регистрации
- С возможностью выбора параметров сортировки П
- По типу страниц со ссылками:
- Динамические страницы
- Статические страницы SEO
- Комбинированные (есть как динамические страницы, так и статические)
- По наличию обратной связи:
- По тематике:
- Глобальный тематический каталог (в каталог принимаются сайты любых тематик, которые разносятся в соответствующие тематические категории)
- Профилированные (принимаются все сайты, но тщательной рубрикации подвегается какая либо более узкая тема)
- Широкотематические каталоги (принимаются сайты какой либо обширной тематики)
- Узкотематические каталоги (принимаются сайты только определенной узкой тематики)
Комбинация тех или иных факторов, классифицирующих каталог, раскрывает сущность каталога, рассмотрим наиболее интересные случаи:
- "Белый каталог". Два обязательных условия: не требующий обраток, ставит прямые ссылки. - с плохим качеством модерации или с ее отсутствием система не подвержена саморазвитию, чаще всего используется как буфер для слива ссылок по обмену. С хорошим качеством модерации, постепенно может развиться в площадку малой мощности для открутки рекламы.
- "Накопитель халявного контента". Каталог с нижним лимитом (ограничение по количеству знаков) в описании добавляемого сайта, сущность каталога: накопитель халявного контента, которым становятся как раз описания сайтов. Чем больше лимит на количество знаков, тем больше тематического контента накапливает каталог, в сочетании с мерами по утечке Pr (закрытие от индексации ссылок в "no index/no follow" и мерами по стимулированию роста регистраций (можно регистрировать не только главную страницу, но и внутренние) такой каталог достаточно быстро начинает получать целевой трафик, на котором затем откручивается текстовая реклама (чаще всего Бегун).
- "Адъютант его превосходительства". Каталог, продвигаемый какой либо поисковой системой, или сотрудничающий с какой либо поисковой системой - всегда полностью модерируемый администрацией каталога, глобальный, с большой детализацией, иногда с наличием обратной связи. Сущность каталога - упорядочить информацию и повысить качество поиска. Часто с платной регистрацией, стимулируемой поисковой машиной, но всегда с приоритетом на качество информации.
Или наоборот - подобрав нужные факторы с точки зрения пользы можно определить каким будет каталог... Например мы хотим создать полезный для всех каталог (П+SEO+SE) значит одна из комбинаций, ведущих "к успеху" будет такой: каталог ставит видимую поисковикам ссылку, модерируемый администрацией каталога, не требующий обратную ссылку.
Как пример вредного для всех каталога следующая комбинация: (П+SEO+SE)... Немодерируемый, требует обратную ссылку, ставит редирект. Как ни странно такие каталоги тоже существуют! :-) (не будем отвлекаться и искать причины существования таких каталогов, поверьте, это не стоит нашего времени).
Итак, за что НУЖНО банить каталоги?
Налицо конфликт: с одной стороны каталог несомненно имеет право на существование и тем более в Интернете, т.к. вопрос упорядочивания информации будет здесь открытым всегда (а каталог прекрасно с этим справляется), а с другой стороны, и это видят все, - каталоги начали негативно влиять на качество поиска. Оптимизаторы мощно "отомстили" за линкопомойки! Чем ответят поисковые машины? Запретить каталоги? Это настолько же глупо и бесперспективно, как запрет на коллекционирование. Ок, тогда банить "плохие" каталоги! Это уже ближе к истине, но все равно не выход, т.к. кто возьмет на себя тяжесть судейской мантии и определит, какой каталог плохой, а какой хороший, к тому же дело ведь вовсе не в каталогах! Мудрые люди обычно борятся не со следствием, а с причиной.
Если рассуждать стратегически, Рунет пока еще относительно молодой, самые жирные сайты держатся на уровне Pr 7-8, что однозначно указывает на его если не младенческий, то максимум на подростковый возраст, т.е. в общем количество ссылочного капитала Рунета еще очень мало и если за короткое время появится огромное количество ссылок из ниоткуда, они естественно нарушают общий баланс, что обязательно отражается на всех расчетах, зависящих от Pr. Откуда же взялся негативный Pr в таких количествах, чтобы повлиять на ситуацию? А все очень просто! Начнем с самого начала - в чем идея алгоритма Page Rank? В том, что поисковик учитывает ссылки, поставленные на другие ресурсы. А теперь чрезвычайно важное замечание: ссылки, поставленные ДОБРОВОЛЬНО. А теперь посмотрим на ситуацию вокруг каталогов...
Появляется новый каталог и админы начинают в нем регистрировать свои ресурсы, абсолютно ничего плохого в этом нет, ни действия админа каталога, ни тем более действия админа, регистрирующего свои ресурсы в каталоге не противоречат лицензии и не наносят вред. Даже если бы ежедневно появлялось по 1000 каталогов, ситуация была бы стабильной, ведь Pr у нового каталога "нулевой", следовательно ссылки из него еще более "нулевые", и даже если сложить все ссылки всех новоиспеченных каталогов - вес их был бы ничтожно мал чтобы повлиять на общую картину.
Но как известно все немного не так - большинство каталогов требуют установку обратной ссылки и в этом кроется главная причина, которая привела к лихорадке, в которой трясся поиск продолжительное время. В короткие сроки в Рунете начало быстро расти количество "фальшивого Pr", т.к. каталоги начали получать большое количество ссылок с качественных, существующих уже определенное время ресурсов, зарегистрировавшихся в каталогах. Пошла цепная реакция - чем больше зарегистрировалось ресурсов, тем сильнее возрос Pr каталога, тем привлекательнее стала регистрация в каталоге, тем еще больше зарегистрировалось ресурсов, тем еще больше возрос Pr каталога, и так до бесконечности. (более того, многие каталоги стремились максимально уменьшить утечку Pr со своих страниц, скрывая ссылки редиректами или тэгами).
В процессе накопления фальшивого Pr катализатором выступил сервис 1ps, который значительно упростил регистрации в каталогах и тем самым ускорил рост негативного Pr в Рунете. (справедливости ради надо заметить, что сейчас существует еще один сервис авторегистраций - "уха", но он появился значительно позже и "все самое интересное" пропустил). Ситуация стала такой, что за год-два накопить Pr5 было под силу каждому не ленивому админу каталога. Неправда ли смешно?
Отбросим все технические тонкости и вспомним принцип Page Rank, помните? ссылки, поставленные ДОБРОВОЛЬНО. Неужели каждый из сотен каталогов близнецов, с одинаковыми рубриками, с небрежно составленными описаниями ресурсов (в лучшем случае) настолько нужны пользователям Интернета, что естественным образом обрастают ссылками до фантастических для рядового сайта величин? Конечно нет! Именно здесь и кроется причина всех бед, ведь не зря в начале статьи я долго писал про обмен ссылками.
Почему за короткое время пессимизировали большинство каталогов Рунета? Кто виноват? Придурок, зарегистрировавший сайт Кремля с якорем "враг народа"? Конечно же нет, он всего лишь открыл глаза на ситуацию поисковикам, слишком сильно увлекшихся зарабатыванием денег, по большому счету, это был всего лишь баг-репорт. Разработчики скриптов каталогов, он-лайн сервисы регистраций, оптимизаторы и уж тем более сам Путин в этом не виноваты. А кто виноват? - Виноваты админы каталогов, превратившие каталоги в линкопомойки.
Вот отрывки писем, которые получал каждый, кто регистрировался в каталогах:
"Ваша ссылка http://www.vasya-pupkin.ru не включена в наш каталог www.ohuenno-nuzniy-vsem-katalog.ru и будет удалена через N дней. Причина этого - на Вашем сайте отсутствует ссылка на наш сайт, либо наша ссылка установлена через редирект или запрещена к индексации"
"Добро пожаловать! Ваша ссылка будет добавлена в www.ohuenno-nuzniy-vsem-katalog.ru после проверки Мы разместим Вашу ссылку в обмен на размещение нашей текстовой ссылки. Код нашей текстовой ссылки: ..."
"Здравствуйте! До удаления ссылки из каталога www.ohuenno-nuzniy-vsem-katalog.ru на www.vasya-pupkin.ru осталось N дней! Это произошло потому, что наш робот не обнаружил на вашем сайте нашу ссылку..."
Все это можно назвать как угодно, но смысл всегда один: это ТРЕБОВАНИЕ. Кто нибудь скажет, как относятся друг к другу слова ДОБРОВОЛЬНО и ТРЕБОВАНИЕ? Правильно, это слова имеющие противоположный смысл.
Если вы решили стать 3258-м владельцем автоматического каталога на PHP+MySQL вы не наносите вреда никому. Если вы регистрируете в каталоге свой 150-й сайт-сателлит, вы не наносите вреда никому. Если админ каталога принимает ресурс с набором ключевых слов вместо человеческих описаний, он не наносит вреда никому. Если админ каталога ставит вверху своих страниц по 10-15 блоков Бегуна, так, что посетитель ничего кроме них не видит, он не наносит вреда никому (Ну разве, что Якоб Нильсен поперхнется :-)
Все описанные выше действия бесполезные, но не вредные, при условии, если у каталога соответствующий действительности Pr. (каталоги с описанными выше признаками никогда не обрастут "настоящими" ссылками, а соответственно не наберут достаточного веса, чтобы влиять на что либо, т.к. не несут особой пользы для посетителей). Но вот если админ каталога требует обратную ссылку - он автоматически превращает свой каталог в пусть навороченную, но все же линкопомойку, да к тому же еще и провоцирует создавать линкопомойку (или раскидывать помоечные ссылки на сайте) других. Все очень просто. Все настолько просто, что на это никто долго не обращал внимания. И все становится просто для поисковиков - продолжать банить линкопомойки, благо опыт накоплен достаточный, а каталоги не трогать. А отличить каталог от линкопомойки очень просто: настоящий каталог не требует поставить на него ссылку, идея каталога в том и заключается, что каталог составляет свою "картотеку" самостоятельно, со стороны. Вот вам и объяснение, почему некоторые строки в классификации каталогов выделены красным: потому, что это симптомы однозначно указывающие на болезнь - linkus pomoikus, что является грубым нарушением лицензии. Всё становится на свои места.
Типа резюме
Каталогу не запрещено иметь высокий Pr, более того, хороший каталог должен иметь высокий Pr, но этот Pr должен быть благодарностью пользователей, которым каталог сэкономил время, а не шантажом по отношению к админам сайтов...
Ну вот, потянуло пафосом... Значит пора закругляться. Только хочу от себя несколько замечаний добавить (на правах имхи).
Админ регистрирующегося в каталоге сайта имеет право писать описание для своего сайта в любой форме, хоть "сайт официального дилера HP в Нижнем Новгороде", хоть "HP, продажа HP, принтеры, продажа принтеров", т.к. нет однозначных критериев по оценке художественности или эстетики, к тому же где грань между т.н. "списком ключевиков" и "описанием для пользователя" (последнее имхо просто абсурдный термин, т.к. слово "принтер" уже несет в себе ичерпывающую информацию о тематике и не нуждается в "красивом" литературном оформлении).
Любой обмен ссылками всегда зло, т.к. генерирует фальшивый Pr, но есть один важный момент, который ни в коем случает нельзя забывать: если на вашем сайте про бабочек есть раздел со ссылками на пару десятков других сайтов ваших коллег-"бабочников", это только приветствуется, и ничего страшного в том не будет, если через некоторое время на сайтах ваших коллег энтомологов появится "ответная" ссылка на ваш сайт. Это не обмен ссылками, это признание высокого качества вашей работы (к сожалению это всего лишь отрывок из утопии об идеальном мире).
Факт появления нового каталога в сети, в условиях практически полного отсутствия пользовательского спроса на каталоги, совершенно не означает его линкопомоечный характер, тем не менее заставляет задуматься. И когда поисковые машины научатся отделять из общего количества "каталогов" линкопомойки - все будет хорошо (уверен, что это технически совершенно не сложно, расписывать не буду).
Самый надежный способ поиметь жирный Pr - наполнить сайт интересным и уникальным контентом (те, кто сейчас усмехнутся, могут смело считать себя лентяями и недалекими людьми).
Прошу не обращать внимание на некоторые неточности, нестыковки или признаки некомпетентности, которые могут показаться кое-где более матерым товарищам. Тем более прошу не нервничать каталоговодов. Всё, что я здесь написал вы и без меня прекрасно осознаете.
|