Клоакинг

Что такое клоакинг

Клоакингом (от англ. to cloak – маскировать, прятать, скрывать) называется такая технология, которая позволяет разным посетителям сайта показывать разный контент.

Обратите внимание, что к клоакингу не относится показ разного контента посетителям сайта под авторизацией через логин и пароль. Также не относится к клоакингу показ разного контента динамических страниц с разными передаваемыми переменными.

Например, если разный контент показывается по этим двум адресам
http://site.ru/page.html?abc
http://site.ru/page.html?xyz
то это уже не клоакинг. Но если по одному и тому же адресу
http://site.ru/page.html
одним пользователям показывается одно, а другим пользователям другое, то это и есть настоящий клоакинг.

Реализуется клоакинг с помощью серверных скриптов, например, на языке PHP. С помощью клиентских языков, типа JavaScript, создать клоакинг не получится.

Некоторые примеры клоакинга

Вы можете в Интернете наблюдать клоакинг, например, на таких сайтах, как yandex.ru и mail.ru. Зайдя на эти сайты, Вы увидите информацию о погоде для того города, в котором Вы сейчас находитесь. Жители Москвы видят там погоду в Москве, а жители Владивостока видят там погоду во Владивостоке.

То же самое и с новостями на mail.ru. Посетители из разных городов видят там свои местные новости из своего города. Это также настоящий клоакинг.

В простейшем случае клоакинг создается путем анализа IP-адреса посетителя сайта. По IP-адресу посетителя сайта можно определить, например, из какого города данный посетитель. Именно так работает клоакинг на сайтах yandex.ru и mail.ru при первом посещении этих сайтов в только что установленном браузере. При этом говорят, что данные сайты используют геотаргетинг.

Но в клоакинге это не единственный способ определения, какой контент должен показываться тому или иному посетителю сайта. Другой способ, применяемый в клоакинге, это проверка куки посетителя.

Куки или кукис (англ. cookie), это жаргонное название взятки (формально переводится, как пирожок). Многие сайты после Вашего первого посещения (или после каждого Вашего посещения сайта) дают Вашему браузеру такую взятку в виде небольшого файла в специальной папке браузера. Эта взятка нужна для того, чтобы при следующем посещении сайта, этот сайт, как минимум, понимал, что Вы уже посещали его. Кроме этого, сайт может определить дату и время, когда Вы последний раз посещали этот сайт.

В кукисах может содержаться и много другой полезной информации. Например, там может содержаться Ваш логин для авторизации (но не пароль!!!). Вы, наверняка, встречались с такой ситуацией, что когда надо авторизоваться на каком-нибудь сайте, то Ваш логин уже подставлен в форму ввода, так что Вам остается только вставить пароль.

На том же сайте mail.ru Вы можете вручную сменить свой город на любой другой город и после этого, при посещении сайта mail.ru, Вам будут постоянно показывать погоду и новости для другого города. Запись о смене города остается в куках и сайт mail.ru использует эту информацию для определения того, какой контент Вам показать.

В технологии клоакинга могут применяться и многие другие способы определения того, что нужно показать тому или другому посетителю сайта.

Например, в зависимости от разрешения экрана монитора или от того, какой браузер используется посетителем сайта, пользователю также может показываться вебстраница с разным контентом. Хотя на практике в данном конкретном случае чаще клоакинг применяется, чтобы пользователю показывать разный дизайн вебстраниц, который более удобен для просмотра на его мониторе и в его браузере.

Еще один интересный вид клоакинга можно наблюдать на сайтах некоторых интернет-магазинов, например, на сайте Amazon.com. Там Вам начинают показывать товары в зависимости от того, какие перед этим Вы открывали страницы на их сайте. Например, если сначала Вы посмотрите несколько страниц с товарами для детей, то потом, перейдя на страницы с другими товарами, Вы увидите, что там, кроме этих других товаров, Вам будут советовать посмотреть и некоторые детские товары.

Я не советую использовать клоакинг для показа страниц на разных языках. Например, не советую, чтобы страница для иностранного посетителя была на английском языке, а для посетителя из России была на русском языке. Лучше сделать две разные страницы с разными адресами. Посетителей лучше перебрасывать редиректом на нужную страницу в зависимости от его IP-адреса. Но при этом и оставить ссылки на эти две страницы с разными языками.

Дело в том, что при клоакинге поисковики проиндексируют только вариант страницы с одним языком. Например, Гугл проиндексирует английский вариант, а Яндекс проиндексирует только русский вариант. Без клоакинга поисковики проиндексируют оба варианта.

Поисковый спам через клоакинг

Поисковые спамеры применяют клоакинг для обмана поисковых систем для целей получения большого трафика из поисковой выдачи. Обычно такие вещи делаются в связке клоакинга с дорвеями. А именно, роботам поисковых систем показывают дорвей, напичканный нужными ключевыми словами и фразами, а людям, которые посещают эти же страницы показывают нормальный читабельный контент.

При этом роботов поисковых систем скрипт клоакинга отличает от остальных посетителей вебстраницы по их User_Agent. Дело в том, что боты поисковых систем могут специально заходить на сайт с разных IP-адресов. Причем, время от времени поисковики меняют эти IP-адреса и не раскрывают информацию о том, с каких IP-адресов их боты заходят на сайты.

Самый эффективный метод в клоакинге состоит в том, чтобы определять поисковые боты и по их IP-адресу и по их User_Agent. При этом узнать User_Agent поисковых ботов какого-нибудь поисковика гораздо проще, чем узнать все их IP-адреса. В Интернете можно купить базу IP-адресов ботов какого-нибудь поисковика. Но нет никаких гарантий, что купленная база уже не устарела.

Поисковый спам, реализованный при помощи технологии клоакинга с дорвеем, имеется два преимущества перед поисковым спамом при помощи только одних дорвеев:

1. Не нужно делать редиректы или ссылки для перехода посетителей.
2. Ваши дорвейные оптимизированные страницы не будут обнаружены Вашими конкурентами (если они не подозревают, что это клоакинг) и, соответственно, не будут сворованными.

Кроме этого, клоакинг позволяет сделать дизайн вебстраницы, которую показывают людям, такой, какой хочет вебмастер, без оглядки на предпочтения поисковых систем. Дело в том, что поисковики не любят повышенную закодируемость вебстраниц. Плюс к этому, желательно, чтобы полезный контент располагался как можно ближе к началу вебстраницы, а всё второстепенное располагалось ниже полезного контента. При применении клоакинга в поисковом спаме, html-разметка дорвея может быть максимально оптимизированной под поисковики, а страница для людей может содержать любые дизайнерские изыски.

Отношение поисковиков к спаму с клоакингом

Применение клоакинга может очень сильно исказить поисковую выдачу. Такое получается, когда дорвей имеет одну тематику, а вебстраница для людей имеет совсем другую тематику. Возможно, Вы встречались с такой ситуацией, когда набирали в поисковике одну фразу, по какой-нибудь одной тематике, а при переходе на сайт, который был первым в списке выдаче, попадали на страницу, которая посвящена совсем другой теме. Например, искали биографию Менделеева, а попали на сайт, который торгует сотовыми телефонами.

Поэтому все ПОИСКОВЫЕ СИСТЕМЫ ЛЮТО НЕНАВИДЯТ ПОИСКОВЫЙ СПАМ В ВИДЕ КЛОАКИНГА В ПАРЕ С ДОРВЕЕМ, и они ведут борьбу с таким видом спама путем выкидывания из своего индекса как отдельных вебстраниц, так и всего сайта. Для обнаружения такого поискового спама поисковые системы используют специальные боты, которые маскируются под обычных людей, которые заходят на сайты через браузеры. Эти боты гуляют по Интернету со специальных IP-адресов, которые время от времени меняются.

Поэтому, если Вам зачем-то понадобился на сайте клоакинг, то

1. при селекции посетителей вебстраницы ни в коем случае не стремитесь отделять посещения поисковых ботов от всех других посетителей;
2. старайтесь не использовать дорвеи в качестве одного из вариантов показываемого контента.

Если поисковые боты обнаруживают первый пункт, то это очень сильно заинтригует их на предмет изучения найденного клоакинга. Поисковая система уделит такой вебстранице особое повышенное внимание. Поисковику покажется очень странным, что именно его ботам показывается не такой контент, как всем другим посетителям.

Поисковая система захочет или найти подтверждение, что не только её ботам показывается контент, отличный от другого, но и другим посетителям тоже показывают этот же контент. То есть поисковик должен убедиться, что этот клоакинг создан не специально для обмана поисковой системы.

Или поисковая система захочет убедиться в обратном, что это действительно клоакинг направленный на поисковую систему. Для этого поисковая система начнет отправлять на клоакинговую вебстраницу своих разных ботов, и очень известных и очень секретных, чтобы проверить, какой контент отдает сервер тем и другим ботам.

Если, при наличии первого пункта, поисковые боты обнаруживают и второй пункт, то есть, что именно им показывают дорвей. То это прямая дорога к тому, что данная вебстраница будет забанена. А если таких вебстраниц на сайте будет обнаружено очень много, то будет забанен и весь сайт.

Если пункт первый не подтвердится, но подтвердится пункт второй, то есть дорвей показывается какой-то группе людей, а не поисковику, то эта ситуация также не нравится поисковым системам, так как им непонятно, как ранжировать данную страницу в поисковой выдаче. Поэтому при использовании дорвеев в клоакинге старайтесь показывать дорвей очень ограниченному кругу посетителей сайта. Например, это могут быть только посетители с какого-то одного конкретного IP-адреса или небольшого набора таких IP-адресов. Или, например, дорвей можно показать только строго определенному набору User_Agent.

Большинство поисковых систем нормально относятся к клоакингу, когда разный показываемый контент имеет примерно одну и ту же тематику и примерно один и тот же набор ключевых слов и фраз.

В то же время, известны случаи многолетних клоакингов с дорвеями для поисковых ботов, когда тематики дорвеев совпадают с контентом, который показывают реальным посетителям, и имеют примерно один и тот же набор ключевых слов. В таких случаях поисковые системы не считают, что данный клоакинг с дорвеем нарушает поисковую выдачу.

Однако такие случаи всё-таки являются хождениями по краю пропасти. Новичкам лучше не применять клоакинг для поискового спама. Отсутствие опыта однозначно приведет Ваш сайт в бан.

Как самому обнаружить клоакинг

Поисковый спам на Вашем сайте в виде клоакинга легко может распознаваться Вашими конкурентами, если Вы определяете поисковые боты только по их User_Agent. Дело в том, что с помощью специального программного обеспечения можно легко подделать нужный User_Agent, в том числе и User_Agent какого-нибудь поискового бота.

Наоборот, если поисковый спам на Вашем сайте в виде клоакинга устроен так, что поисковые боты определяются по IP-адресам, то Вашим конкурентам разоблачить Вас будет очень трудно. Дело в том, что подделать нужный IP-адрес практически невозможно.

Но и в этом случае можно разоблачить клоакинг в виде поискового спама. Для этого нужно посмотреть на то, как выглядит сохраненная копия вебстраницы в кэше поисковика. Единственно, что при этом надо обратить внимание на дату сохранения копии, чтобы не спутать клоакинг со свопингом.

Пример очень простого клоакинга

Подробное описание простого примера применения клоакинга и скрипт этого клоакинга можно найти здесь. Этот клоакинг не является прямым поисковым спамом. Тем не менее, этот пример в некоторой степени работает и на раскрутку сайта.

Политика линкования своего сайта

Как правильно линковать свой сайт с другими сайтами? Имеется в виду, не то, как технически правильно написать ссылку на языке разметки HTML, а с какими сайтами следует линковаться. То есть, на какие сайты можно и нужно ставить исходящие ссылки со своих вебстраниц, и с каких сайтов желательно иметь входящие ссылки на свой сайт. Правильная политика вебмастера по линкованию своего сайта должна учитывать политику учета ссылок поисковыми системами. Для этого нужно очень хорошо знать, как поисковики относятся к самым разным ссылкам, какие ссылки принесут пользу, а какие ссылки могут повредить раскрутке сайта.
Читать далее >>>

Влияние адресов страниц на раскрутку сайта

Какие адреса вебстраниц любят поисковые системы? Почему статические адреса лучше динамических? Как динамические адреса вебстраниц преобразовать в статические? Почему хостинг с поддержкой языка веб-программирования PHP лучше, чем хостинг без такой поддержки? Какие модули Apache важны для модификации адресов вебстраниц? Хорошо ли поисковые системы воспринимают адреса вебстраниц в виде папок? Ответы на эти вопросы должен знать каждый вебмастер.
Читать далее >>>

На что смотрят поисковые системы

Когда поисковая система получает поисковый запрос пользователя, то она должна сформировать список поисковой выдачи. С каждого сайта, который подходит под тематику поискового запроса, поисковик берет по одной странице. Но эти страницы нужно разместить в упорядоченный список. Искалка оценивает эти страницы (и сайты) по нескольким сотням самых разных параметров и вычисляет, сколько баллов набирает та или иная вебстраница. На первое место в поисковой выдаче ставится та страница, которая набрала самое большое число баллов. Далее идут страницы с уменьшением набранных баллов. Каждый из учитываемых параметров учитывается со своим весом. Поэтому не все эти несколько сотен параметров равнозначны. Есть примерно 30 параметров, которые поисковики учитывают с достаточно большими весами. Именно на этих параметрах и нужно сконцентрироваться вебмастеру при раскрутке своего сайта. Вот эти 30 параметров.
Читать далее >>>

Формула PR Google

Как выглядит формула Гугла для подсчета PR вебстраницы? Поисковая система Google держит эту формулу в секрете и не раскрывает её вид перед вебмастерами. Иначе вебмастера поймут, как можно искусственно накрутить PR страниц своего сайта. Тем не менее, некоторые исследования по раскрутке сайтов позволяют определить вид гугловской формулы для вычисления PR вебстраницы. Понятно, что настоящая формула, применяемая в алгоритмах Гугла гораздо сложнее, чем эта формула, определенная в исследованиях. Но приближенно эта формула дает примерно такой же PR, как и реальная формула Гугла. Да и вообще, главное ведь знать не точный вид формулы, а всего лишь основные её параметры и как изменения этих параметров влияют на значения PR. Совсем необязательно знать незначительные параметры, которые входят в реальную формулу Гугла, и то, как эти незначительные параметры влияют на PR. Тем более, что реальная формула всё время меняется и улучшается. Поэтому надо знать только ту часть этой формулы, которая со временем не меняется, остается постоянной.
Читать далее >>>

------------------

Автор статьи: Евгений Миронов.

[0] Основы раскрутки сайта
[1] Ошибочные способы раскрутки сайта
   [1a] Дорвеи
   [1b] Клоакинг
[2] Каталоги сайтов
[3] Копирование контента - основная причина бана
[4] Формула PR Гугла
[5] Некоторые мифы о PR Гугла
[6] Сколько ссылок повышают PR
[7] На что смотрят поисковые системы
[8] Что поисковые системы игнорируют на сайте
[9] Влияние адресов страниц на раскрутку
[10] Значение HTML-разметки для раскрутки сайта
[11] Трастовый сайт
[12] Классификация методов раскрутки сайта
[13] Политика линкования