Фильтры и санкции Яндекса: переспам, переоптимизация, аффилиат, пф, новый домен и др. Текстовые фильтры яндекса В качестве заключения

Yandex, а это, напомним, лидирующий поисковик в России, может накладывать на запросы и документы по коммерческой тематике те или иные текстовые фильтры. Знают об этом многие, а вот точно определить, случилось ли это в каждом конкретном случае, могут далеко не все. Диагностировать наложение текстового фильтра порой не способны не только оптимизаторы, лишь недавно влившиеся в ряды покорителей SEO-сферы, но и некоторые мастера с опытом. Что уж говорить о новичках? Эти товарищи вообще могут не знать, что методы определения санкций существуют, поскольку в Сети, честно говоря, крайне мало детальной и правдивой информации по этой теме.

Итак, пришла пора помочь оптимизаторам и внести ясность в этот интересный вопрос. Хочется верить, что статья поможет борцам за место в ТОП-10: они научатся не только диагностировать, но и своевременно устранять проблемы, возникающие в ходе продвижения одного или нескольких коммерческих запросов из-за наложения соответствующих фильтров.

Информация, изложенная ниже, в том числе и технические приемы выявления санкций, актуальна с самого времени их появления до момента подготовки материала (середины ноября 2012-го). Хочется надеяться, что и дальше сведения будут полезными.

Yandex: борьба с «псевдооптимизацией»

На всевозможных отраслевых конференциях представители «Яндекса» неоднократно подчеркивали , что целенаправленно никто с оптимизаторами не воюет. У поискового монстра есть четкая позиция, опубликованная на официальном интернет-портале. Смысл прост и понятен: есть не только всем известная оптимизация сайта, но и «псевдооптимизация» . Вот со второй специалисты и борются.

Сражение ведется по нескольким направлениям. Так, фильтры накладывают на:

• манипулирование значениями текстовых факторов (собственно, именно о них дальше речь и пойдет);
• попытки накрутки поведенческих факторов;
• попытки накрутки ссылочных факторов, а также на задействование спама и линковых колец.

Есть и другие фильтры: АГС, adult, дорвеи, аффилиаты и так далее.

Типы текстовых фильтров

На сегодняшний день выделяют всего два основных текстовых фильтра. Применяет их «Яндекс» к документам, содержащим уникальный контент, что сильно мешает оптимизаторам жить без особых потрясений и выводить запросы в ТОП-10 без напряжения.

Мы не будем сейчас рассматривать «фильтрацию страниц для взрослых» и фильтр «Ты последний», накладываемый за неуникальный контент. Они не особо распространены в коммерческой тематике и, согласитесь, крайне редко встречаются при выводе приличных интернет-сайтов в ТОП по высоко- и среднечастотным запросам.

Санкции друг от друга отличаются: у каждой есть свои причины наложения, свое же проявление и, соответственно, определение. Различны и рекомендации касательно действий для того, чтобы от этих санкций избавиться. Итак, их типы:

Фильтр «Переоптимизация».

Он был анонсирован официально в сентябре 2011-го , но заработал чуть позже.

Фильтр «Переспам» (он же «-20» и «портяночный»).

Он не анонсировался официально, однако работает с некоторыми изменениями уже с февраля 2010-го. Обсуждение этого фильтра растянулось на более чем 150 страниц в соответствующей теме на «Серче» (форуме SearchEngines.ru) .

Проявления «Переоптимизации» и «Переспама»

Как же понять, какой из фильтров «Яндекс» наложил на документ либо продвигаемый запрос? Ознакомьтесь с Таблицей 1 и сравните описанные в ней ситуации с реальным положением дел в вашем конкретном случае.

Таблица 1 — Признаки фильтров «Переспам» и «Переоптимизация» в Yandex и их проявления

Различия между фильтрами

Понять, в чем разница между этими двумя фильтрами, будет легче, если ознакомиться с Таблицей 2.

Таблица 2 — Разница в санкциях и падении позиций, зависимость от запросов

Как провести диагностику и выявить проблему

Понятно, что работа над проектом должна сопровождаться грамотным наблюдением за тем, как у сайта обстоят дела с завоеванием места в ТОП-10. Изучив признаки и проявления, указанные в Таблице 1, и отличия, отмеченные в Таблице 2, следует точно диагностировать и оперативно устранить выявленную проблему. В общем случае достаточно будет провести сравнение позиций интернет-ресурса по конкретному запросу «до» апдейта Yandex и «после» него .

Очень важно подойти к вопросу с умом. Необходимо отличать ситуации, в которых можно говорить о наложении санкций поисковиком, от:

• изменений в алгоритме ранжирования, результатом которых стало изменение позиций немалого числа веб-порталов, в том числе и вашего сайта;
• выпадения из индекса продвигаемой страницы, что достаточно часто случается даже тогда, когда уровень ее вложенности является небольшим (это можно проверить с помощью запроса, имеющего вид ).

Что необходимо сделать? Комплексно сопоставить первые 10 позиций в выдаче по интересующему вас запросу «до» апдейта и «после» него и проанализировать результаты. Существенно «просел» один только ваш документ? Это, видимо, санкция. ТОП-10 заметно изменился, из него выпало несколько веб-ресурсов, поменялись сайты на первых местах и так далее? Это уже, вероятно, изменения в алгоритме.

Выявили, что страница, которую вы продвигаете, продолжает находиться в выдаче, при этом существенно позиция в топе изменилась только лишь у вашего интернет-портала? Что ж, скорее всего, вы попали под те или иные санкции.

Как быть, если сайт только что пришел к вам на продвижение?

Разумеется, случаи бывают разными. Не исключено и возникновение ситуации, когда в SEO-компанию на продвижение приходит проект, уже находящийся под санкциями. Все осложняется тем, что динамику его позиций «до» и «после» отследить невозможно. Работаем с тем, что есть: фильтр уже наложен на некоторые документы либо же запросы. Нам остается применить описанные ниже методы диагностирования.

Метод 1: выявляем «Переспам».

Фильтр, как известно, накладывается не на документ целиком, а на один или несколько запросов. Соответственно, все, что требуется, сделать, — модифицировать запросы и посмотреть, изменятся ли позиции в выдаче (снова внимание на Таблицу 1).

Не так давно можно было снять фильтр, применив модификацию запроса вроде [поисковый запрос/] либо же [поисковый запрос ~~ наборбукв223234hgf]. После этого позиция документа заметно и быстро улучшалась. Но на данный момент такие способы не являются действенными.

Метод 2: выявляем «Переоптимизацию».

Если пользоваться расширенным поиском, то этот фильтр снимается. Это означает необходимость сравнения по релевантности в выдаче двух интернет-сайтов — вашего и того, который находится выше вашего на 2-5 позиций. Это делается как с применением языка поисковых запросов, так и с использованием расширенного поиска.

Ваш проект в общей выдаче по запросу находится ниже конкурента, а при задействовании расширенного поиска документы с вашего сайта более релевантны? Почти наверняка мы столкнулись именно с переоптимизацией.

Какие меры следует предпринять

Лишь после того, как вы с большой долей вероятности выявили наличие конкретной проблемы и узнали, как проявляется тот или иной фильтр, можно устранять возможные причины потери проектом трафика и позиций.

Ниже, в Таблице 3, приведены меры, которые придется предпринять для того, чтобы фильтр был снят. Почти наверняка именно этих действий будет достаточно, и Yandex снимет все санкции. Изложенные меры направлены на ликвидацию основных причин, по которым могут быть наложены санкции.

Таблица 3 — Меры устранения текстовых санкций «Переспам» и/или «Переоптимизация»

В качестве заключения

Хочется верить, что информация окажется полезной для максимально большого числа оптимизаторов. Есть надежда и на то, что качество страниц интернет-сайтов в целом и текстовой составляющей в частности будет постоянно улучшаться. Собственно, разработчики «Яндекса» именно для этого запускали в работу рассмотренные выше фильтры.

Наша специализация — работа с разными объемами и тематиками. Сайты-визитки, порталы, интернет-магазины.

Нами успешно реализовано более 113 проектов.

При написании этой статьи я ориентировался на исследования Дмитрия Севальнева и прочих экспертов компании «Пиксель Плюс», где работал одно время. У Дмитрия много статей по этому поводу, собственно фильтры — это его главная «тема» и в основном можно обходиться лишь его исследованиями. Я же ставил перед собой цель структурировать информацию по фильтрам Яндекса, чтобы было удобно смотреть.

Какие фильтры бывают

Фильтры Яндекса (а также других поисковых систем) делятся, прежде всего, на ручные и автоматические . Вообще классифицировать их можно по многим признакам, но в первую очередь нужно учесть это разделение.

Если уж и попадать, то предпочтительнее под автоматические санкции – они так же автоматом снимутся, как автоматом и были наложены. В случае же с ручными санкциями, скорее всего, предстоит долгая переписка с техподдержкой поисковика.

Ручные и автоматические санкции делятся, в свою очередь, на такие:

• Бан , то есть исключение сайта из базы. Применяется в тяжёлых случаях – например по отношению к дорвеям или за накрутку ПФ;
• Неучёт исходящих ссылок – хорошо бы, чтобы ваши доноры не попали под этот фильтр. Поисковик может занижать ценность ссылок с сайтов или вообще не учитывать их;
• Неучёт входящих ссылок – если вы закупаетесь в каком-нибудь Сеопульте, может так статься, что вы просто будете сливать средства вникуда;
• Частичное исключение сайта из базы поисковой системы . Ранее можно было с точностью сказать, что сюда относится АГС Яндекса. К нему еще бонусом шло обнуление показателя тИЦ. Сейчас же страницы могут оставаться в индексе, но тИЦ будет «не определён». За адалт и избыточную рекламу также можно поймать ограничение в поиске;
• Занижение сайта в результатах поиска .

Классифицируя иначе, можно выделить 4 вида фильтров – текстовые, ссылочные, за накрутку поведенческих факторов и остальные (adult, АГС, аффилиаты, дорвеи, другие).

Кроме этого разделения и разделения на ручные и автоматические санкции есть ещё деление на предфильтры и постфильтры. Предфильтры накладываются еще до расчета релевантности сайта, на этапе попадания в базовый поиск, постфильтры же накладываются уже в процессе ранжирования. Ну и, наконец, санкции делятся на запросозависимые, подокументные и хостовые. Первые ведут к проседанию одного запроса, вторые - всех запросов со страницы, третьи - всех запросов со всего сайта.

Подробно о фильтрах:

Если же хотите вкратце (либо просто поглазеть на Лену Камскую), то вот другой видос:

Причинами санкций могут быть текстовое содержание, ссылки, реклама, искусственные накрутки и так далее. Кстати даже опытные продвиженцы могут рассуждать о фильтрах, когда на самом деле причина проседания более прозаична, так что давайте сразу разберемся.

Перед определением фильтров

Перед определением вида санкции и ее лечения следует, прежде всего, убедиться в наличии санкций. Возможно, продвигаемая страница не попала под санкции, а просто выпала из индекса. Если Яндекс не находит даже кусок текста со страницы, введенный в кавычках (или страницу по запросу вида url:site.ru/adres/stranicy.html ) – возможно, следует добавить страницу в инструменты вебмастера или, если не сработает, переписать текст.

Также возможно, что проседание позиций связано с изменением алгоритма ранжирования, в результате которого позиции большого числа сайтов были существенно изменены и наш сайт оказался среди их числа. Для определения этого требуется комплексно сравнить ТОП-10 выдачи по интересующему запросу «до» апдейта и «после» (с помощью инструмента «Анализ поискового запроса» в Megaindex ). Если существенно потерял позицию только наш документ, то это санкция. Если изменения по ТОП-10 более значительные (из ТОП-10 выпало 4 сайта, сменился сайт на 1 и 2 месте и так далее), то это с большой вероятностью алгоритм. Если мы определили, что продвигаемая страница по-прежнему находится в выдаче, а существенно изменил позицию в ТОПе только наш сайт, то мы с большой долей вероятности столкнулись с теми или иными санкциями.

Как один из вариантов причин проседания запроса – запрос мог поменять свой тип с точки зрения логики поисковой системы, и как следствие, выдача может сильно поменяться.

Виды текстовых фильтров

Текстовые фильтры делятся на запросозависимые и документозависимые. Первые ведут к проседанию в выдаче одного запроса или их группы, вторые – к проседанию всех запросов со страницы. В основном текстовые фильтры можно отнести к группе постфильтров, и в подавляющем большинстве случаев они накладываются автоматически. Но бывают и жестокие ручные текстовые санкции - в этом случае проседает, как правило, большая часть запросов с сайта или вообще все.

Большое видео с SEO-коучинга:

Если позиции плохие, и подозрения есть именно на текст (а не на наличие нетекстовых фильтров или хостовые факторы), тот тут такая схема работы:

1. Определяем наличие фильтров по каждому запросу (далее будет показано, как это делается);
2. Где нет фильтров – увеличиваем релевантность документа в соответствии с инструкцией из Пиксель Плюса . Если все требования выполнены, смотрим 15 пункт, открываем в Метрике карту скроллинга за месяц, и по ней уже определяем, интересует ли пользователя текст;
3. Где есть фильтры – действуем соответственно с инструкциями в зависимости от того, с каким фильтром имеем дело.

Кстати, один из способов определить наличие фильтров - подать заявку на добавление сайта в Яндекс Каталог. Если есть санкции, то об этом поддержка Яндекса часто оповещает в качестве обоснования причин отказа принятия сайта в ЯК.

Наиболее часто встречаются фильтры «Переоптимизация» и «Фильтр Севальнева», еще есть фильтр за одинаковые сниппеты и «Ты последний», но с ними приходится сталкиваться не так часто.

Добавлю лишь, что Яндекс накладывает текстовые фильтры не только с учетом разных форм одного и того же слова, но и по корням слов. Многие считают, что фильтр может быть наложен, допустим, только за чрезмерное употребление слова «строительный» в разных формах, учитывая «строительных», «строительными» и так далее. Но санкции можно поймать и если с этим словом все будет в порядке, но будут присутствовать слова «стройка», «строить» и другие однокоренные, употребление которых и приведет к превышению порога спамности.

Текстовый фильтр «Переспам» (устаревший?)

«Переспам» - один из первых текстовых фильтров Яндекса, направленных против чрезмерной оптимизации текстового содержимого страницы. Внедрен с февраля 2010 года, официально не анонсировался. Сегодня встречается не очень часто, поскольку постепенно уступает место «фильтру Севальнева» и «Переоптимизации». Сейчас новые сайты практически не ловят «Переспам». Через несколько лет данный фильтр окончательно уйдёт в прошлое. Хотя, возможно, есть тематики, где он еще применяется.

Как определить

«Переспам» - запросозависимый фильтр; при нем проседает один запрос, обычно резко, на 20-40 позиций; по другим запросам документ нормально ранжируется.

Можно определить, введя в Яндекс модифицированную форму продвигаемого запроса (обычно морфологическую или перестановку слов). Скажем, вместо [грузоперевозки Рязань] – [грузоперевозка Рязань] или [Рязань грузоперевозки]. Если по переформулированному запросу наш сайт окажется в выдаче резко выше (например, был на 37 месте, а стал на 14) – скорее всего, наложен фильтр переспама, документ переспамлен по продвигаемому запросу. Точно говорить о наличии данной санкции можно, лишь если запрос растёт при нескольких модификациях (поскольку фильтр позапросный и накладывается на один запрос).

Причины

Избыточное количество чистых вхождений, акцент на заданной фразе в тексте, Title и анкорах входящих ссылок - всё это может быть причиной переспама.

Что делать

Если сайт под фильтром, то методы его снятия могут быть следующие:

1. Можно сначала просто поменять окончания у ключевых слов (вместо «грузоперевозка в Рязань» - «грузоперевозку в Рязани»). Если не сработает - тогда прибегать к более радикальным мерам;
2. Удалить/разбавить лишние вхождения ключевых слов с помощью seo-анализа text.ru. Максимальное количество вхождений не должно превышать 2%. Как высчитать это количество? Берем количество символов без пробелов в тексте, делим его на 6,5 (средняя длина слова в символах) и умножаем на 0,02 (то есть 2 процента). Хотя точнее будет закинуть в text.ru/seo, посмотреть число слов и умножить его на 0,02. Получим максимально допустимое количество вхождений – вот до него и нужно резать максимальное число вхождений слова в тексте. При этом, если мы можем максимально употребить слово 12 раз, это не значит, что мы теперь все продвигаемые слова можем по 12 раз употреблять. Их количество должно плавно снижаться. Для более детального анализа можно воспользоваться таким инструментом, как анализ Ципфа;
3. Биграмм, триграмм (то есть одинаковых словосочетаний) и так далее также не должно быть слишком много, оптимально не больше одного раза они должны повторяться, максимально – не больше трех;
4. За переспамленность атрибутов alt и title у изображений тоже могут быть наложены санкции, поэтому их тоже следует почистить от ключевых слов;
5. Нужно проверить орфографию в Word;
6. Уменьшить объем текста на странице (или скрыть нижнюю часть текста тегом noindex, но это только для Яндекса, поэтому лучше уменьшать объём) на 15-30%, например почистить от воды через glvrd.ru;
7. Добавить картинки, списки, таблицы, видео;
8. Убрать b, strong и прочее логическое выделение;
9. Проверка входящих ссылок и увеличение числа безанкорных.

Обычно переспам снимается в первый же текстовый апдейт после переиндексации.

Сразу скажу, что ручная диагностика фильтров — дело трудоемкое. Профессиональные оптимизаторы пользуются для определения фильтров сервисом Саши Арсенкина .

Текстовый фильтр «Переоптимизация»

«Переоптимизация» - это наиболее часто встречающийся сегодня текстовый фильтр Яндекса. Внедрен с сентября 2011 года, официальный анонс был в блоге Яндекса на ya.ru. По этому текстовому фильтру возникает больше всего вопросов, и вообще в ходе практики я наблюдал самое разное поведение запросов на страницах, где была диагностирована «Переоптимизация». В ходе статьи буду делать небольшие замечания по этому поводу.

Как определить

Это документозависимый фильтр. Проседают все запросы, ведущие на страницу, например на 10-30 позиций; документ теряет большую часть поискового трафика с Яндекса; документ плохо ранжируется даже по длинным (4-5 слов) запросам. В этом по идее и есть главное отличие от «Переспама» - там проседает один запрос, тут - все запросы с одной страницы.

Вроде стройная теория, однако бывало, что на странице обнаруживался фильтр только по одному запросу, но «Переспам» и «Новый фильтр» не диагностировались. Вроде переоптимизация, но по одному запросу. И на таких страницах было наиболее тяжело снять фильтр. Мое личное мнение - если наблюдается такая фигня, то, скорее всего, контент просто хуже по качеству оформления, а не текстов, чем у конкурентов.

В отличие от того же «Переспама», здесь позиции запросов при переформулировке слов (перестановка или смена окончаний) не меняются или меняются незначительно. Но «Переоптимизацию» можно определить следующим образом:

1. Введим запрос в ПС Яндекс;
2. Смотрим место нашего сайта в выдаче - например, 47;
3. Копируем названия доменов нескольких конкурентов, которые находятся выше нас - например, на 46, 45, 44 и 43 позициях;
4. Повторно вводим запрос вида [грузоперевозки Рязань (site:nashsite.ru | site:drugoisait.ru)].

Если при запросе такого вида наш сайт в выдаче окажется выше нескольких конкурентов, которые в выдаче по запросу без дополнительных операторов были выше нас, то, скорее всего, наложен фильтр переоптимизации. При этом лучше проверить именно несколько конкурентов – есть вероятность, что на единственного конкурента, с которым вы сравнивали свой сайт, также наложен фильтр, или же это будет крупный портал, с которым сравнивать нет смысла.

Вот еще видео-пример:

Причины

Несогласованный текст, несоответствие страницы ключевым словам (под которые она оптимизирована), переоптимизация контента (текста, Title).

Что делать

Обычно требуется провести тот же комплекс мер, что и в случае с переспамом, но если он не поможет, принимаем более серьёзные меры:

1. Снизить процент вхождения ключевых фраз в тегах h2-h6 (особенно касается h2);
2. Переформатировать контент, пересмотреть структуру текста. Вхождения и слова должны быть равномерно распределены по абзацам;
3. Отправить текст на корректорскую проверку, то есть устранить все несогласованные словосочетания, трудночитаемые предложения, орфографические и пунктуационные ошибки.

Если в целом текст, допустим, некачественный и не тематический по отношению к продвигаемым ключам, состоит из большого числа слов из общего нетематического корпуса слов (слишком много вводных слов, длинные предложения, малое разнообразие частей речи, много прилагательных), то текст, возможно, придется переписать - просто чистка ключей может не помочь.

Переоптимизация обычно снимается через один-два текстовых апдейта после переиндексации.

Фильтр Севальнева

В 2014 году начала наблюдаться ситуация, при которой запросы улетали за топ-200, и стандартные методы борьбы с текстовыми фильтрами не срабатывали. В итоге оптимизаторы пришли к выводу, что это новый текстовый фильтр Яндекса. Его в общем и назвали просто «новым фильтром», также в ходу наименования «текстовый антиспам» и «фильтр Севальнева», поскольку Дмитрий Севальнев из «Пиксель Плюс» был, возможно, первым, кто открыл и описал данную санкцию.

Сейчас уже далекий 2016, так что, я думаю, поздно называть этот фильтр «новым». Поэтому я его называю «севальневским» 🙂

Как определить

Полная потеря трафика по запросу (возможно резкое проседание), чаще проседают именно группы запросов, но в целом можно говорить, что санкция накладывается не на весь документ, а позапросно. При этом, в отличие от «Переспама», при переформулировке позиция не растет, то есть можно предположить, что фильтр накладывается на все формы запроса. Часто проверка путем сравнения двух сайтов показывает, что наш сайт с 250 места выше по релевантности, чем сайт на 70-80 месте.

Определяется этот новый фильтр примерно так же, как и переоптимизация. Отличить от «Переоптимизации» можно по абсолютному числу потерянных позиций - в случае с фильтром «Переоптимизация» это 5-30 пунктов, в случае с «Новым» потеря оказывается значительно выше:

• Сайт резко теряет позиции по запросам, выпадения составляют от 50-60 и вплоть до 1000 позиций, когда продвигаемый документ пропадает из зоны видимости. Обычно запросы находятся на 200-х местах при новом фильтре;
• Документ продолжает нормально ранжироваться по запросам, к которым фильтр не был применён;
• Модификация запроса не приводит к серьёзному росту, как в случае с текстовым постфильтром «Переспам».

Из практики можно сделать вывод, что если сайт далеко за пределами топ-100 по запросу, но при посайтовом сравнении оказывается релевантнее запросу, чем сайты на 70-80-х местах, с большой долей вероятности мы имеем дело с «фильтром Севальнева».

В инструментах Сани Арсенкина фильтр проверяется там же, где и переоптимизация. У него инструмент «два в одном».

Что делать

Для снятия «севальневского» текстового фильтра Яндекса рекомендуется делать тот же комплекс работ, что и для «Переспама» и «Переоптимизации», но дополнительно:

• Уменьшить длину Title до 70 символов и снизить его спамность. Ни одно слово в Title не должно встречаться дважды.
• Уменьшить число чистых вхождений продвигаемого запроса в текст документа (изначально - двукратно).
• Пересмотреть проценты вхождений слов из данных продвигаемых запросов в сторону уменьшения (изначально - двукратного).
• Сократить текст на странице - можно, к примеру, почистить его от воды.

В случае если действия, описанные выше, после переиндексации документа и нескольких текстовых апдейтов поисковой выдачи Яндекса не принесли ожидаемого результата - рекомендуется полностью переписать текст.

Как я уже говорил, фильтры могут быть наложены за переспам однокоренными словами. То есть если максимально допустимое количество вхождений на страницу – 10, и у вас по 7 раз употреблены слова «печать» и «печатание», то за это может быть наложен текстовый фильтр, хотя слова по идее - разные.

Еще один момент – иногда, когда вроде как страница на первый взгляд не переспамлена, стоит посмотреть вхождения в исходном коде страницы. Их там на самом деле может оказаться дофига.

Текстовый фильтр «Ты последний»

«Ты последний» - это, по большому счету, фильтр за неуникальный или неактуальный контент.

Причем «контент» тут не всегда значит «текст», за использование заведомо неуникальных шаблонов сайт тоже может попасть под этот фильтр.

Под этот фильтр попадают в основном умники, которые думают, что накопипастив кучу текстов, они сделают отличный сайт и на него повалит народ. То есть это новички, школьники и прочие лица в состоянии опьянения. Их опьяняют «интернетовские деньги», они как Стивен Абутмен из Южного парка. Помните?

Канада не получает достаточно денег! У других стран много денег, нам нужна часть этих денег! Как насчет… Как насчет интернета? Интернет делает много денег, так дайте нам часть этих денег! - Да! Дайте нам интернетовские деньги!

Но вместо интернетовских денег юные Гейтсы и Цукерберги получают фильтр «Ты последний».

Как определить

Если вдруг сильно проседает трафик с Яндекса, но сайт продолжает нормально индексироваться - есть повод проверить сайт на предмет наличия данного фильтра. И, соответсвенно, если сайт индексируется, а трафика нет - тоже есть повод сделать то же самое.

Введите уникальный кусок текста из Title или со страницы в Яндекс (брать нужно страницу, которая есть в индексе). Если сайт не находится в числе первых - скорее всего, есть фильтр. Дополнительно проверьте уникальность текста через Advego Plagiatus или Etxt Antiplagiat. Но текст может быть неуникальным при условии, что Яндекс считает наш сайт первоисточником - если вводите кусок текста в кавычках и какой сайт на первом месте, тот и считается первоисточником.

Причины

Кроме неуникального контента причинами могут быть дублирующиеся тексты или куски текста на сайте.

Что делать

Повышать уникальность текстов до 100%, избавляться от дублей внутри сайта. Легче всего просто заказать новые тексты. Кроме того:

• Даже на карточках товара в интернет-магазине можно получить/написать уникальные отзывы и комментарии, а также уникальный обзор модели;
• Анонсы статей/новостей и начало текста на странице тоже можно сделать разными;
• Очень желательно отсутствие в коде больших (более 150 символов) дублирующихся фрагментов текста – например, текста в футере на всех страницах;
• Отсутствие дублирования текста на документах постраничной навигации, страницах сортировок, фильтров, тегах, страницах поиска – также необходимо.

Дублирование внутри сайта – это тоже дублирование контента. Важно также учитывать процент уникальных текстов на сайте (уникальных шинглов) относительно общего количества текстов. При ранжировании карточек товаров уникальность текста может не играть сильной роли (хотя в Google играет), но общая уникальность информации на сайте будет важна для нормального ранжирования. Также при ранжировании могут играть роль мономы (комбинации факторов), скажем (объём текста)/(время пользователя на странице). С дублями, описанными выше, можно бороться следующими методами:

• Атрибут rel=”canonical” тега;
• Мета-тег robots;
• Ограничения к индексации через файл robots.txt

Что же касается полных дублей страниц, их можно найти либо при помощи сканеров вроде Screaming Frog, либо через панель Вебмастера Google (Инструменты для веб-мастеров – Оптимизация HTML) и иногда Вебмастера Яндекс (Мои сайты – проверить URL). В случае со Screaming Frog полученные после сканирования данные выгружаются в Excel, дальше подсвечиваются одинаковые теги Title в файле – так можно вычислить дубли и их URL.

Чтобы получились «правильные» карточки товаров, необходимы:

1. Уникальный контент в широком смысле слова;
2. User-generated Content (UGC): отзывы, мнения (всё это сказывается и на конверсии);
3. Текст по теме. Больше деталей – технические характеристики, состав и так далее;
4. Шаблонная оптимизация: Title, description, мини-описания;
5. Контроль фильтра за одинаковые сниппеты;
6. Кликабельный сниппет на выдаче;

Как вариант - можно еще просто убрать ключевые слова из всех текстов. При этом оставить их в Title, но сократить содержание последнего до трех слов или меньше. В этом случае спамность текстов будет нулевой. Ждем переиндексации, и после прошествии еще некоторого количества времени Яндекс должен снять фильтр. Желательно еще снять анкорные ссылки, если их много. После выхода сайта из-под фильтра можно потихоньку, понемногу возвращать ключи в тексты.

Фильтр за одинаковые сниппеты

Яндекс исключает документ из выдачи, если его сниппет дублирует уже имеющийся в выдаче сниппет другого документа. Это и называется фильтром за одинаковые сниппеты.

Сюда же, кстати, входят и санкции за одинаковые Title.

Фильтр на одинаковые сниппеты наиболее характерен для товарных запросов и сайтов интернет-магазинов. Его назначение заключается в том, что с целью повышения разнообразия результатов выдачи Яндекса скрывается ряд похожих результатов. Предпочтение отдается тем документам, у которых сниппет (Title и текст описания) существенно отличается от уже представленных результатов.

Признаки

Сайт полностью исчезает из выдачи по некоторым запросам, но если добавить в урл конструкцию &rd=0, появляется в результатах поиска.

Причины

Сниппет страницы полностью или почти полностью дублирует сниппет другой страницы, которая находится в топе.

Снятие фильтра

Для снятия фильтра требуется:

1. Полное переписывание фрагментов текста, из которых берется текст для сниппета;
2. Изменение шаблона Title для карточек товара и разделов;
3. Шаблонный meta-description (иногда используется в качестве сниппета, его следует не спамить и не дублировать в нём текст из Title). Иногда снять фильтр помогает уникализация Description;
4. Текст для сниппета желательно располагать выше по странице. Его должны составлять короткие и ёмкие предложения. Нежелательные фрагменты можно заключить в тег , но этим злоупотреблять нельзя;
5. Дождаться переиндексации документа и процесса обновления сниппетов.

Можно подумать, что если, мол, текст из сниппета уникальный, то фильтра быть не может. Но это неверно. Если по тексту из сниппета Яндекс ничего не находит - это ничего не значит. Сниппет обычно берется:

• Из нескольких разных предложений;
• Может браться из description, по которому и не будет ничего находится;
• Может браться из YML - аналогично;
• И так далее.

Виды ссылочных фильтров

Теперь давайте по ссылочным фильтрам — постоянным спутникам плохих сеошников.

Минусинск

Мощный фильтр, запущенный в 2015 году и направленный против сайтов, которые покупают ссылки. Как Яндекс определяет, покупная ли ссылка? Намек на метод можно найти в Мадридском докладе. В самой сжатой форме - если сайт ссылается коммерческими анкорами («купить», «цена») на сайты разных тематик, то, вероятнее всего, он торгует ссылками. Но помимо всего прочего ничто не мешает Яндексу просто выгрузить базы ссылочных бирж. В целом про этот фильтр на момент июня 2015 года мало что известно.

Признаки: сайт проседает по всем запросам примерно на -14 позиций.
Причины: большое количество некачественных покупных ссылок (Сеопульт, Сапа и так далее).

Вот огромный экспертный видос по Минусинску:

Ссылочный взрыв (устаревший?)

Чтобы предотвратить ситуацию, когда сайт резко вырывается в топ чисто за счёт огромного количества покупных ссылок, введён данный фильтр. Штрафует акцепторов при наличии неестественно высокого темпа наращивания ссылочной массы. Доноры, участвующие во «взрыве», также помечаются как неблагонадежные.

Я не уверен, что с появлением Минусинска этот фильтр должен продолжать работу - ведь за покупные ссылки карает Минусинск, а за рост качественных ссылок не должны вообще накладываться санкции.

Однако Яндекс намекал, что во избежание покупок ссылок конкурентами с целью «завалить» врага под фильтр, покупными ссылками могут считаться лишь старые, так что с другой стороны, «Ссылочный взрыв» может еще оставаться в строю.

Признаки: сайт «залипает» на определенных позициях.
Причины: покупка большого количества ссылок в короткий период.

Ссылочный спам (устаревший?)

Ранее был одним из основных инструментов Яндекса для выявления покупных ссылок. Предусматривает различные типы санкций, применяемые к сайтам при манипулировании ссылочной массой (ссылочные кольца, прогоны и другие).

С выходом Минусинска пока непонятно, применяется ли сейчас.

Признаки: сайт резко понижается в выдаче по всем запросам.
Причины: абсолютное преобладание ГС в ссылочной массе.

Непот-фильтр

Фильтр, созданный для борьбы с ГС, продающими ссылки. Ведёт к неучёту анкора и веса ссылки. То есть когда на сайт накладывается этот фильтр, ссылки с него начинают давать куда меньший эффект. Проверить всех своих доноров на наличие непота представляется практически нереальным, поэтому при покупке ссылок нужно предъявлять жесткие требования к донорам, отслеживать эффект от покупки, составлять блек и вайт листы.

Внутренний непот-фильтр

Неучёт внутренних ссылочных связей при наличии избыточной (спамной) перелинковки внутри сайта. То есть польза от вашей внутренней перелинковки может пойти насмарку, если Яндекс посчитал ее спамной и наложил данную санкцию. Основная причина наложения фильтра - спамное содержание анкоров и их повышенная длина, однако причиной может быть и, допустим, отсутствие корректного оформления ссылок.

Фильтр за накрутку поведенческих факторов

Используется для борьбы с накруткой поведенческих через биржи. Штрафует сайт за искусственное улучшение кликовых поведенческих факторов с применением мотивированного трафика или эмуляций действий пользователей в поисковой системе Яндекс. Ресурс продолжает нормально ранжироваться только по витальным и запросам с явным указанием URL-адресов с сайта. Поведенческие факторы являются ключевыми в ранжировании сайтов по средне- и высокочастотным запросам. И хотя их число исчисляется десятками, под пристальным прицелом оптимизаторов оказались наиболее значимые, а именно, так называемые кликовые факторы на страницах результатов выдачи:

• Число посетителей документа из выдачи по запросу;
• CTR сайта в выдаче по запросу;
• Региональные срезы данных показателей.

Именно на искусственное улучшение данной группы факторов направлено большинство сервисов по накрутке. На текущий момент можно утверждать, что фильтр за накрутку кликовых поведенческих факторов функционирует в Яндексе наравне с прочими санкциям и применение данной технологии оптимизации подвергает сайт существенному риску потери позиций в срок от 6 месяцев и более.

Признаки: в некоторых случаях – понижение позиций сайта по части запросов. Срок – 1 год. Сейчас лучший способ диагностировать факт наложения фильтра - обращение в службу поддержки поисковой системы Яндекс через панель вебмастера.

Платоны прямо сообщают о факте применения данных санкций к сайту, что можно воспринимать как достоверное подтверждение и способ диагностики.

Рекомендуется, особенно в случае непричастности к актам искусственного улучшения поведенческих факторов, вступить в честный и аргументированный диалог, в котором открыто изложить свою позицию. В ряде случаев данные действия могут ускорить процесс снятия фильтра.

Причины: накрутка кликовых поведенческих факторов с целью повысить позиции сайта.

Позиция представителя Яндекса по фильтру за ПФ:

Факты накрутки и неучёта действий пользователей могут фиксироваться с помощью большого числа алгоритмических и статистических методов. Севальнев на проекте «Пиксель Плюс самостоятельно» рассказывал об одном из алгоритмов, который применяется также в антиспаме для функционирования санкции «Ссылочный взрыв»:

1. Есть пороговое значение роста посещаемости сайта из выдачи, после которого он считается участвующим в «накрутке». Это может быть, например, более чем 30-50% увеличение поискового трафика при неизменном числе показов сайта и сниппетах;
2. Выделяется список всех пользователей (IP-адресов), которые посетили заданный ресурс из выдачи за отчетный период;
3. Выбирается совокупность всех сайтов, которые считаются «накрученными» за отчетный период;
4. Формируется множество пользователей, которые принимали участие в 2 и/или большем числе фактов накруток (порог может быть выбран путём перебора);
5. Все действия данных пользователей игнорируются при расчётах кликовых поведенческих факторов.

То есть выявляются все сайты, у которых неестественно большой рост, и сравниваются IP кликавших на них юзеров.

Кейс по работе с сайтами под ПФ-фильтром от Артура Латыпова и SEO-коучинга:

Остальные фильтры

Тысячи их! Не возьмусь даже утверждать, что в этой статье я смогу описать их все.

Алгоритм Яндекса АГС-40

Алгоритм АГС (официальной расшифровки нет, но мы-то знаем, что это означает «антиговносайт») был разработан для борьбы с некачественными сайтами (в Google похожую функцию имеет алгоритм Panda). То есть он направлен на ограничение в ранжировании и индексации сайтов, созданных не для пользователей. Впервые его влияние было замечено 1 ноября 2013 года. Официально анонсирован 6 ноября 2013 в блоге Яндекса: http://webmaster.ya.ru/16272 . Было несколько «волн» наложения санкций. База регулярно обновляется, ряд сайтов из-под санкций выходят, а ряд сайтов попадает под них. Ссылочные биржи и эксперты дают различные оценки – кто-то говорит, что от всей базы доноров в биржах под АГС находится 1% сайтов, кто-то – что 20% (в общем, от 1 до 20 процентов).

Признаки

С апреля 2014 – обнуление тИЦ. Сейчас при попадании под АГС обнуляется тИЦ сайта (при проверке этого показателя через Яндекс Каталог сервис пишет, что тИЦ «не определен»), но сам сайт может оставаться в индексе Яндекса. Ранее же была распространена ситуация, когда большинство страниц вылетало из индекса, оставалось только от 1 до 101 страницы.. Через пару дней после попадания под действие алгоритма я написал в поддержку - мол, контент уникальный, веду блог для людей, что следует исправить? Платон думал 4 дня, а затем написал:

Здравствуйте, Марк!
Приносим извинения за задержку с ответом.
Я проверил, с сайтом все в порядке. тИЦ будет актуализирован при ближайшем пересчете.

То есть если есть уверенность, что сайт не должен был попасть под АГС, имеет смысл связаться с поддержкой.

Причины

Низкое качество сайта в целом, низкопробный контент.

Исследования показали, что наличие сайта в Яндекс.каталоге снижает вероятность попадания под АГС в 2,5 раза, в DMOZ – ещё выше, в 5,4 раза. YACA+DMOZ вместе же снижают вероятность попадания под АГС аж в 40 раз. Также хороший знак здесь – наличие Яндекс.директ. Что касается торговли временными/арендными ссылками, то одни говорят, что такая деятельность не влияет на попадание сайта под АГС, другие же считают, что это одна из основных причин попадания под действие алгоритма. Посещаемость же должна влиять куда однозначнее – при исследовании 6986 сайтов наблюдалось резкое падение доли сайтов под АГС среди сайтов с посещаемостью более 150 посетителей и особенно более 300 посетителей в сутки.

Презентация Дмитрия Севальнева по более полному исследованию АГС:

Снятие фильтра

• Смена хостинга;

Вот кстати как писать в ТП:

На коммерческих сайтах опасность попадания под АГС присутствует, если:

• Нет контактов и реквизитов компании;
• Есть большое количество бессмысленных («переоптимизированных») или неуникальных статей;
• Плохо оформлен контент (сканы, копипаст и так далее);
• Сайт долгое время не обновляется;
• Плохое окружение (IP-адрес хостинга).

Снятие фильтра

Для вывода коммерческого сайта из-под АГС нужны:

• Указание контактов, времени работы, схемы проезда, реквизитов;
• Удаление статей и написание 2-3 полезных материалов;
• Полная техническая оптимизация;
• Смена хостинга;
• Привлечение непоискового трафика на сайт (около 150 человек в сутки);
• «Красивое» оформление материалов, правильная орфография;
• Письмо в техподдержку после индексации.

Вот кстати как писать в ТП:

Что требуется для вывода информационного сайта из-под АГС:

• Проверка текстов страниц на уникальность и их переписывание в случае, если тексты неуникальны;
• Больше качественных статей - не по 500 символов, а нормальных обзорных материалов;
• Убрать рекламу и продажные ссылки;
• Полная техническая оптимизация;
• Хороший хостинг;
• Нарастить качественную ссылочную массу на блог;
• Привлечение непоискового трафика.

Еще советы по выходу из-под фильтра:

Я знаю одного вебмастера, который спец именно по выходу из-под АГС. Если все перепробовали, и не помогло — пишите мне, дам контакты.

Фильтр аффилиатов

Яндекс склеивает похожие сайты, если есть подозрение на то, что у них один и тот же владелец. В итоге из всей группы аффилированных сайтов в зоне видимости в выдаче по запросу остаётся только один. Я лично не слышал, чтобы фильтр накладывался на информационные сайты, кстати говоря. Также аффилированность сайтов не является отягощающим фактором при продвижении:

• По непересекающимся спискам поисковых запросов;
• По различным регионам России.

То есть если у вас сайт продвигается по запросам группы [вызов газовщика на дом], а еще один сайт - по запросам в стиле [вызов деда мороза на дом], и при этом вы аффилированы, то обоим сайтам будет на это наплевать - они просто не почувствуют склейки.

Признаки

Полное исчезновение сайта из выдачи по нескольким запросам, которые до этого были в топе или близко к нему. Также если сайт продвигается плохо даже после проведенных по нему работ – большинство запросов в выдаче за топ-100, но часть запросов при этом растёт, есть вероятность, что существует его аффилиат, который и виден по тем запросам, по которым наш сайт не продвигается. При этом по разным запросам и в разных регионах наиболее релевантными могут быть разные сайты.

Вот еще способ определения от Игоря Бакалова:

Причины

Продвижение сайтов одного владельца по одинаковым/пересекающимся запросам в одном регионе.

Аффилированность Яндекс вычисляет через контактные данные, дублированный каталог услуг и цен (даже сайты просто с одинаковыми ценами Яндекс может определять как аффилированные), данные регистрации доменов, html вёрстку и cms сайта. На 98-99% аффилированных сайтов санкции налагаются автоматически, но аффилированность может быть и ручная.

Как избежать аффилированности (склейки сайтов в группу)?

1. Избегать пересекающихся контактных данных;
2. Избегать дублирования каталога, услуг и цен на продукцию (массового);
3. Структура каталога товаров (если интернет-магазин) должна быть уникальной;
4. Разносить сайты по хостингам и аккаунтам (Директ, Вебмастер). Не всегда обязательно хоститься у разных провайдеров, чтобы не было афиллированности – достаточно купить выделенный IP;
5. Сайты также должны располагаться на разных IP-адресах или подсетях класса C;
6. Сайты из потенциальной группы должны быть в разных аккаунтах Яндекса;
7. Избегать схожести доменных имён и названий компании;
8. Один сайт не должен перенаправлять трафик на другой;
9. Не должно быть перекрёстных ссылок;
10. Данные регистрации доменов должны быть разными;
11. HTML-вёрстка и CMS сайта не должны быть схожими;
12. Внешняя входящая ссылочная масса должна различаться (не должно быть много общих доноров);
13. Также Яндекс может наложить ручные санкции аффилированности по жалобам в Яндекс и «контрольным» звонкам.

Сайты не попадут под фильтр аффилиатов, если, допустим, у них только IP одинаковый. Но если пользоваться при этом сервисами – например, одним кошельком, то шанс попасть под аффилированность повышается. Как в таком случае быть, если оптимизатор продвигает похожие сайты? Тут может быть такой выход – оформить ИП, и тогда можно пользоваться одним аккаунтом в сервисах для работы с клиентскими сайтами.

Проверка аффилированности

Сначала требуется проверить наличие фильтра на одинаковые сниппеты, если такой фильтр обнаружен – аффилированности по запросу нет.
Быстро выявить афиллированность по запросу можно следующим образом:

1. выгружаем топ-50 по запросу;
2. обрезаем до доменов;
3. добавляем конструкцию [запрос ~~ site:] перед каждым доменом;
4. снимаем позиции;
5. Если находится аффилиат, сверяем его позиции по нашему ядру. Если хотя бы по одному запросу оба сайта в ТОП-40 одновременно, то аффилированности нет.

Имеется также старая база аффилиатов по Яндексу: http://tools.promosite.ru/old/clones.php Можно вбить в Яндекс номер телефона, адрес или почту, добавить ~~ site:nashsite.ru.

Снятие фильтра

В случае автоматических санкций устраняем все причины:

• Перепроверяем контакты;
• Телефоны в панели Вебмастера;
• Телефоны на сайте;
• Перекрестные ссылки;
• Хостинг;
• Общие аккаунты в Директе;
• Упоминания адреса компании с одного сайта на другом сайте;
• Перенаправление трафика с одного сайта на другой;
• Большое число общих внешних ссылок.

Затем ждём – фильтр снимается автоматически. В случае наложения ручных санкций нужно проделать всё то же самое, но уже не ждать, а писать в техподдержку, присылать сканы свидетельств о регистрации, договоров аренды и так далее.

Фильтр за избыточную рекламу

Накладывается из-за наличия на сайте агрессивной рекламы. Понижает в ранжировании сайты с избыточным рекламным содержимым (pop-up, кликандер и другие). Причинами также могут быть наличие агрессивной рекламы, вызывающих тизеров, всплывающих окон, кликандеров. Иногда понижаются сайты с обманным содержимым во всплывающих окнах, уведомлениях.

Для снятия фильтра за некорректное рекламное содержимое требуется произвести смену размещаемых рекламных материалов или подключенной партнерской программы и дождаться полноценной переиндексации ресурса. Для ускорения процесса рекомендуется после внесения существенных изменений на сайте сообщить об этом в службу поддержки поисковой системы через панель вебмастера.

«Партнёрки»

Ранжирует ниже сайты, монетизирующиеся партнерками и при этом не дающие дополнительной ценности пользователям. Это могут быть, к примеру, нераскрученные купонники, на которых нет ничего, кроме кодов партнерских программ.

«Бан»

Исключает из индексации спам-сайты, направленные исключительно на привлечение трафика обманными техниками, среди них могут быть:

• Дорвеи;
• «Списки поисковых запросов»;
• Сайты, использующие клоакинг;
• «Сайты-клоны»;
• Прочие.

Adult-фильтр («взрослый» контент)

Фильтрация сайтов для взрослых из выдачи не по адалт-запросам. Сайт полностью исчезает из выдачи по всем запросам, кроме «взрослых», что сопровождается резким снижением трафика (если под него попал, допустим, коммерческий сайт). Сайт фигурирует в выдаче только по запросам с явным adult-контентом. Причины - наличие взрослого контента, ссылки на adult-ресурсы, реклама взрослых сайтов.

Я еще слышал информацию, что сайт может быть пессимизирован из-за плохих поведенческих, но подробнее рассказать, каким образом это происходит, пока не могу. Постараюсь обновлять данную статью и быть в курсе всех технологий Яндекса, направленных против неестественного влияния на выдачу. Да, и если связаться с поддержкой Яндекса не получается - пишите на

Yandex регулярно работает над улучшением качества поисковой выдачи. Для этого компания постоянно вносит изменения в свои поисковые алгоритмы. Во 2–3 кварталах 2014 года SEO-оптимизаторы выявили внезапные отрицательные изменения позиций, которые стали занимать сайты по абсолютно разным тематикам. Наиболее подробное исследование помогло определить следующие закономерности:

• ресурс внезапно теряет позиции по определенным запросам вплоть до полного исчезновения из поисковой выдачи по определенным запросам;
• ресурс прекрасно ранжируется по запросам, к которым новый фильтр Яндекса не применялся;
• незначительное видоизменение запроса не помогает вернуть сайту прежние позиции.

Проверка нового фильтра Яндекса

Существуют два разных направления диагностирования проблемы:

1. Контроль динамики позиций продвигаемого запроса, попавшего под новый текстовый фильтр Яндекса, и сопоставление этой динамики с позициями других ресурсов. В случае попадания под текстовый фильтр именно продвигаемого запроса можно выявить закономерность, что позиции остальных сайтов, не попавших под фильтр, не изменяются.

2. Применение языка поисковых запросов с использованием следующего алгоритма:

   • вводится исходный поисковый запрос;
   • анализируется существующее положение диагностируемого сайта;
   • определяется соотношение существующего положения с позицией до возможного случая наложения нового текстового фильтра. В противоположной ситуации за предыдущее положение принято считать существующую позицию сайта;
   • чтобы проверить наличие текстового фильтра, подбираются 2–3 проверочных сайта, которые ранжировались ниже диагностируемого до возможного наложения нового текстового фильтра Яндекса, но в настоящее время занимают позицию выше него. Когда положение до возможного случая применения нового текстового фильтра неизвестно, подбираются ресурсы, в текущий момент ранжируемые выше на 1–3 позиции;
   • в Яндексе осуществляется поисковый запрос, где используются операторы расширенного поиска site и |. После этого происходит сужение выдачи до двух ресурсов: site1 - исследуемый ресурс, и site2 - ресурс, с которым сравниваем. Если положение проверяемого ресурса при таком запросе окажется выше среди сравниваемых, то весьма вероятен факт применения нового текстового фильтра Яндекса.

Этот порядок действий схож с проверкой фильтра «Переспам», отличительной особенностью которого является понижение сайта в выдаче на 10–30 позиций. При попадании сайта под новый текстовый фильтр позиции снижаются как минимум на 40–60 пунктов.

Если проверка сайта на наличие нового текстового фильтра прошла успешно и диагноз был подтвержден, можно приступать к работе над снятием данного фильтра.

Как снять новый фильтр Яндекса?

Чтобы снять новый текстовый фильтр Яндекса, требуется:

• сократить длину и количество ключевых слов в метатеге title;
• сократить количество точных вхождений запроса в тексте документа;
• сократить объем текста на странице на 20–30 %;
• вынести HTML-теги , , и другие теги форматирования в CSS;
• равномерно распределить ключевые слова в тексте документа.

Если вышеуказанные действия после переиндексации документа и спустя несколько обновлений поисковой выдачи (обычно 2–3 апдейта) не принесли требуемого результата, необходимо написать весь текст с нуля.

Ряд оптимизаторов, которые только стремятся стать профессионалами в новой для них области SEO, а также часть «служивых» раз за разом не могут точно диагностировать наложение того или иного текстового фильтра в коммерческой тематике от лидирующего российского поисковика Яндекса.

Для новичков такая диагностика может стать вообще недоступной по причине отсутствия сколь угодно полной и достоверной информации по теме в сети.

Данная статья призвана заполнить этот пробел в знаниях оптимизаторов и навести относительную ясность с возможностью диагностировать и вовремя устранить проблему продвижения одного или группы коммерческих поисковых запросов в результате наложения фильтра.

Все изложенные ниже технические приёмы и проявления санкций актуальны со времени их появления до периода написания статьи (14.11.2012). Автор выражает надежду, что они будут на службе бойцов за ТОП-10 и далее.

Суть наложения санкций и текстовых фильтров

Представители поисковой машины Яндекс не раз отмечали на отраслевых конференциях , что специально с оптимизаторами никто не борется. Официальная позиция изложена на сайте компании и состоит в том, что есть так называемая оптимизация сайта, а есть «псевдооптимизациая» , с которой и происходит борьба.

Эта борьба ведется в различных направлениях:

• Фильтрация манипулирования значениями текстовых факторов (о них и пойдёт речь в дальнейшем).
• Фильтрация накрутки ссылочных факторов, использования линковых колец, спама.
• Фильтрация накрутки поведенческих факторов и показательные санкции в этом направлении.
• Прочие фильтры: adult, АГС, аффилиаты, др.

Виды текстовых фильтров

На момент написания статьи можно было выделить два основных текстовых фильтра, применяемые к документам с уникальным контентом , которые мешают спокойно жить и выводить оптимизаторам запросы в ТОП-10.

Фильтр за неуникальный контент («Ты последний ») и «Фильтрация страниц для взрослых » в рассмотрение браться не будут как менее распространенные в коммерческой тематике и реже встречаемые при выводе средне- и высокочастотных запросов у приличных сайтов.

Каждая из санкций имеет свои причины наложения, своё проявление (а значит, и определение) и руководство к действию для снятия санкций. Типы:

1. Фильтр «Переспам» (портяночный, «-20»). Официально он никак не анонсировался, но зато вызвал более чем 150-страничную дискуссию на форуме S earch E ngines . Функционирует с небольшими изменениями с февраля 2010 года.
2. Фильтр «Переоптимизация». Официально был анонсирован в середине сентября 2011 года , но начал функционировать несколько позднее.

Переспам и переоптимизация: проявление

Как понять, какой именно фильтр был наложен на продвигаемый запрос или документ? Для этого существует Таблица 1 признаков каждой из санкций Яндекса .

Таблица 1. Признаки и проявления фильтров Переоптимизации и Переспама в поисковой системе Яндекс

Основные различия

Таблица 2. Основные различия санкций, запросозависимость и размер штрафа

Диагностируем проблему

Наблюдение за проектом в процессе работы с ним

Рассмотрев основные проявления (Таблица 1) и отличия (Таблица 2), мы постараемся наверняка диагностировать и устранить проблему. В большинстве случаев нам достаточно сравнить позиции сайта по запросу «до» и «после» апдейта поисковой системы Яндекс.

Важно отличать случаи наложения санкций со стороны поисковой системы от:

• Выпадения продвигаемой страницы из индекса (часто случается, даже при небольшом уровне вложенности страницы). Проверить можно по запросу вида: .
• Изменения алгоритма ранжирования , в результат которого позиции большого числа сайтов были существенно изменены и ваш сайт оказался просто среди их числа.

Для этого требуется комплексно сравнить ТОП-10 выдачи по интересующему запросу «до» апдейта и «после». Если существенно потерял позицию только ваш документ, то это санкция. Если изменения по ТОП-10 более значительные (из ТОП-10 выпало 4 сайта, сменился сайт на 1 и 2 месте и т.д.), то это с большей вероятностью алгоритм .

Если вы определили, что продвигаемая страница по-прежнему находится в выдаче, а существенно изменил позицию в ТОПе только ваш сайт, то мы с большой долей вероятности столкнулись с теми или иными санкциями.

Что если сайт только пришел на продвижение?

В ряде случаев проект приходит на продвижение в SEO-компанию, когда он уже находится под санкциями и мы, по понятным причинам, не можем отследить динамику позиций «до» и «после».

Фильтр уже был наложен на некоторые запросы или документы. В этом случае нам приходится использовать технические приёмы диагностирования, изложенные далее.

Метод 1: определяем Переспам

Так как фильтр накладывается на один или малую группу запросов, а не на весь документ целиком, то достаточно произвести модификацию запроса и проследить за изменением позиции в выдаче: См. Таблицу 1 .

Ранее удавалось снять фильтр, используя модификацию запроса вида: [поисковый запрос/] или [поисковый запрос ~~ любаяабракадабра223234hgf] и позиция документа резко улучшалась. Но сейчас данные способы не помогают в его определении.

Метод 2: определяем Переоптимизацию

При использовании расширенного поиска - переоптимизация снимается. Это значит, что вам надо сравнить в выдаче по релевантности два сайта: свой и сайт, который выше вас в общей выдаче на 2-5 позиций. Сделать это можно либо с помощью языка поисковых запросов, либо с помощью расширенного поиска.

Таким образом:

• если в общей выдаче, ваш проект ниже конкурента по запросу,
• а при использовании расширенного поиска документы с него оказываются более релевантным, то с большой долей вероятности мы имеем дело именно с переоптимизацией.

Как бороться с санкциями

После того как мы достоверно диагностировали наличие проблемы, изучили основные проявления того или иного фильтра, мы перейдем к устранению возможных причин потери позиций и трафика.

В Таблице 3 мы перечислим меры, которые требуется предпринять для снятия того или иного фильтра. В абсолютном большинстве случаев этих действий оказывается достаточно для полного снятия всех санкций со стороны поисковой системы.

Все эти меры направлены на устранение базовых причин наложения санкций в порядке значимости.

Таблица 3. Основные меры, которые требуется предпринять, если на сайт наложены текстовые санкции: переспам и/или переоптимизация

В заключение

Рассмотрев два основных текстовых фильтра: их проявление, отличия, методы снятия и причины наложения, автор выражает надежду, что в среднем качество продвигаемых страниц и в частности их текстового содержания будет неуклонно расти. Ведь изначально авторы санкций в лице разработчиков Яндекса и преследовали эту благую цель.

Список литературы и ссылок для ознакомления

1. Конференция «Поисковая оптимизация и продвижение сайтов в Интернете», 2011, http://optimization.ru/2011
2. Яндекс и поисковая оптимизация, http://company.yandex.ru/rules/optimization/
3. Апдейт поисковой базы 02.02.10, 2010, http://forum.searchengines.ru/showthread.php?t=454117
4. Тексты оптимизировались, переоптимизировались, но не выоптимизировались, 2011, http://webmaster.ya.ru/replies.xml?item_no=11464
5. Правильные апдейты Яндекса: краткий список анализатора апов, 2008-2012, http://tools.promosite.ru/updates/
6. Сервис SEO hint, 2012, http://seohint.ru/

В борьбе за качественный контент поисковая система Яндекс предпринимает все новые меры. К санкциям за переспам, переоптимизацию и неуникальные тексты уже прибавился «Новый текстовый фильтр». Если на сайт или его отдельные страницы наложены санкции, в первую очередь, необходимо поставить точный диагноз.

В данной статье рассмотрим различия, способы определения проблемы и вывода из-под фильтров Яндекса.

• «Ты последний» . Был введен осенью 2006, наиболее ярко показал себя в мае 2007 года.
• Перспам . Официально не анонсировался, предположительно вступил в силу в феврале 2010 года. Также иногда называется «портяночным» и «-20».
• Переоптимизация . Официально анонсирован в сентябре 2011 года, вступил в силу спустя некоторое время.
• «Новый текстовый фильтр Яндекса» . Официального анонса до сих пор не было. Первые признаки были замечены летом 2014 года. Также носит название «текстовый антиспам».

Ты последний

По одной из версий «Ты последний» пришел на смену традиционной пессимизации.

Причины : Основным фактором риска является размещение неуникального или низкокачественного контента: генерированные, не несущие смысла и откровенные бредотексты. В связи с некорректной работой алгоритма под санкции может попасть первоисточник.

Симптомы : Сайт остается проиндексированным, но пропадает из выдачи. При этом его без труда можно найти в поиске по отрывкам из текстов. Даже по собственному адресу сайт может выходить не на первой позиции. Среди других признаков фильтра Яндекса «Ты последний» можно выделить отключение ссылочного ранжирования и влияния статического веса.

Лечение : Полное обновление контента, только уникальные тексты с минимальным количеством ключевых запросов. Для дополнительной защиты рекомендуется добавлять каждый текст в «Оригинальные тексты» Яндекса. После окончания работ подождать 2-3 апдейта. При отсутствии положительной динамики написать в службу поддержки.

Теперь рассмотрим наиболее распространенные текстовые пост-фильтры и их особенности. В отличие от «Ты последний» подобные санкции могут коснуться страниц с авторским контентом даже со 100% уникальностью.

Переспам или переоптимизация?

Признаки Переспама	Признаки Переоптимизации
Один из запросов резко теряет позиции, опускаясь на 15-35 пунктов. Возможна замена релевантной страницы в результатах, старая страница под фильтром Яндекса по-прежнему остается в индексе.	Группа запросов, ведущих на 1 страницу, теряет от 5 до 20 позиций. Возможна замена релевантных страниц по группе запросов, при этом все они остаются в индексе.
Позиции повышаются при небольшом изменении продвигаемого запроса: смена склонения, падежа, числа, перестановка слов.	При видоизменении запросов, продвигаемых на страницу, позиции значительно не меняются.
Документ сохраняет позиции по нескольким словам. Трафик не меняется, но позиция по основному запросу ухудшается.	Документ теряет трафик, отмечается проседание до конца 1-3 десятки в выдаче.

Таким образом, можно выделить основные различия. Фильтр за переспам Яндекс накладывает на 1-3 фразы, является запросозависимым, проседание более существенна. Переоптимизация, в свою очередь, накладывается на всю страницу целиком, не является запросозависимой.

Примеры изменения позиций при наложении/снятии фильтров

Для точной диагностики достаточно проанализировать позиции «до» апдейта и «после». При этом важно исключить другие возможные причины:

• Изменение алгоритма ранжирования
• Выпадение страницы из индекса

Чтобы определить переоптимизацию или спам фильтр Яндекса следует обратить внимание на динамику изменения позиций. Если просела только анализируемая страница – это санкция. В том случае если из первой десятки выпало сразу несколько сайтов, скорее всего, вступил в действие обновленный алгоритм.

Методы снятия фильтров

Если сомнений не осталось, можно приступить к работе над ошибками. Рассмотрим основные меры, которые помогут вывести сайт из-под санкций.

Переспам	Переоптимизация
Сократить избыточные чистые вхождения запроса в документе. В некоторых случаях может помочь изменение склонения/падежа/числа.	Переработать текст. Потребуется тщательный рерайт или написание с нуля.
Сократить текст на 10-20% (в зависимости от начального объема), избавиться от портянок.	Избавиться от избыточных выделений ключей, использовать теги ,, , по минимуму. Сократить вхождения в заголовках. Провести редактуру.
Снять внешние входящие ссылки, включающие запрос в прямом вхождении. Сделать акцент на разбавленные анкоры и безанкорные ссылки.	Определить оптимальный процент вхождений, ориентируясь на конкурентов, проработать контент.
Использовать форматирование, заголовки и таблицы. Добавить фото, видео, схемы и другие материалы.	Сделать информацию более упорядоченной и наглядной. Использовать графические элементы.

Если ни одно из описанных выше действий не помогло, возможно, ваш сайт стал жертвой новой санкции.

Новый текстовый фильтр

Сайт стремительно теряет позиции по некоторым запросам, пропадая из зоны видимости? Он продолжает нормально ранжироваться по оставшимся запросам? Изменение фразы (склонение, падеж, число) не помогает вернуть утраченные позиции? Если ответ положительный, следует перейти к детальной проверке.

Диагностика

Во-первых , необходимо проследить динамику изменения позиций и сравнить с общим изменением выдачи по данному запросу. Если «Новый фильтр Яндекса» вступил в силу, общая выдача ПС существенно не изменится, а рассматриваемый сайт полностью пропадет из зоны видимости (возможно падение на несколько сотен позиций).

Во-вторых , можно использовать расширенный поиск. Выделяют несколько этапов:

1. В строку вводится исходный запрос – проверяется текущая позиция рассматриваемого сайта.
2. Текущее место соотносится с позицией, занимаемой до вступления в силу вероятных санкций.
3. Выбирается пара сайтов для контроля. Необходимо найти ресурсы, которые находились на более низких позициях по сравнению с рассматриваемым сайтом до предположительного применения санкций, но сейчас стоят выше на 1-3 строки.
4. Вводится запрос с использованием операторов расширенного поиска: «site:» и «|». Таким образом, выдача сводится к сравнению анализируемого и контрольного сайта.
5. Если позиция рассматриваемого сайта будет выше, скорее всего, имеет место текстовый фильтр. Для подтверждения можно повторить последовательность действий с другими контрольными сайтами.
6. При Переоптимизации проверка также будет пройдена. Отличить «Новый» можно по более значительному падению позиций (50+).

Если проверка сайта на фильтры Яндекса прошла успешно, а диагноз был подтвержден, можно приступать к работе над контентом.

Лечение

• Сократить длину Title примерно до 60-70 символов, снизить спамность, полностью исключить повторы слов.
• Сократить количество прямых вхождений запроса в текст страницы примерно в два раза. Уменьшить общий процент вхождений, распределить ключи более равномерно.
• Провести полную редактуру: устранить все несогласования, пунктуационные и орфографические ошибки.
• Сократить общий объем текста на странице: в среднем на 20-30%.
• Избавиться от лишнего выделения и форматирования, в частности, тегов , , , , и т.д.

После окончания работы над ошибками следует подождать пару апдейтов, если документ был переиндексирован, но положительных изменений не произошло лучше всего полностью переписать текст. При этом важно избегать переизбытка однокоренных слов, они также могут стать причиной наложения фильтра.

Итоги

Таким образом, в данной статье мы рассмотрели 4 основных текстовых фильтра Яндекса, появившихся до 2015 года. Несмотря на внешнюю схожесть, каждый из них имеет свои характерные признаки и отличия, а снятие каждой санкции требует особого подхода. Надеемся, что предложенный материал поможет верно поставить диагноз и быстро реабилитировать ваш сайт.