Скачать xenu русская версия. Программы Xenu’s Link Sleuth и Netpeak Spider. Отчет о «битых» ссылках

Программа Xenu"s Link Sleuth позволяет найти битые ссылки, изображения, фреймы, дополнительные модули (plug-ins), фоновые рисунки (backgrounds), графические карты сайта (local image maps), таблицы стилей (style sheets), скрипты и Java-апплеты. Программа выводит список проверенных ссылок с сортировкой по различным параметрам. Также она позволяет создавать отчет с результатами проверки. Официальный сайт программы Xenu"s Link Sleuth .

Преимущества программы:

  • Программа бесплатна (freeware)
  • Простой и удобный пользовательский интерфейс
  • Возможна повторная проверка битых ссылок (это удобно при временной недоступности проверяемого сайта)
  • Простой формат отчета
  • Размер исполняемого файла программы меньше 1Мб
  • Возможность проверки защищенных сайтов по протоколу SSL ("https://")
  • Определение и вывод редиректов (т.е. пересылок на другие страницы)
  • Возможно формирование карты проверяемого сайта.
  • И многое другое.


Скачать бесплатно Xenu"s Link Sleuth

Предлагаем последнюю официальную (стабильную) версию программы Xenu"s Link Sleuth (current version: 1.3.8 from September 4th, 2010) без вирусов и шелов. Программа запакована в WinRar архив, проверена на отсутствие вирусов.

Системные требования: Microsoft Windows 95/98/ME/NT/2000/XP/Vista/7, (для работы требуется библиотека WININET.DLL, входящая в состав Internet Explorer). Также программа работает под Red Hat 8 и Ubuntu с помощью wine, и под Mac с помощью Crossover.

Настройки программы Xenu"s Link Sleuth

Итак, сначала необходимо скачать программу Xenu"s Link Sleuth , затем установить на свой компьютер. Программа создана только для операционной системы Windows. Установка производится обычным образом, никаких сложностей возникнуть не должно. После запуска программы выбираете из меню «File»→«Check URL»:

В открывшемся окне вводим необходимую информацию, чтобы провести seo аудита сайта:

Сначала надо указать адрес страницы сайта, которая подвергнется проверке. Это может быть как главная, так и любая другая, например: http://goldbusinessnet.com/ или http://goldbusinessnet.com/dvizhok-wordpress/wordpress-vidzhet/.

Внимание! Адрес страницы должен обязательно заканчиваться символом слеш «/». Будьте внимательны!

Теперь небольшое отступление. Как видите, настройки имеют такую замечательную функцию как «e-mail». Если я правильно разобрался, она предназначена для того, чтобы сообщить результаты аудита сайта другому лицу (например, своему другу об анализе его сайта). Для этого нажимаем эту кнопку и получаем:

Если ставим флажок e-mail only if there are broken links (отправить e-mail только, если обнаружены битые ссылки), то лицо, аудит сайта которого вы проводили, получит отчет только тогда, когда на его ресурсе будут найдены битые ссылки. SMTP-сервер поддерживает отправку электронной почты. В диалоговом окне указываете адреса отправителя, получателя, а также тему послания (subject).

Насколько понимаю, это бесплатная услуга. Какой сервис выбрать? Вот тут я теряюсь, поскольку еще не пользовался данной опцией. На скриншоте указан один из них, его я обнаружил в сети. Также некоторые провайдеры предоставляют данную услугу, но, к сожалению, более ничего сказать по этому поводу не могу. Надеюсь, кому-нибудь пригодится данная опция. Далее, необходимые пояснения для начала проведения seo анализа:

  • Local file - эта опция используется в том случае, если необходимо проанализировать ссылки в локальном файле, расположенном на вашем компьютере:

Находим соответствующий HTML-документ, потом нажимаем «Открыть». Адрес этого файла может быть такого вида: file://C:/document.html/.

  • Check external links - если вы хотите проверить наряду с внутренними ссылками также внешние, то ставьте здесь галочку.
  • Consider URL"s beginning with this as internal - сюда можно добавить ссылки, которые необходимо считать внутренними; после добавления очередной ссылки надо нажать «Add». Скажем, вы делаете аудит главной страницы сайта; тогда определяем внутренние страницы, которые имеют отношение к сайту, но имеют адрес, отличный от url главной страницы, например: http://forum.yoursite.ru (главная страница http://yoursite.ru).
  • Do not check any URL"s beginning with this - сюда добавляем ссылки, которые не подлежат проверке программой Xenu"s Link Sleuth. Здесь могут быть адреса счетчиков (http://top100.rambler.ru), баннеров и т.д.

«Basic» (базовые настройки):

Apply to all jobs (применить для всех проектов) - опция позволяет сохранять настройки ко всем вашим ресурсам.

Parallel Treads (параллельные нити) - с помощью ползунка можно настроить число потоков, то есть количество одновременно проверяемых ссылок (например, current: 4). Здесь необходимо иметь ввиду, что чем больше это число,тем сильнее нагрузка на сервер. Поэтому необходимо оптимизировать эту опцию: если подлежащий seo аудиту ресурс является крупным многостраничным сайтом, то число одновременно проверяемых ссылок может быть больше, если у вас нагрузка минимизирована при помощи соответствующих инструментов.

В случае небольшого блога, если к тому же у вас действует самый дешевый пакет хостинга, необходимо ставить значение 2-4. Когда я выполняю seo аудит своего блога, я устанавливаю значение 4. Естественно, если нагрузка на хостинг оптимизирована, то можно ставить больше (говорят, среднее оптимальное значение 10).

Maximum depth - максимальная глубина поиска. Обычно небольшие сайты или блоги имеют небольшую глубину просмотра, а крупные порталы, конечно, имеют множество подрубрик, но не настолько, чтобы максимальная цифра (999) оказалась востребованной.

Ask for password or certificate when needed (запрашивать пароль или сертификат, когда необходимо). По ходу проведения seo аудита сайта под проверку могут попасть страницы, для которых используется защищенное соединение (протокол https). Тогда происходит запрос вышеуказанных данных.

Теперь посмотрим,что можно включить в рапорт (report), который будет представлен по итогам аудита сайта:

  1. Broken links, ordered by links - битые ссылки, отсортированные по адресам
  2. Broken links, ordered by page - битые ссылки, которые будут упорядочены по страницам
  3. Broken local links - найденные неправильные внутренние ссылки
  4. Redirected URL"s - адреса с редиректом 301/302
  5. FTP and gopher URL"s - FTP, а также другие не HTTP адреса. Программа Xenu не проверяет их работоспособность, но имея полный список, пользователь может проверить их самостоятельно.
  6. Valid text URL"s - рабочие текстовые ссылки
  7. Site map - карта сайта. Программа Xenu Link Sleuth может построить HTML- карту сайта для вашего ресурса, которая будет отображена в отчете.
  8. Statistics - статистические данные
  9. Orphan files (дословно: файлы-сироты). Бывает такое, что страница удалена, а относящиеся к ней файлы нет. Проблема несущественная, но кому нужен лишний мусор? Тогда Xenu Link Sleuth проанализирует, существуют ли файлы, на которые не ссылается ни одна страница сайта.

На скриншоте выше флажками (галочками) отмечены те пункты, которые я использую при проведении аудита сайта. Вы можете отметить все опции, но надо ли это? Рапорт будет очень объемным, не исключена серьезная нагрузка на сервер. Конечно, при необходимости получения разовой дополнительной информации возможно включение других функций, например, если вам необходимо создать карту сайта.

Аудит сайта с помощью программы Xenu"s Link Sleuth

Переходим непосредственно к аудиту сайта. После всех этих манипуляций нажимаем «ОК» и Xenu"s Link Sleuth начнет работу. Процесс может занять от нескольких минут до нескольких часов. Это зависит от многих причин, включая число страниц сайта, загруженность сервера и т.д. В результате программа начнет анализировать все внутренние, внешние (ведущие с вашего сайта на другие ресурсы) ссылки. В окне программы есть возможность сортировки результатов по табуляторам:

  • Status - табулятор, который позволяет сконцентрировать битые ссылки вместе. Чтобы осуществить данную опцию, надо кликнуть по этому табулятору, результатом чего все неправильные ссылки окажутся в одном месте (битые ссылки выделены красным цветом, все правильные - зеленым):

В табуляторе «Status» дается пояснение касательно состояния данных битых ссылок, то есть практически причин их возникновения: no connection (нет соединения с сервером; в этом случае программу можно запустить еще раз, возможно, это временный сбой из-за перегруженности сервера), not found (страница не создана; это некорректная ссылка).

Возможны другие варианты; но согласитесь, очень удобный функционал, вы знаете причину возникновения битой ссылки. Более того, получите информацию, на какой именно странице ее искать. Для этого кликните правой клавишей вашей мышки по соответствующей ссылке в окне программы Xenu"s Link Sleuth и выберите из контекстного меню вариант «URL properties»:

В самом низу дан список адресов,где обнаружена данная битая ссылка. Идете туда, затем удаляете ее. Подсказкой служит текст этой ссылки (исходя из данного примера Title or link text: подтверждение). Для этого копируем адреса страниц, заходим в визуальный редактор админ-панели например wordpress, в разделе «Записи»→«Все записи» выбираем необходимую, кликаем «Изменить». Покажу пример своей статьи, где была проставлена неправильная ссылка:

С помощью мышки выделяем слово или словосочетание, содержащее неправильную ссылку, нажимаем на инструмент удаления ссылки. Все, задача решена.

  • С помощью табулятора «Type» есть возможность отсортировать ссылки на файлы с различным расширением, например, файлы изображения (расширения.png, .jpeg, .gif):

Также «Type» позволяет проанализировать эти ссылки. Скажем, можно проверить имеют ли изображения атрибут alt, который, как известно, имеет решающее значение при поиске по изображениям в поисковых системах.

  • Табулятор «Syze» дает возможность распределить ссылки на страницы и файлы по их размеру (например, нажав на табулятор вверху, получим размер по возрастанию вниз). Таким образом, можно выяснить, какие страницы имеют наибольший вес, а, следовательно, будут долго загружаться. Имея аналитические данные, можно предпринять определенные шаги по оптимизации.
  • Используя табулятор «Title» сортируете страницы, имеющие заголовок (Title). Это имеет огромное значение, потому что можно определить повторяющиеся заголовки (которые будут отображаться рядом), а также страницы, которые не имеют заголовка Title.
  • «Level» позволяет отсортировать страницы по уровню вложенности: 0 (главная страница), 1, 2, 3 и т.д. Для улучшения внутренней оптимизации уровень не должен быть выше 3 с целью облегчения навигации сайта.

Еще некоторые важные табуляторы, которые отображены программой Xenu"s Link Sleuth, они появляются после получения результатов seo аудита сайта:

  • «Out Links» - табулятор, позволяющий сделать сортировку по количеству внешних ссылок, ведущих со страниц ресурса (по возрастанию или убыванию). Кликнув правой кнопкой мышки по ссылке, из контекстного меню можно получить данные, позволяющие понять, на какую именно страницу ведет ссылка.
  • С помощью «In Links» распределяем также входящие ссылки, а из контекстного меню узнаем адреса ресурсов, ссылающихся на этот документ.
  • «Duration» - сортировать ссылки страниц по возрастанию или убыванию времени их загрузки (скорость загрузки вебстраниц сайта). По этой информации можно внести необходимые коррективы в оптимизацию данных страниц.

После окончания seo аудита ресурса программа Xenu"s Link Sleuth предложит сохранить отчет об анализе (Окончание seo аудита программой Xenu"s Link Sleuth):

Нажимаем «Да», затем получаем отчет Xenu"s Link Sleuth о проведенном seo аудите вашего блога, где наверху расположено меню полученных результатов:

Ну вот, пожалуй, все. Я постарался подробно описать все возможности Xenu"s Link Sleuth при самостоятельном проведении аудита сайта, потому что материалы в интернете не дают полного описания функционала. Надеюсь, вы почерпнули максимум информации, дорогие читатели, которой воспользуетесь с пользой.

Практические примеры использования Xenu"s Link Sleuth

1. Найти битые ссылки
Это нужно, чтобы ваш сайт был более качественным в глазах пользователей и для поисковых систем. В программе нужно сортировать столбик «Status». Для этого нужно просто на него нажать.

2. Найти дублированные названия
Рекомендуется, чтобы каждая страница сайта имела уникальное название. Нажмите на название столбика «Title» и вы сможете найти дублированные названия.


3. Поиск больших страниц и картинок
Желательно не иметь на сайте страницы большого размера, так как не у всех пользователей есть хорошее подключение к интернету. Чтобы найти такие страницы, нажмите в программе на «Size».


4. Узнать количество входящих ссылок на страницу
Для этого нажмите на столбик «In Links». Чтобы узнать какие именно страницы ссылаются на текущую страницу, щелкните правой кнопкой мыши и выберите "Options".


5. Поиск страниц с наибольшим количеством исходящих ссылок
Если вам нужно узнать число исходящих ссылок на определённых страницах, то вы это можете легко сделать, нажав на «Out Links».


6. Найти страницы на глубоких уровнях
Для большего понимания что это значит, приведу пример: www.site.ru/уровень1/уровень2/уровень3. Для этого нажмите на «Level».


7. Найти изображения без названий
Если вы хотите, чтобы ваш сайт находили чаще, то постарайтесь не оставлять изображения без названий. Для поиска незаполненных названий нажмите на «Type».

Как проверить сайт на наличие битых ссылок?

В видео я показал, как можно обнаружить битые ссылки через сервисы яндекс вебмастер, гугл вебмастер и программу Xenu Links Sleuth.

Сегодня мы познакомимся с одной замечательной бесплатной программой для проверки битых ссылок — Xenu"s Link Sleuth. Я уже писал про отличный плагин , но эта программа умеет делать даже больше, чем он.

Поэтому я предлагаю обязательно попробовать эту программу. Уверен, вы ее полюбите и она станет постоянным участноком вашего арсенала вебмастера.

Мы подробно рассмотрим вопросы :

  1. Предназначение, системные требования к программе. Скачивание и установка Xenu
    Настройки программы
  2. Наша благодарность автору программы

1.Предназначение, системные требования к программе. Скачивание и установка Xenu

Программа Xenu"s Link Sleuth (сокращенно –Xenu) предназначена для поиска «битых» ссылок (т.е. которые ведут в никуда), изображений, фреймов и еще кое-чего, менее для нас значимого.

Кроме того, программа умеет проверять HTML – файлы на вашем комьютере и проверять файлы на локальном сервере (типа Денвер-3), надо только указать адрес локального сервера — http://127.0.0.1

И еще вебмастера ее приспособили для поиска дублей страниц, о чем подробно поговорим в одном из ближайших постов.

Преимущества программы Xenu"s Link Sleuth :

  • Полностью бесплатная:
  • Имеет очень простой интерфейс (управление);
  • Улучшенные отчеты об ошибках (а не просто – «ошибка связи»);
  • Если требуется показ только «битых ссылок», то только они и будут показываться, а не все подряд;
  • Программа разрабатывалась только одним человек, причем имеющим опыт в создании программного обеспечения с 1983г. Поэтому исключена даже малейшая несовместимость различных частей программы;
  • Легкие в понимании отчеты, даже если вы используете длинные URL;
  • Файлы программы занимают на жестком диске мало места;
  • Многопоточная проверка (от 0 до 100 потоков) сокращает время проверки сайта;
  • Проверка защищенных сайтов с помощью протокола SSL (адрес начинается с https://);
  • Проверка редких FTP и Gopher сайтов;
  • Определение и обработка URL с редиректом;
  • Создает карту сайта.

Для работы программы требуется Windows 95/98/ME/NT/2000/XP/Vista/7. Она прекрасно работает и под Fedora 13, Red Hat 8, Ubuntu, OS X (требуется wine), и под Mac (требуется CrossOver).

Скачать программу можно с . Как всегда, на случай непредвиденных обстоятельств я закачал последнюю версию Xenu – 1.3.8 — на свой сервер. Оттуда тоже можно ее скачать.

Программа легкая, весит всего 743 КВ.

Установка программы никаких затруднений не вызывает: мастер установки работает прекрасно, надо только со всем соглашать и жать «Next».

2.Настройки программы

Для того, чтобы настроить программу, нам надо поработать в двух местах. Прежде всего, кликаем по вкладке «Options» и далее по «Preferences»:

Рис.1 (Все скриншоты кликабельны)

У нас появится окно, где надо сделать настройки:

Рис.2

Сначала нам надо установить количество потоков. По умолчанию стоит 30, но, полагаю, это число при первых проверках надо уменьшить до 3-5 (рекомендация автора), чтобы не создавать излишней нагрузки на линии связи и сайт. Автор программы, правда, пишет, что, хотя у него и DSL – соединение, его оператор, как он подозревает, препятствует увеличению нагрузки на сеть, чтобы заставить его перейти на более высокие тарифы. Ну, немецкие дела нас мало касаются (автор – из Германии), а вот у меня и при 5 потоках сервер хостинга начинает бастовать.

Поэтому начинать проверки следует осторожно и лишь постепенно увеличивая количество потоков.

Флажок о необходимости запроса пароля или сертификата (при необходимости), тоже стоит оставить.

Перейдем к отчету (правая сторона окошка). Можете оставить те галочки, какие хотите, или вообще все, программа в любом случае скачает все ссылки, а эти настройки касаются только отчетов.

Но, на всякий случай, я приведу русское значение этих строчек:

  • Broken links, ordered by links — показывать «битые» ссылки, отсортированные по адресу ссылки;
  • Broken links, ordered by page — показывать «битые» ссылки, отсортированные по адресу страницы;
  • Broken local links – показывать локальные «битые» ссылки;
  • Redirected URLs – показывать ссылки с редиректами;
  • Site Map – создает sitemap для Google;
  • Statistics — строит в отчете различные таблицы.

В конце нажимаем ОК.

Теперь нам надо кликнуть по вкладке «File» и в появившемся списке команд нажать на «Check URL» (Проверить URL):

Рис.3

Собственно, мы как бы уже начинаем процесс проверки, но предварительно нам предлагается ее настроить:

Рис.4

Прежде всего, нам надо указать URL сайта, который мы хотим проверить. Проверять можно не только сайт целиком, но и отдельные страницы и папки. Но если вы проверяете папки (каталоги), то адрес надо писать обязательно со слешем на конце, иначе программа не поймет и проверит весь сайт целиком.

Написано в этом случае должно быть так (разница в последнем слеше — косой черте):

Примечание. Впереди должно быть указано http:// . У меня не написано, потому что Google тогда эту строчку воспринимает как ссылку.

Если вы собираетесь проверить какой-то отдельный html- файл, то надо нажать кнопку «Local File» (верхняя правая стрелка) и в открывшемся окне найти этот файл в своем компьютере.

Очень важный чекбокс – «Check external links» (Проверять внешние ссылки), галочку оставляем.

Следующее окно предназначено для исключений – ссылку, начинающаяся каким-то определенным образом (надо указать каким именно образом), считать как внешнюю. Это если вы используете такие ссылки: например, с помощью редиректа переводите внешние ссылки в разряд внутренних.

В следующем окне необходимо указать URL сайтов, все ссылки на которые проверять не следует.

В обоих этих окнах, такие УРЛы надо вписывать по одному в верхнюю часть окна и нажимать «Add» (Добавить) и ссылка перейдет в нижнюю часть окна (на скриншоте рис.4 это видно). Программа запомнит эти настройки и не будет проверять ссылки, начинающиеся с указанных URL.

Можете в этих окнах вообще ничего не указывать.

Если вы забыли установить настройки в разделе «Options» (рис.2) или решили их изменить, то при нажатии кнопки «More options» (левая нижняя стрелка) попадете туда снова.

После всех настроек, нажимаете кнопку ОК – начинается процесс проверки ссылок.

3. Проверка ссылок и их предварительный анализ

Процесс проверки у всех будет занимать разное время – от нескольких десятков секунд до нескольких часов – в зависимости от размера сайта и количества параллельных потоков. После окончания проверки на главной странице программы появится окно:

Рис.5

Нам программа сообщает, что проверка ссылок закончена и нужен ли вам отчет о проверке? Нажимаем «Да», если нужен, и «Нет», если не нужен. В первый раз нажмите «Да», чтобы посмотреть — что это такое, а дальше уже сами решите – надо это вам или нет.

Начинаем просмотр ссылок. В зависимости от результатов проверки цвет шрифта ссылок будет разный:

  • Зеленый – ссылка работает;
  • Серый – ссылка находится в очереди на проверку или же она исключена из проверки в соответствии с вашими настройками;
  • Красный – ссылка является «битой» или недоступна по тем или иным причинам (например, такое бывает, если сервер прервал допуск программы к сайту, это будет видно в графе Status – будет написано что-то вроде TIMEOUT).

Если проверка ссылок прервана по каким-то причинам, через некоторое время повторите проверку, причем программа проверять будет только непроверенные ссылки. Для этого надо кликнуть по вкладке «File», у вас появится другой список команд, не такой как раньше, и нажать на ссылку «Retry broken links»:

Рис.6

Начнется допроверка или перепроверка битых/ непроверенных ссылок.

Кстати, обратите внимание, что на рис.6 в правой части указаны комбинации «горячих клавиш».

И еще посмотрите на нижний правый угол программы – там отображается общее время проверки, общее количество ссылок на сайте, сколько из них проверено и количество потоков в работе.

Перед тем, как приступить в анализу конкретных «битых ссылок», удовлетворим свое любопытство и посмотрим, что за анализ нам предлагает программа.

4.Отчет о «битых» ссылках

После того, как во всплывающем окне мы нажмем «Да», в вашем браузере откроется новая вкладка с отчетом о проделанной работе:

Рис.7

  • Верхняя строчка показывает URL ссылки, это облегчит ее поиск,
  • Средняя строчка показывает тип ошибки – 404 или какая-то другая,
  • Нижняя строчка показывает адрес страницы, на которой расположена «битая» ссылка.

В нижней части отчета идут таблицы:

Рис.8

Мне кажется, что эти данные лучше использовать при дальнейшей работе по совершенствованию всего сайта, а для работы по устранению «битых» ссылок они не очень годятся. Для работы с битыми ссылками лучше вернуться в программу.

5.Анализ «битых» ссылок

Рис.9

Откроется окно с таким же названием. Мы видим, что у нас на сайте в шаблоне отсутствует картинки и что на эту картинку ссылается одна страница. В данном конкретном случае это не моя ошибка, а автора шаблона, но исправлять ее надо мне: сделать и закачать картинку под таким же названием.

Вот примерно таким образом вы и должны работать с каждой (!) «битой» ссылкой. Довольно часто придется писать другим вебмастерам, чтобы что-то поправили у себя на сайте, или редактировать шаблон, или исправлять адрес ссылки и т.д. Зато поисковики будут страшно довольны.

Маленькая подсказка: кликните по «битой» ссылке правой кнопкой мыши и в списке команд можете выбрать копирование ссылки.

Все это (поиск «красных» ссылок) можно сделать довольно легко, если у вас общее количество ссылок не очень большое. А если их много-много тысяч? Автор программы предусмотрел и это. В программе имеется возможность показа только «битых» ссылок. Для этого необходимо кликнуть по вкладке «View»:

Рис.10

В открывшемся списке команд щелкните по верхней строчке и программа покажет только «битые» ссылки:

Рис.11

Теперь вам работать будет проще. Работать с ними надо точно так же, как написано выше: кликаете по ссылке правой мышью… Рассмотрение самой программы мы закончили, теперь (справочно!) приведу типы различных ошибок, которые в отчете пишет программа, и их суть.

6. Какие бывают типы ошибок в отчете XENU

Error 404 (Not Found)

Ошибка 404 – та самая, из-за которой мы и ищем «битые» ссылки. Означает – «Страница не найдена». Их обязательно надо найти на страницах сайта и исправить.

403 Forbidden

Ошибка 403 – в доступе отказано. На такие ошибки большого внимания не обращайте. Они возникают из-за того, что сайт или отдельный файл потребовал что-то дополнительно, например, пароль.

12029 (No Connection)

Ошибка 12029 возникает при отсутствии соединения с сервером. Это не свидетельствует о вашей ошибке, беспокоится не стоит.

503 (Service Unavailable)

Ошибка 503 – Сервис недоступен. Связь с сервером имеется, но сервер не отвечает. Это не ваша ошибка.

12002 (Timeout)

Ошибка 12002 возникает из-за разных причин. Суть ее в том, что произошло прерывание соединения с сервером. В нашем случае – из-за большой нагрузки на сервер. Необходимо через некоторое время возобновить проверку.

12038 (SSL certificate common name incorrect)

Ошибка 12038 происходит из-за того, что имеется ошибка в сертификате безопасности SSL. Эта ошибка не является свидетельством того, что ссылка – «битая». Не обращайте внимания.

7.Наша благодарность автору программы

Эту замечательную и притом бесплатную программу создал немецкий программист Tilman Hausherr . Эту программу он вполне мог продавать за деньги, но он даже не просит пожертвований в свой адрес, заявляя, что и финансовый кризис 2008 года сумел пережить.

Вы можете отправить деньги, если хотите, в помощь тем социальным программам и институтам, которым он сам оказывает помощь. Список таких адресов приведен на его сайте в разделе FAQ.

Если вы работаете во Всемирно известных компаниях, например, в Газпроме, то можете оправить ему почтой благодарственное письмо.

Но вот что могут сделать абсолютно все: Вы можете лайкнуть в Facebook на

Доброго времени суток! На прошлой неделе вернулась из деревни, где провела незабываемое время полного релакса! Погода выстояла отличная, дни напролет мы проводили в реках, озерах, лесах, полях. Свежий воздух и ни души вокруг - вот это настоящий отдых!

Продолжаем изучать тему оптимизации блога на WordPress. Ранее мы детально рассмотрели вопрос проверки сайта на и вручную и с помощью плагина. Сегодня мы подробно остановимся на 2х десктопных программах, выполняющих эти задачи автоматически, разберем их основные настройки и параметры технического аудита. Это - Xenu’s Link Sleuth и Netpeak Spider, бесплатные инструменты для seo-анализа блога.

Как пользоваться программой Xenu.

Работать с этой программой не сложно, а в результате получается подробный и обстоятельный отчет обо всех имеющихся на сайте ссылках. Помимо своего основного предназначения, проверки битых ссылок, Xenu может выполнять и другие задачи:

  • составление карты сайта;
  • определение времени загрузки страниц;
  • поиск неуникальных тайтлов;
  • выявление страниц со значительным уровнем вложенности;
  • определение количества внешних и внутренних ссылок на сайте;
  • выявление картинок без атрибута alt.

Обозначенные моменты весьма немаловажны для развития ресурса. Решение данных задач послужит для оптимизации вашего вордпресс-блога. Поэтому предлагаю вам внимательно изучить инструкцию по работе с Xenu Link Sleuth. Начнем.

Данное приложение является бесплатным. Скачать программу Xenu можно по ссылке: xenus-link-sleuth.en.softonic.com .

Разархивируем файл и запускаем Setup.exe. После установки программы можно приступать к настройке её основных параметров. Следует отметить, что Xenu написана для Windows и не работает с другими операционными системами.

Интерфейс приложения англоязычный, но он лаконичен и достаточно прост. Чтобы создать новую проверку, нужно кликнуть по первой пиктограмме в левом верхнем углу окна программы или пройти по пути «File» - «Check URL». В результате откроется окно «Xenu’s starting point» с базовыми настройками:

Вверху вписываем адрес инспектируемого ресурса. Если вы хотите включить в проверку ссылки на внешние ресурсы, следует оставить галочку возле пункта « Check external links» . Кнопка « Local file» предназначена для выбора файла на вашем компьютере, если вы хотите проанализировать таковой.

В поле « Consider URLs beginning with this as ‘ internal’:» вы можете добавить такие страницы, которые относятся непосредственно к проверяемому сайту, но имеют отличный от главной страницы адрес. Например, https:// forum.ВашСайт. ru .

В поле же « Do not check any URLs beginning with this:» можно перечислить те линки, которые вы хотите исключить из проверки программой Xenu.

В нижней части расположена кнопка « e- mail» . Она потребуется вам в том случае, если вы захотите получить отчет о проделанном анализе блога на свой e-mail с помощью SMTP-Server:

« e- mail report and quit when done» - выберите этот пункт, если хотите получить весь отчет сразу по завершению работы приложения;

« e- mail only if there are broken links» - при выборе этого варианта отчет придёт, если будут найдены битые ссылки.

Помимо этого, в Xenu предусмотрено большое количество дополнительных настроек. Их можно вызвать, кликнув по кнопке « More options» .

Перед нами открывается вкладка «Basic Options». Первый параметр - « Parallel Threads» . Он регулирует количество параллельных синхронных запросов. Другими словами, какое число ссылок будет проверяться одновременно. Рекомендуется не превышать значение по умолчанию, чтобы не перегружать сервер и не влиять на корректность проводимого аудита. Пункт « Maximum Depth» устанавливает максимальную глубину вложенности страниц, на которой будет проводиться работа программы Xenu. Здесь тоже можно оставить дефолтное значение. Если поле « Treat redirections as error» отметить галочкой, редиректы будут рассматриваться приложением как ошибка.

Справа расположен блок чекбоксов « Report» . Он служит для того, чтобы настроить вывод отчета после сканирования сайта. Выберите те параметры, показатели которых вы хотите видеть в итоге:

« Broken links, ordered by links» - битые ссылки, сгруппированные по URL-адресам;

« Broken links, ordered by page» - аналогично, битые ссылки, но сгруппированные по страницам;

« Broken local links» - внутренние битые ссылки;

« Redirected URLs» - адреса с 301-ым и 302-ым редиректами;

« Ftp and gopher URLs» - URL с протоколами, отличными от http;

« Valid text URLs» - не битые (рабочие) ссылки;

« Site Map», « Statistics» - добавить в отчет карту сайта, статистику;

« Orphan files» - файлы-одиночки, т.е. те, на которые ссылок нет.

Если мы хотим применять данные настройки для всех проектов, нужно отметить галочкой поле « Apply to all jobs».

Сделав настройки Xenu, жмем «ОК». Программа начинает аудит сайта. Она проходит по всему блогу и определяет наличие ссылок. Если возникает необходимость приостановить работу приложения, на панели вверху есть кнопки «Pause» (приостановить), «Stop» (прервать), «Continue» (продолжить). Сколько будет длиться анализ ресурса, зависит от количества страниц, одновременных потоков, скорости соединения и загруженности сервера. По завершению работы, появляется диалоговое окно, сообщающее об этом и предлагающее вывести отчет.

Если соглашаемся, Xenu формирует htm-документ с результатами проделанного анализа в режиме реального времени.

Теперь разберем, как можно пользоваться данными, полученными с помощью Xenu Link Sleuth, в самой программе. Результаты seo-анализа сайта расположены в нескольких столбцах. « Address» содержит список всех найденных URL. Для того, чтобы получить более детальную информацию о какой-то конкретной ссылке, кликаем по ней правой кнопкой мыши, в появившемся контекстном меню выбираем пункт «URL properties». Открывается окно, в котором отображены следующие характеристики линка:

  • «Page URL» - страница, на которую ведет ссылка;
  • «Title or link text» - атрибут title или анкор ссылки в материале нашего блога;
  • «1 page linking to this one» - URL страницы, где находится ссылка.

Далее идет столбец « Status » , где указаны статусы всех ссылок. Если мы хотим отфильтровать битые ссылки, достаточно просто кликнуть по названию колонки. Нерабочие ссылки, выделенные красным цветом, будут сгруппированы программой Xenu в верхней части страницы.

  • not found - ссылка не найдена;
  • no such host – данный URL не существует;
  • no connection – сервер не отвечает. В данном случае следует уменьшить количество одновременных потоков в настройках и повторить проверку.

Закладка « Type» позволяет сортировать файлы по типу расширения: картинки, html/css-файлы и т.д.

Во вкладке « Size» собрана информация о весе файлов в Кб. Этими данными можно воспользоваться, чтобы найти и сжать самые тяжелые изображения на блоге.

В колонке « Title» можно отсортировать результаты по одноименному мета-тегу title. Это дает возможность найти дубли страниц по визуальному совпадению заголовков.

Также приложение предоставляет информацию по таким параметрам:

« Level» - глубина вложенности страницы, на которой находится URL;

« Out Links» - количество исходящих ссылок на конкретной странице;

« In Links» - входящие ссылки, ведущие на определенную страницу.

Воспользовавшись инструкцией по работе с Xenu Link Sleuth и проанализировав результаты seo-анализа, вы с легкостью сможете устранить все битые ссылки и большинство дублей на вашем блоге.

Netpeak Spider: определение основных сео-параметров сайта.

Данная программа является аналогом Xenu. Она позволяет просканировать сайт на наличие ошибок, связанных с внутренней оптимизацией. При этом приложение имеет русскоязычный интерфейс, что значительно упрощает работу с ним. И если вы уже знакомы с программой Xenu, выполнить настройки Netpeak Spider для вас не составит труда.

Вот список тех параметров, которые можно получить в результате аудита сайта с помощью данной программы:

  • « URL» — адрес просканированной страницы;
  • «Глубина» — уровень вложенности страницы;
  • « LinkCanonical» – наличие атрибута rel =”canonical” и адрес, на который он указывает;
  • «Ответ» — ответ сервера (3ХХ-5ХХ);
  • « Title», « Description», « Keywords» — содержание соответствующих мета-тегов;
  • « robots. txt» — разрешена или запрещена (allowed/disallowed) индексация страницы;
  • « MetaRobots» — наличие мета-тега «robots»;
  • «Редиректы» — количество перенаправлений со страницы;
  • «Заголовки (H1)» — количество заголовков первого уровня;
  • «Ссылки с этой страницы», «Ссылки на эту страницу» — количество всех ссылок, исходящих с этой страницы и ведущих на эту страницу соответственно;
  • «Внутренние ссылки» ;
  • «Внешние ссылки» ;
  • « PR», « PR (без сквозных ссылок) » — внутренний показатель Page Rank страницы, внутренний показатель Page Rank страницы без учета сквозных ссылок;
  • «Дубли по Title», «Дубли по Description», «Дубли по Keywords» — группы страниц с соответственным повторяющимся мета-тегом.

Скачать программу можно по ссылке — netpeak.ua/software/netpeak-spider . Приложение бесплатное, но необходимо пройти несложную регистрацию. После этого на электронную почту нам будет выслан ключ активации, которым надо воспользоваться при установке программы. Сам процесс установки стандартный: запускаем файл.exe и следуем инструкциям Netpeak Spider.

После запуска приложения, открываем окно с необходимыми настройками: «Настройки» — «Сканирование». Выбираем необходимые параметры, сохраняем.

В основном окне программы прописываем адрес проверяемого ресурса, указываем количество параллельных потоков и глубину вложенности страниц. Запускаем сканирование (пиктограмма справа от поля для вставки URL).

Полученные результаты можно фильтровать по такому же принципу, как и в программе Xenu. Для доступа к детальной информации об интересующем нас показателе достаточно вызвать контекстное меню кликом правой кнопки мыши. Так, к примеру, если мы хотим увидеть список всех исходящих ссылок на конкретной странице, кликаем по количеству и выбираем в появившемся окне пункт «Посмотреть все ссылки с этой страницы».

Для поиска дублей справа от основного размещено окно поменьше. Здесь предлагается кнопка «Найти дубли» и возможность выбрать критерий фильтрации – «По title», «По description» или «По keywords». Результаты аудита можно сохранить в виде файла Excel. Для этого следует кликнуть по основному меню в верхней области окна «Экспорт в Excel».

В заключение следует упомянуть, что и Xenu Link Sleuth, и Netpeak Spider зарекомендовали себя как отличные инструменты для проверки битых ссылок и имеют множество положительных отзывов среди веб-мастеров. Отмечу, что хотя функционал Netpeak Spider несколько шире, в отличии от Xenu, в ней нет возможности повторно открыть проверяемый файл.

Здравствуйте, уважаемые читатели! Сегодняшней статьей о программе Xenu"s Link Sleuth я начинаю цикл постов по проверке правильно выполненной внутренней оптимизации (seo аудит сайта ). Многие используют ее только для поиска битых ссылок, но функционал этой программы значительно шире.

Есть несколько способов провести seo анализ сайта: при помощи онлайн сервисов, при помощи и , посредством специальных плагинов (например, и их удаление с помощью ), а также программ для seo аудита сайта. Причем я предлагаю вам пока только те способы, которые не требуют больших затрат, а выполняются самим администратором ресурса. Кстати, в этом смысле очень неплох .

Сегодня как раз рассмотрим одну из таких программ - Xenu"s Link Sleuth. Главное ее достоинство - она совершенно бесплатна, что немаловажно, особенно начинающим веб-мастерам. Кроме того, она достаточно функциональна, выполняет комплексный отчет по целому ряду позиций. Очень непросто найти качественный бесплатный софт, выполняющий seo аудит, это как раз подходящий случай.

Настройки программы Xenu"s Link Sleuth

Итак, сначала необходимо скачать программу Xenu"s Link Sleuth , затем установить на свой компьютер. Да, чуть не забыл, программа создана только для операционной системы Windows. Установка производится обычным образом, никаких сложностей возникнуть не должно. После запуска программы выбираете из меню «File»→«Check URL»:


В открывшемся окне вводим необходимую информацию, чтобы провести seo аудита сайта:


Сначала надо указать адрес страницы сайта, которая подвергнется проверке. Это может быть как главная, так и любая другая, например: / или /dvizhok-wordpress/wordpress-vidzhet/.

Внимание! Адрес страницы должен обязательно заканчиваться символом слеш «/». Будьте внимательны!

Теперь небольшое отступление. Как видите, настройки имеют такую замечательную функцию как «e-mail». Если я правильно разобрался, она предназначена для того, чтобы сообщить результаты аудита сайта другому лицу (например, своему другу об анализе его сайта). Для этого нажимаем эту кнопку и получаем:


Если ставим флажок e-mail only if there are broken links (отправить e-mail только, если обнаружены битые ссылки), то лицо, аудит сайта которого вы проводили, получит отчет только тогда, когда на его ресурсе будут найдены битые ссылки. SMTP-сервер поддерживает отправку электронной почты. В диалоговом окне указываете адреса отправителя, получателя, а также тему послания (subject).

Насколько понимаю, это бесплатная услуга. Какой сервис выбрать? Вот тут я теряюсь, поскольку еще не пользовался данной опцией. На скриншоте указан один из них, его я обнаружил в сети. Также некоторые провайдеры предоставляют данную услугу, но, к сожалению, более ничего сказать по этому поводу не могу. Надеюсь, кому-нибудь пригодится данная опция. Далее, необходимые пояснения для начала проведения seo анализа:

  • Local file - эта опция используется в том случае, если необходимо проанализировать ссылки в локальном файле, расположенном на вашем компьютере:


Находим соответствующий HTML-документ, потом нажимаем «Открыть». Адрес этого файла может быть такого вида: file://C:/document.html/.

  • Check external links - если вы хотите проверить наряду с внутренними ссылками также внешние, то ставьте здесь галочку.
  • Consider URL"s beginning with this as ′internal′ - сюда можно добавить ссылки, которые необходимо считать внутренними; после добавления очередной ссылки надо нажать «Add». Скажем, вы делаете аудит главной страницы сайта; тогда определяем внутренние страницы, которые имеют отношение к сайту, но имеют адрес, отличный от url главной страницы, например: http://forum.yoursite.ru (главная страница http://yoursite.ru).
  • Do not check any URL"s beginning with this - сюда добавляем ссылки, которые не подлежат проверке программой Xenu"s Link Sleuth. Здесь могут быть адреса счетчиков (http://top100.rambler.ru), баннеров и т.д.


«Basic» (базовые настройки):
Apply to all jobs (применить для всех проектов) - опция позволяет сохранять настройки ко всем вашим ресурсам.

Parallel Treads (параллельные нити) - с помощью ползунка можно настроить число потоков, то есть количество одновременно проверяемых ссылок (например, current: 4). Здесь необходимо иметь ввиду, что чем больше это число,тем сильнее нагрузка на сервер. Поэтому необходимо оптимизировать эту опцию: если подлежащий seo аудиту ресурс является крупным многостраничным сайтом, то число одновременно проверяемых ссылок может быть больше, если у вас нагрузка минимизирована при помощи соответствующих инструментов.

В случае небольшого блога, если к тому же у вас действует самый дешевый пакет хостинга, необходимо ставить значение 2-4. Когда я выполняю seo аудит своего блога, я устанавливаю значение 4. Естественно, если нагрузка на хостинг оптимизирована, то можно ставить больше (говорят, среднее оптимальное значение 10).

Maximum depth - максимальная глубина поиска. Обычно небольшие сайты или блоги имеют небольшую глубину просмотра, а крупные порталы, конечно, имеют множество подрубрик, но не настолько, чтобы максимальная цифра (999) оказалась востребованной.

Ask for password or certificate when needed (запрашивать пароль или сертификат, когда необходимо). По ходу проведения seo аудита сайта под проверку могут попасть страницы, для которых используется защищенное соединение (протокол https). Тогда происходит запрос вышеуказанных данных.

Теперь посмотрим,что можно включить в рапорт(report), который будет представлен по итогам аудита сайта:

  1. Broken links, ordered by links - битые ссылки, отсортированные по адресам
  2. Broken links, ordered by page - битые ссылки, которые будут упорядочены по страницам
  3. Broken local links - найденные неправильные внутренние ссылки
  4. Redirected URL"s - адреса с редиректом 301/302
  5. FTP and gopher URL"s - FTP, а также другие не HTTP адреса. Программа Xenu не проверяет их работоспособность, но имея полный список, пользователь может проверить их самостоятельно.
  6. Valid text URL"s - рабочие текстовые ссылки
  7. Site map - карта сайта. Программа Xenu Link Sleuth может построить HTML- карту сайта для вашего ресурса, которая будет отображена в отчете.
  8. Statistics - статистические данные
  9. Orphan files (дословно: файлы-сироты). Бывает такое, что страница удалена, а относящиеся к ней файлы нет. Проблема несущественная, но кому нужен лишний мусор? Тогда Xenu Link Sleuth проанализирует, существуют ли файлы, на которые не ссылается ни одна страница сайта.

На скриншоте выше флажками (галочками) отмечены те пункты, которые я использую при проведении аудита сайта. Вы можете отметить все опции, но надо ли это? Рапорт будет очень объемным, не исключена серьезная нагрузка на сервер. Конечно, при необходимости получения разовой дополнительной информации возможно включение других функций, например, если вам необходимо создать карту сайта.

Итак, я подробно описал все возможные настройки Xenu"s Link Sleuth, даже, может быть слишком подробно, поэтому пост получается громоздким. Но при анализе данных о Xenu"s Link Seulth я не нашел полностью материала о всех ее настройках, поэтому для удобства читателей счел необходимым представить их вам. Надеюсь, вы оцените мой шаг.

Аудит сайта с помощью программы Xenu"s Link Sleuth

Переходим непосредственно к аудиту сайта. После всех этих манипуляций нажимаем «ОК» и Xenu"s Link Sleuth начнет работу. Процесс может занять от нескольких минут до нескольких часов. Это зависит от многих причин, включая число страниц сайта, загруженность сервера и т.д. В результате программа начнет анализировать все внутренние, внешние (ведущие с вашего сайта на другие ресурсы) ссылки. В окне программы есть возможность сортировки результатов по табуляторам:


  • Status - табулятор, который позволяет сконцентрировать битые ссылки вместе. Чтобы осуществить данную опцию, надо кликнуть по этому табулятору, результатом чего все неправильные ссылки окажутся в одном месте (битые ссылки выделены красным цветом, все правильные - зеленым):


В табуляторе «Status» дается пояснение касательно состояния данных битых ссылок, то есть практически причин их возникновения: no connection (нет соединения с сервером; в этом случае программу можно запустить еще раз, возможно, это временный сбой из-за перегруженности сервера), not found (страница не создана; это некорректная ссылка).

Возможны другие варианты; но согласитесь, очень удобный функционал, вы знаете причину возникновения битой ссылки. Более того, получите информацию, на какой именно странице ее искать. Для этого кликните правой клавишей вашей мышки по соответствующей ссылке в окне программы Xenu"s Link Sleuth и выберите из контекстного меню вариант «URL properties»:

В самом низу дан список адресов,где обнаружена данная битая ссылка. Идете туда, затем удаляете ее. Подсказкой служит текст этой ссылки (исходя из данного примера Title or link text: подтверждение ). Для этого копируем адреса страниц, заходим в визуальный редактор админ-панели wordpress, в разделе «Записи»→«Все записи» выбираем необходимую, кликаем «Изменить». Покажу пример своей статьи, где была проставлена неправильная ссылка:


С помощью мышки выделяем слово или словосочетание, содержащее неправильную ссылку, нажимаем на инструмент удаления ссылки. Все, задача решена.

  • С помощью табулятора «Type» есть возможность отсортировать ссылки на файлы с различным расширением, например, файлы изображения (расширения.png, .jpeg, .gif):


Также «Type» позволяет проанализировать эти ссылки. Скажем, можно проверить имеют ли изображения атрибут alt , который, как известно, имеет решающее значение при поиске по изображениям в поисковых системах.

  • Табулятор «Syze» дает возможность распределить ссылки на страницы и файлы по их размеру (например, нажав на табулятор вверху, получим размер по возрастанию вниз). Таким образом, можно выяснить, какие страницы имеют наибольший вес, а, следовательно, будут долго загружаться. Имея аналитические данные, можно предпринять определенные шаги по оптимизации.
  • Используя табулятор «Title» сортируете страницы, имеющие заголовок (Title). Это имеет огромное значение, потому что можно определить повторяющиеся заголовки (которые будут отображаться рядом), а также страницы, которые не имеют заголовка Title.
  • «Level» позволяет отсортировать страницы по уровню вложенности: 0(главная страница), 1, 2, 3 и т.д. Для улучшения внутренней оптимизации уровень не должен быть выше 3 с целью облегчения навигации сайта.

Еще некоторые важные табуляторы, которые отображены программой Xenu"s Link Sleuth, они появляются после получения результатов seo аудита сайта:

  • «Out Links» - табулятор, позволяющий сделать сортировку по количеству внешних ссылок, ведущих со страниц ресурса (по возрастанию или убыванию). Кликнув правой кнопкой мышки по ссылке, из контекстного меню можно получить данные, позволяющие понять, на какую именно страницу ведет ссылка
  • С помощью «In Links» распределяем также входящие ссылки, а из контекстного меню узнаем адреса ресурсов, ссылающихся на этот документ
  • «Duration» - сортировать ссылки страниц по возрастанию или убыванию времени их загрузки (). По этой информации можно внести необходимые коррективы в оптимизацию данных страниц.

После окончания seo аудита ресурса программа Xenu"s Link Sleuth предложит сохранить отчет об анализе (Окончание seo аудита программой Xenu"s Link Sleuth):

Нажимаем «Да», затем получаем отчет Xenu"s Link Sleuth о проведенном seo аудите вашего блога, где наверху расположено меню полученных результатов:

Ну вот, пожалуй, все. Я постарался подробно описать все возможности Xenu"s Link Sleuth при самостоятельном проведении аудита сайта, потому что материалы в интернете не дают полного описания функционала. Надеюсь, вы почерпнули максимум информации, дорогие читатели, которой воспользуетесь с пользой.

Здравствуйте, уважаемые читатели блога сайт. Многие думают, что битые ссылки — это не самая животрепещущая тема для вебмастера, ибо всегда найдется что-то более важное и значимое, чем вам будет предпочтительней заняться.

Да и утомительно это — искать программу, расширение или онлайн-сервис, где осуществляется проверка, а затем долго и муторно отыскивать доступ и проводить правку найденных нерабочих гиперссылок на своем ресурсе.

В принципе, гораздо проще забить на эту проблему, ибо маловероятно, что они присутствуют на вашем проекте в огромных количествах и их влияние вряд ли как-то скажется на отношение посетителей и поисковых систем . Или же все-таки скажется? Быть или не быть битым ссылка на вашем сайте?

Я считаю, что это есть зло, от которого нужно периодически избавляться (очищаться). Но по-любому вам решать, я лишь опишу те методы, которые использовал и использую для упрощения сего процесса.

Проблема битых ссылок и причина их появления

Вообще вопрос об отношении к битым ссылкам довольно интересный, ибо однозначной информации по этому поводу нет. Но если судить по тому, что в панелях для вебмастеров Яндекса и Google имеется раздел, где будут приведены все найденные нерабочие ссылки на вашем сайте, то это уже можно считать первым признаком того, что поисковикам они вовсе не по барабану.

Думаю, что при большом их количестве поисковые системы могут посчитать ваш сайт заброшенным и понизить его в выдаче. Так ли это на самом деле я не знаю, но даже то, что битые ссылки представляют существенное неудобство для посетителей (тем самым ухудшая ПФ), может служить достаточно весомым аргументом к тому, чтобы всерьез задуматься об их выявлении и исправлении.

Конечно же, сделать это вручную (пройтись по всем внутренним и внешним ссылкам, ведущим со станиц вашего сайта) не представляется возможным даже на очень маленьких проектах, не говоря уже о больших порталах. Проверка — это прерогатива программных средств — ботов поисковых систем, онлайн сервисов или специально для этого написанных программ, скриптов или расширений (плагинов) для используемого вами движка сайта.

Но все равно, даже после того, как все нерабочие гиперссылки будут найдены, решение об их исправлении или удалении придется принимать именно вам, и по каждой из них в отдельности. Поэтому, если решитесь на данную проверку, на всякий случай запаситесь терпением и некоторым количеством времени.

Если говорить о причине появления битых ссылок на сайте , то в случае блога сайт это в основном мои собственные ошибки при осуществлении ручной внутренней перелинковки, а также внешние ссылки на ресурсы авторов комментариев и упоминаемые в статьях онлайн-сервисы, которые успели за это время кануть в лету (ребят, знали бы вы, сколько сайтов сгинуло за те семь лет, что существует мой блог — реально становится грустно!).

Встречаются и другие варианты их появления. Вообще, причиной неработающих линков могут быть и изменения Урлов на сторонних ресурсах без использования 301 редиректа для склеивания нового адреса со старым (при изменении структуры сайта, переноса статей между разделами и т.п.), да и много других сугубо индивидуальных проблем.

Как я уже упомянул чуть выше, существует несколько способов, с помощью которых можно проверить свой проект на наличие подобных изъянов. Самым очевидным мне кажется воспользоваться тем списком нерабочих ссылок, который собрали боты поисковых систем.

Ищем битые ссылки в Яндекс Вебмастере и Search Console Гугла

В панелях вебмастеров Яндекса и Google можно будет узнать, на каких страницах и какие именно нерабочие гиперссылки были найдены, а затем, по возможности, внести необходимые исправления в админке своего проекта.

Про работу с панелями для вебмастеров Яндекса и Google я уже довольно подробно писал, поэтому позволю себе лишь привести линки на эти материалы:

  1. (в ближайшее время ее придется обновлять, ибо Яндекс наконец-то допилил новую версию)

Давайте начнем проверку с инструментов для веб-мастеров от Google. Будем считать, что воспользовавшись приведенными выше материалами, вы уже добавили свой ресурс в панель Гугла , и теперь вам останется лишь пройти из левого меню в «Сканирование» — «Ошибки сканирования» :

На открывшейся странице перейти на вкладку «Не найдено» , где и будут сосредоточенны все нерабочие, по мнению Google, ссылки на вашем проекте. Но тут следует понимать, что поисковик рассматривает не только линки ведущие с вашего сайта, но и все те, что были проставлены с других ресурсов (так называемые ).

Т.о. в списке не найденных документов будут присутствовать Урлы, полученные не только в результате ваших собственных ошибок при внутренней перелинковке, но и результаты ошибок тех пользователей, которые второпях поставили на вас ссылку со своего сайта или чужого форума, но не проверили ее работоспособность.

Напротив каждого не найденного документа вы увидите код ошибки 404 (читайте про то, что тоже может являться выходом из сложившегося положения). Посмотреть Урл страницы, которую Гугл не смог найти на вашем ресурсе, можно щелкнув по любой строке.

Там же на вкладке «Ссылающиеся домены» вы можете найти страницы, с которых данная битая ссылка была проставлена.

Если в открывшемся окне вы увидите адреса вебстраниц не вашего сайта, то исправить, скорее всего, ничего не сможете (хотя, можно попробовать, например, в.htaccess настроить для таких битых ссылок 301 редирект на правильный Урл). Но если нерабочие гиперссылки были проставлены со страниц вашего же собственного ресурса, то нужно будет в админке найти требуемую статью (или комментарий к ней) и поправить, либо удалить некорректный линк.

Думаю, что разберетесь, но наравне с панелью инструментов Google не примените посмотреть информацию о не найденных документах и в панели для вебмастеров от Яндекса, ибо их данные могут отличаться.

В Яндекс Вебмастере вам нужно будет перейти в левом меню на «Индексирование» — «Внутренние ссылки» , а в открывшемся окне из выпадающего списка можно будет выбрать фильтр по типу ошибок (ошибки сервера, либо отсутствие страницы или запрет на ее индексацию):

Вы увидите список всех найденных страниц в том числе и с ошибкой 404. Далее идете в админку своего ресурса, отыскиваете нерабочую гиперссылку и либо исправляете ее, либо удаляете, чтобы не вносила сумбур в работу отлаженного механизма.

Проверка битых ссылок в программе Xenu Link Sleuth

Я мог бы еще упомянуть в этой статье про ряд сервисов, позволяющих проверить битые линки онлайн, но, к сожалению, я так и не нашел достойного бесплатного решения (хотя все же один вариант рассмотрю чуть ниже, ибо он позволяет быстро пробежаться по наиболее «выпирающим» битым ссылкам), а пробовать платные у меня как-то рука не поднялась. На бесплатных же проверить можно очень ограниченное число страниц, а следовательно, актуальность такого способа весьма сомнительна.

Но можно ведь использовать не только онлайн-сервисы, но и программы, которые будут установлены на ваш компьютер. Одной из самых популярных и, что очень важно, бесплатных программ для проверки битых ссылок является Xenu Link Sleuth, о которой я и хочу вам рассказать.

скачать Xenu Link Sleuth и установить на свой компьютер.

После ее запуска выберите из меню «File» — «Check URL» и в открывшемся окне введите URL вашего ресурса, поставьте галочку «Check external links» (для проверки на битость не только внутренних линков вашего ресурса, но и ссылок, ведущих с него на другие ресурсы) и нажмите «ОК».

В результате программа Xenu Link Sleuth начнет искать и анализировать все внутренние и внешние (проставленные с вашего ресурса, например, на сайты авторов комментариев) ссылки. Все найденные неработающие гиперссылки в результирующем отчете будут помечены соответствующим образом (не найдено, не удалось связаться и т.д.).

Сам по себе отчет представляет неоценимый интерес не только с точки зрения ошибок 404, но нас в первую очередь интересует именно это. В окне Xenu Link Sleuth имеется возможность отсортировать весь список по ряду табуляторов, которые находятся в самом верху.

Для проверки именно битых ссылок нужно будет воспользоваться табулятором «Status», в результате чего все помеченные красным строки будут собраны в одном месте списка.

Для того, чтобы узнать, а на какой именно странице вашего сайта проставлена неработающая гиперссылка, вам нужно щелкнуть по ней правой кнопкой и выбрать из контекстного меню вариант «URL Properties» :

В самом низу открывшегося окна вы увидите список адресов страниц вашего сайта, на которых была найдена данная битая ссылка. Вам останется только зайти в админку своего ресурса и провести необходимую правку. Да, муторно. Да, неудобно, ибо приходится копипастить ссылки и искать в админке нужные страницы. Но потратив время и силы вы на 100% избавите свой сайт от битых ссылок (во всяком случае, имеющих место быть на данный момент).

Но, как я уже упоминал чуть выше, программа Xenu Link Sleuth, при должном подходе и сообразительности, способна предоставить намного больше информации. Если вы поэкспериментируете с другими табуляторами программы, то сможете получить следующую информацию о вашем сайте из этого отчета:

  1. если вы попробуете отсортировать данные в окне программы по табулятору «Title», то таким способом можете найти страницы своего сайта, имеющие дублированные заголовки Title или не имеющие их вовсе
  2. с помощью табулятора «Size» можно найти слишком тяжелые страницы своего проекта, которые будут долго загружаться
  3. с помощью табулятора «In Links» можно узнать количество входящих ссылок на любой документ своего ресурса, а из контекстного меню (щелчок правой кнопкой и выбор самого нижнего пункта в открывшемся меню) можно будет узнать и адреса страниц, ссылающихся на этот документ
  4. с помощью сортировки табулятором «Out Links» в окне отчета программы Xenu Link Sleuth сможете узнать количество исходящих ссылок с той или иной страницы своего ресурса, а из контекстного меню — посмотреть, на какие именно страницы проставлены ссылки
  5. отсортировав по табулятору «Type», можно найти изображения не имеющие тега Alt
  6. табулятор «Level» позволит просмотреть вложенность тех или иных страниц вашего сайта

В общем, Xenu Link Sleuth имеет просто неоценимую значимость. Кроме этого, для статического сайта эта программа может , которую потом можно будет подсунуть поисковым системам для ускорения индексации.

Также Xenu Link Sleuth по результатам проверки может сформировать очень удобный отчет в виде Html странички, где можно будет в удобоваримом виде просмотреть все веб-страницы своего проекта, имеющие битые ссылки и увидеть упомянутую выше карту.

Для создания отчета вам нужно выбрать в меню программы пункты «File» — «Report» или просто нажать R на клавиатуре. В верху страницы с отчетом будет расположено меню с разделами.

Поиск ссылок в WordPress с помощью Broken Link Checker

Если у вас , то возможно вам будет удобнее воспользоваться плагином Broken Link Checker для проверки неработающих гиперссылок. Он может осуществлять повторную проверку через указанный вами промежуток времени, прекращать свою работу в моменты, когда сервер вашего хостинга сильно нагружен, и, что самое важное, позволяет исправлять или удалять битые ссылки прямо из своего окна, не требуя захода в окно редактирования статей.

Итак, сначала вам нужно будет скачать Broken Link Checker и стандартным образом. Если возникнут с этим проблемы, то можете обратиться к приведенному по ссылке материалу.

Сразу после установки он начнет работать и сканировать ваш блог на наличие битых ссылок. Зайдя на страницу настройки этого плагина («Настройки» — «Проверка ссылок») в админке Вордпресса, вы сможете увидеть, сколько гиперссылок уже нашел Broken Link Checker на вашем блоге, а также сделать необходимые настройки.

Здесь вы можете задать частоту повторного сканирования, попросить посылать вам сообщение на E-mail при обнаружении недоступной страницы, а также попросить плагин выделять найденные гиперссылки с помощью особого стиля CSS.

Но у Broken Link Checker есть еще несколько вкладок с настройками. На вкладке «Look For Links In» вы можете задать, в каких именно материалах вашего блога он будет осуществлять поиск, а на вкладке «Which Links To Check» указать, ссылки с каких объектов будут проверяться. На вкладке «Дополнительно» вы можете максимально минимизировать нагрузку этого плагина на сервер хостинга , ограничив время поиска и задав порог загруженности сервера, при превышении которого он прервет свою работу.

По мере проверки будет предоставляться отчет о проделанной работе и найденных битых ссылках, который вы сможете посмотреть, перейдя в меню админки WordPress в «Инструменты» — «Неправильные ссылки» :

Здесь у вас будут богатые возможности по работе с ними, причем все, что вам может потребоваться (отредактировать, удалить ее, перейти к материалу, в котором проставлена данная битая ссылка), будет возможно сделать прямо отсюда, никуда не переходя и ничего не ища. В этом и состоит, на мой взгляд, основное преимущество плагина Broken Link Checker. К тому же, по окончании проверки его со спокойной душой можно снести до следующей проверки, чтобы глаза не мозолил. Думаю, что для Joomla тоже должны существовать аналогичные расширения, но я, к сожалению, с ними пока не знаком.

Онлайн-сервис Broken Link Checker

Ну, и напоследок, как и обещал, опишу один из множества онлайн-сервисов предназначенных для поиска битых ссылок на любом сайте. Не сказать, чтобы сервис этот чем-то особым выделялся или как-то по особому хорошо работал. Нет. Но зато поиск битых линков в нем довольно прост и находит он их, как правило, не много, чтобы, наверное, нас не слишком расстраивать. Я обычно использую сначала его (проверяю несколько раз подряд), а уже потом использую плагин и программу (для лакировки, так сказать).

Итак, заходите на Broken Link Checker , вводите Урл вашего сайта в форму расположенную в правом верхнем углу открывшейся страницы и жмете на кнопку «Find broken links». Откроется страничка, где нужно будет разгадать капчу и выбрать один из двух способов проверки (детальное отличие не понятно, но имеет смысл по очереди оба варианта прочекать). Еще раз жмете на заветную кнопочку и наблюдаете за результатом проверки, либо идете по своим делам не закрывая эту вкладку в браузере.

Сервис Broken Link Checker будет вам сообщать о количестве проверенных страниц и потихоньку начнет выводить список найденных битых ссылок. Править их можно начинать прямо сейчас не дожидаясь окончания процесса проверки. Для этого достаточно будет кликнуть по кнопке «src» в нужной строке списка:

В результате вы увидите исходный код страницы (на нее саму можно попасть кликнув по соседней кнопке «url»), где найдена битая ссылка. Причем место размещения в коде будет подсвечено:

Все. Останется только найти в тексте статьи или в теле комментария проблемную ссылку, еще раз проверить ее неработоспособность и пофиксить Broken Link как будто бы его и не было. Усё.

Удачи вам! До скорых встреч на страницах блога сайт

посмотреть еще ролики можно перейдя на
");">

Вам может быть интересно

WP-PageNavi - постраничная навигация для блога на WordPress — установка, настройка и изменение внешнего вида пагинации
Делаем ручную перелинковку страниц в WordPress более комфортной с помощью плагина WP-MFC Linkator
Создание в WordPress карты блога для посетителей (плагины Sitemap Generator и WP DS Blog Map)
Comment Toolbar - добавляем в комментарии WordPress возможность ответа и цитирования




Top