Xenu Link Sleuth - определяем неработающие (битые) ссылки

Как обещал, в предыдущем сообщении, сегодня снова продолжу тему «битых» ссылок. Однако способ, который раскрою, будет использован не с помощью расширения для браузера, а специальная программа. Название ее — Xenu Link Sleuth .

Программа бесплатная, скачать ее можно здесь . Поскольку она не русифицирована, использование ее будет затруднительно для новичков. Я постараюсь коротко рассказать о принципе работы программы, используя переводчик Google.

Запустили прогу, следующее действие — «File» — «Check URL». Далее откроется окно, в котором нужно ввести URL нужного сайта и нажать на кнопку «ОК»:

Затем нужно подождать, пока программа просканирует все ссылки (внизу есть таймер). По окончании работы, откроется окно, которое предложит открыть в браузере страницу полного отчета о всех ссылках исследуемого сайта. Но можно не торопиться это делать, а пока исследовать ссылки непосредственно в программе. Те, что представлены статусом «Ок» — сейчас нас не интересуют. А вот те, которые выделены красным цветом — и есть «битые» ссылки. Давайте в них разберемся.

Используя те термины. которые предоставила мне программа, информируя о части «неблагополучных» ссылок и переводя те, которые имелись на исследуемом сайте, я нашел довольно много разных. Сразу, без редакции предоставляю их названия и перевод от Google. Думаю, что общий смысл в названии подобных ссылок будет понятен читателю:

• timeout — тайм-аут
• temporarily overioaded — временно перегружено
• cancelled — отмененo
• no such host — нет такого хозяина
• object temporarily moved — объект временно переехал
• no connection — нет соединения

Вид битых ссылок довольно разнообразен и список на разных сайтов может быть не только таким, какой я сейчас представляю. Поэтому вебмастеру вручную требуется проверить каждую. Причина — программа может ошибиться. Точнее, при проверке ссылок связь с сервером, на которую ведет ссылка, может быть на данный момент плохая или может еще какой-то сбой в работе интернета. Вебмастеру, так же, нужно учесть, что многие ссылки связаны с плагинами и файлами, которые в них присутствуют: если плагин удален или отключен, ссылки на файлы в них, могут представлены как недоступные или «битые». Проще говоря — с ними не все «ок» ??

Проверка каждой такой делается это просто: выделяется выбранная ссылка, после клика правой кнопки по ней, открывается окно. Выбираем самую нижнюю команду «URL properties»:

Следующее окно нам все расскажет: какая ссылка «битая» (верхняя строка); ее title или анкор, если есть; страница сайта, на которой она расположена:

Как действовать дальше: скопировать битую ссылку и проверить ее с помощью расширения в браузере. Если страница недоступна, значит ссылка по настоящему битая и это не сбой. Чтобы открыть нужную страницу сайта, открываем ее по нижней ссылке (копировать, вставить в адресную строку).

Окончательно убедиться, что ссылка битая, можно еще используя расширение LinkChecker.(см. упоминание в начале статьи). Как дополнительное средство и окончательную убежденность. Расширение представит ее очень наглядно: Итак, вы окончательно убедились, что ссылка недоступна. Теперь ее с чистой совестью можно удалять или редактировать.

Как показал мой опыт, наибольшее количество битых ссылок встречается в комментариях: либо сайт комментатора недоступен, либо оставленная в комменте ссылка… Да уж, мусора в комментах, со временем, накапливается довольно много (((

А что, например, делать, если человек оставил много комментариев. при этом оставляя URL своего сайта, который теперь недоступен. Рекомендация по ходу: откройте в админке все комментарии и введите Ник (имя) комментатора. Теперь все его комментарии собраны на одной странице. Удаляйте его или редактируйте.

Программа имеет достаточно много информации, если использовать ее табуляторы в верхней части панели:

Каждый из них представляет нужную информацию. Выбрав тип ссылки и кликнув по нужному, откроются все ссылки данной группы по данному параметру (табулятору). Например,

1. если вы попробуете отсортировать данные в окне программы по табулятору «Title», то таким способом можете найти страницы своего сайта, имеющие дублированные заголовки Title или не имеющие их вовсе
2. с помощью табулятора «Size» можно найти слишком тяжелые страницы своего проекта, которые будут долго загружаться
3. с помощью табулятора «In Links» можно узнать количество входящих ссылок на любой документ своего ресурса, а из контекстного меню (щелчок правой кнопкой и выбор самого нижнего пункта в открывшемся меню) можно будет узнать и адреса страниц, ссылающихся на этот документ
4. с помощью сортировки табулятором «Out Links» в окне отчета программы Xenu Link Sleuth сможете узнать количество исходящих ссылок с той или иной страницы своего ресурса, а из контекстного меню — посмотреть, на какие именно страницы проставлены ссылки
5. отсортировав по табулятору «Type», можно найти изображения не имеющие тега Alt
6. табулятор «Level» позволит просмотреть вложенность тех или иных страниц вашего сайта (источник ) и т.д.

После окончания работы по сканированю ссылок сайта, можно создать отчет, как я уже упоминал вначале, который предоставит более удобно-наглядную картину о состоянии ссылок. Прежде чем закрывать программу, данные можно сохранить. Сделать это можно на жестком диске, а так же совершить просмотр в браузере: «File» — в контекснном меню выбрать «Report», далее кликнуть на кнопку «ОК»:

Мгновенно откроется страница в браузере, предоставляющая полный отчет о ссылках исследованного сайта. Не стану полностью раскрывать каждый пункт. Вначале страницы есть полный список якорных ссылок (оглавление), при клике по которым открывается нужный раздел.

Предоставлю лишь гугловский перевод:

Неработающие ссылки, упорядоченные по ссылке
Неработающие ссылки, упорядоченные по странице
Список перенаправленных URL-адресов
Список допустимых URL-адресов вы можете представить в поисковую систему
Карта сайта из HTML страниц с названием
Сломанные страница-местный ссылки
Сироты файлы
Статистика для менеджеров

Полагаю, что даже этот несовершенный перевод, позволяет разобраться, какие ссылки перечислены под каждым подзаголовком. В статистике для менеджеров (можно сказать и для вебмастеров) есть очень хорошая сводная таблица. Обратите на нее внимание.

Чем больший процент будет соответствовать параметру «ок» — тем лучше.

Я не описал еще более подробнее о программе Xenu Link Sleuth и не раскрыл другие возможности. Но надеюсь, что самые главные ее задачи, функции и возможности, изложил вполне доступно.

Для того, что бы изучить работу программы глубже и узнать некоторые опции, о которых я не рассказал, предлагаю вниманию это видео:

Уважаемые пользователи популярнейшего cервис email-рассылок Smartresponder, спешу сообщить — он закрывается. Закрывается полностью и навсегда. Произойдет это «трагическое» событие 1 ноября …

Известно, что поисковые системы прилагают максимум усилий в борьбе за пользователей интернетом. Для того, что бы максимально удовлетворить результаты выдачи, ПС …

Похоже, что окружающая социальная и политическая обстановка вокруг места моего постоянного пребывания, некоторые негоразды с оформлением пенсии по подготовки документации и …

Почему-то у некоторых людей принято отвечать фразой «Утро добрым не бывает» в ответ на пожелание доброго утра. Почему? Да наверное потому, …

Как составить рекламное объявление, которое читатель выделит из общей массы? Одна из критических проблем в работе РРС-специалиста — составление объявления, которое …

Друзья, компания ООО «Редхелпер» намедни запустила новый дизайн онлайн-консультанта RedHelper. Специалисты по дизайну и пользовательским интерфейсам долго и кропотливо работали над …

Самые интересные и важные статьи

Проверить битые ссылки: скачать и установить программу XENU

Программа Xenu’s Link Sleuth — идеальное решение, которое поможет проверить битые ссылки на вашем сайте! При этом может быть произведена как внутренняя, так и внешняя проверка ссылок, если в этом имеется необходимость. Но перед тем, как начать пошаговую инструкцию о скачивании и установке Xenu, необходимо упомянуть, что любые битые ссылки, имеющиеся на сайте:

— снижают рейтинги ресурса;
— плохо сказываются на юзабилити сайта;
— оказывают негативное влияние на позиции сайта в выдаче;
— снижают доверие к проекту со стороны пользователей и поисковых машин.

Значит, каждую битую ссылку необходимо найти и устранить так, чтобы проект оставался целиком работоспособным, не терял своего качества и не давал ссылок на несуществующие страницы с ошибкой 404. О том, как скачать и установить столь полезный и нужный для вебмастера и оптимизатора софт, мы и поговорим в данной пошаговой инструкции на pod-kopirku.ru.

Хочется заметить, что пошаговая инструкция, прежде всего, будет полезна новичкам веб-разработчикам, которые только осваивают все тонкости внутренней оптимизации сайта и желают улучшить внутренние показатели собственных виртуальных площадок, форумов, блогов и сайтов.

2. Кликаем по ссылке Download (загрузить) и в открывшемся диалоговом окне выбираем опцию «Сохранить файл». Примечание: если есть желание, то можно почитать описание программы на русском или украинском языке.

3. Как только архив с программой будет загружен (XENU.ZIP), открываем его с помощью стандартного архиватора WinRAR или WinZIP и запускаем внутренний файл Setup.exe.

4. Соглашаемся с тем, что данный файл необходимо распаковать и выполнить, ожидаем когда окончится процесс распаковки и запуска заархивированного инсталлятора.

5. В открывшемся окне мастера установки программы Xenu жмем «Далее» (NEXT).

6. Соглашаемся с лицензионными правами на данный информационный продукт — «I Agree».

7. Выбираем необходимые компоненты, в частности, создание иконки на рабочем столе (просто жмем NEXT).

8. Выставляем путь для установки программы проверки битых ссылок на вашем компьютере. Если это диск C, то ничего можно не изменять, достаточно кликнуть «Далее» — «NEXT». Если установку нужно выполнить в другое место (например, на диск D или E) кликаем Browse и указываем желаемую папку для инсталляции программы.

9. На следующем шаге соглашаемся с созданием отдельной папки для программы, жмем «Install».

10. По завершении установки можем почитать текстовый отчет или же просто пропускаем шаг — «NEXT».

11. Все. Здесь процесс установки завершен, программа скачана и инсталлирована на компьютере, может использоваться для проверки битых ссылок любого сайта. Убедиться в этом можно, запустив программу из списка «Всех программ» или кликнув на ярлык, созданный на Рабочем столе (если программа Xenu не запустилась в автоматическом режиме).

Последующее применение программы Xenu и поэтапную проверку битых ссылок сайта мы рассмотрим в одной из следующих пошаговых инструкций сайта pod-kopirku.ru, чтобы наглядно показать работу данного софта. Тем не менее, продвинутые читатели уже могут пользоваться программой, самостоятельно изучив ее функционал. И в завершение темы приводим полезное видео, посвященное нахождению битых ссылок на сайте.

Как проверить сайт на битые ссылки с программой Xenu Link Sleuth

Всем привет, сегодня мы рассмотрим, как можно проверить свой сайт на битые ссылки с помощью программы Xenu Link Sleuth. Рассмотрим ее описание, параметры настройки и то, какие данные она позволяет извлечь.

Проверить все ссылки, которые находятся на вашем блоге вручную невозможно, учитывая тот факт, что увеличивается число статей и комментариев, которые так или иначе содержать внешние или внутренние линки. С разрастанием всемирной паутины Интернет. количество сайтов ежедневно меняется: пропадают старые, появляются новые, меняются владельцы доменов, а с ними и URL адреса, на которые вы ссылались. Ситуация, когда адрес URL страницы стал не доступен, не является новой. Естественно, возникает вопрос – как быстро проверить свой сайт на неработающие (битые ) ссылки – внешние, внутренние, неважно.

В помощь вам приходит довольно простая программа Xenu Link Sleuth от немецкого программиста Tilmana Hausherra. Программа позволяет проверить не только стандартные ссылки (те, которые начинаются с тега A), но и линки на картинки, рамки, карты изображений, таблицы стилей, скрипты и апплеты. Пожалуй, основным достоинством данной программы является то, что она абсолютно бесплатна.

В первую очередь нужно скачать саму программу по адресу http://home.snafu.de/tilman/XENU.ZIP. она будет находиться в архиве, размер которого чуть меньше 0,5 МБ. Далее следует распаковать содержимое архива в удобном месте. Далее все по откатанной схеме – запускаем установщик setup.exe, и следуя инструкции, указывая, куда нужно установить Xenu Link Sleuth.

При первом запуске программы появится небольшое окошко с подсказками, которое можно деактивировать при следующих запусках. После закрытия окна с подсказками мы будет находиться в основном окно программы, в котором будут активными только три кнопки:

• Check URL – запускает новый проект для проверки ссылок на вшивость.
• Open – позволяет открыть сохраненный ранее файл с анализом.
• About – информация о программе Xenu Link Sleuth.

Что бы проверить заданный сайт на битые ссылки, нужно нажать на кнопку Check URL. тем самым мы создадим новый проект. Перед нами появится окно, в котором можно указать адрес ресурса, который надо проверить. Вы также можете нажать на кнопку " Local File ", чтобы проверить локальный HTML-файл.

Давайте посмотрим, какие параметры проверки битых ссылок мы можем задать:

Check external links – если поставить галочку возле заданного пункта, то мы сможем проверить не только внутренние, но и внешние битые ссылки на сайте (линки, которые ведут на другие ресурса).

Include / Exclude – в данном блоке можно указать дополнительные адреса, которые программа Xenu Link Sleuth должна дополнительно проверить или пропустить. В качестве игнорируемых адресов можно указать те, которые относятся к статистике LiveInternet, формам подписки и так далее, можно также прописывать подстановочный символ "*".

More Options… – кнопка находится в самом низу слева и позволяет настроить дополнительные параметры проверки битых ссылок.

Перед нами появится диалоговое окно с двумя вкладками:

Basic – тут мы можем указать число потоков и данные, которые будут предоставлены после завершения проверки:

• Parallel Threads – с помощью ползунка указываем количество параллельных потоков. Значение от 1 до 100, чем больше потоков, тем быстрее Xenu Link Sleuth сможет проверить ваш сайт на наличие битых ссылок.
• Maximum Depth – глубина проверки, максимальное значение 999.
• Ask for password or certificate when needed - Запрашивать пароль или сертификат, ставим галочку при необходимости. Просто во время анализа, могут быть внешние ресурсы, доступ к которым возможен лишь при вводе пароля. Как правило, галочку можно убрать.
• Treat redirections as errors – если поставить галочку возле заданного пункта, то Xenu Link Sleuth будет воспринимать все перенаправления как ошибки.
• Apply to all jobs – собственно, применить указанные настройки ко всем заданиям.
• Report – в данном блоке можно указать, какая информация будет отображаться в отчете после завершения проверки сайта на битые ссылки:
• Broken links, ordered by links и Broken links, ordered by page – Вшивые линки, которые будут отсортированы по адресам и страницам.
• Broken local links – указывать некорректные внутренние адреса.
• Redirected URL's – URL адреса с перенаправлением (коды 301 и 302).
• FTP and gopher URL's - отметив данный пункт, мы сможем получить список FTP и других не HTTP адресов, которые потом проанализируем сами, так как Xenu Link Sleuth этого не делает.
• Valid text URL's - рабочие текстовые ссылки.
• Site map – отметив данный пункт, Xenu Link Sleuth сможет создать HTML карту вашего сайта, которая появится в отчете.
• Statistics – собственно, статистические данные.
• Orphan files – файлы-сироты. Тут, имеется в виду ситуация, когда некая страница уже не существует, но остались документы, которые имеют к ней отношение. Отметив данный пункт галочкой, мы сможем узнать, есть ли на сайте такие файлы.

Advanced – тут мы можем задать дополнительные параметры проверки:

• Allow cookies – разрешить кукисы, относительно данного пункта нужно почитать справку.
• Fail all URLs with same failed host – Автоматически считать неудачными все HTTP и FTP ссылки с заданного узла. Если данный пункт отмечен галочкой, то если попытка подключения к некоему узлу не удалась, то программа будет автоматически считать неудавшимися и все остальные адреса, относящиеся к этому узлу.
• Exclude MSO files – собственно, исключить MSO файлы из проверки.
• Allow local files in remote check – разрешить локальные файлы в удаленной проверке.
• List local directories – список локальных каталогов.
• Convert all URLs to lower case – преобразовать все адреса в нижний регистр.
• Retries – количество повторов.

При желании, можно указать адрес электронной почты, на который будет отправлен отчет при нахождении битых ссылок.

После того, как мы задали все параметры, можно нажать на кнопку OK, что бы программа начала проверять сайт на битые ссылки. Процесс проверки можно наблюдать в появившемся окне. При желании, можно нажать на паузу или остановить проверку. В окне проверки отображается таблица со списками адресов, статусом, типом ресурса, его размером и в случаи веб страницы – содержимое заголовка. Также, в таблице будет отображаться еще много другой информации – сервер, дата, уровень вложенности и так далее.

В самом низу будет находиться информация о проверенных URL – сколько проанализировано и сколько еще надо проанализировать. Скорость проверки битых ссылок на заданном сайте зависит от количества потоков и скорости вашего интернета.

Давайте рассмотрим, какую информацию содержит таблица:

• Adress – собственно, проверяемый URL адрес.
• Status – статус проверки ссылки, будет прописан в зависимости от кода ответа (200 – ОК, 404 – не найдено, 403 – доступ запрещен и так далее).
• Type – тип документа.
• Size – размер в байтах.
• Title – как я сказал выше, если проверяется на битые ссылки простая веб страница сайта, то программа покажет ее заголовок.
• Date – дата создания.
• Level – уровень вложенности.
• Out Links и In Links – количество исходящих и входящих линков (внутренних).
• Error – название ошибки, возникшей при попытки доступа к адресу.
• Charset - кодировка.
• Description – описание (если есть) веб страницы.

Нажав правой кнопкой мыши, перед нами появится контекстное меню, которое позволит просмотреть дополнительную информацию о заданном URL адресе. После того, как Xenu Link Sleuth закончит проверять ваш сайт на битые ссылки, произойдет звуковой сигнал и диалоговое окно проинформирует о составлении отчета. Если мы в настройках ставили галочку возле пункта Site Map. то мы сможем просмотреть в браузере составленную HTML карту проверяемого ресурса.

Ладно, полагаю, на этом можно заканчивать обзор программы Xenu Link Sleuth, которая позволяет проверить сайт на битые ссылки. Остальные параметры вы и сами сможете изучить. Я вначале думал сделать статью символов на 30000, что бы конкурентов обогнать, но… махнул рукой, хватит и этого.

Xenu Link Sleuth - находим битые ссылки

Программа Xenu простой и полезный инструмент, с помощью которого можно проанализировать все URL адреса сайта. Полное название программы - Xenu Link Sleuth. Изначально, программа создавалась для поиска неработающих (битых) ссылок на сайте. Однако, этим её возможности не ограничиваются. С помощью программы можно найти неработающие ссылки, скрытые ссылки, ссылки с перенаправлением, неработающие якоря, в общем, сделать полный анализ ссылок на сайте. Полученная информация поможет нам найти и исправить ошибки.

Для того, чтобы вы могли анализировать ссылки сайта, скачайте программу Xenu Link Sleuth и установите на свой компьютер. Скачать программу вы можете с сайте автора или с данной веб-страницы.

Запустите программу Xenu Link Sleuth. Перед вами появиться окно Tips and Tricks (Советы и Рекомендации). Закройте окно

Откройте File и нажмите на Check URL (Проверить URL)

Введите в адресную строку URL адрес вашего сайта в формате: http://www.webadvisor.ru/ (слэш в конце url) и нажмите ОК

Программа Xenu исследует сайт и предложит создать отчёт. Нажмите Да

В следующем окне, для продолжения создания отчёта нажмите Cancel

В браузере откроется отчёт Xenu Link Sleuth. На рисунке ниже вы видите, какую информацию выводит отчет

Внимательно просмотрите результаты отчёта по каждой категории, найдите битые ссылки, исправьте ошибки, и снова проверьте сайт.

Исправляйте ошибки, проверяйте сайт и обязательно обратите внимание на ссылки, ведущие на чужие сайты. Возможно, эти ссылки на сторонние ресурсы поставлены вами, но если это «паразиты» - находите и уничтожайте. В следующем материале мы рассмотрим, что собой представляют кодированные ссылки и как их можно найти и обезвредить.