Xenu что за программа
Xenu Link Sleuth: обзор программы для экспресс-аудита сайта
Xenu’s Link Sleuth — бесплатная программа-краулер, позволяющая сканировать любой сайт. Ее основным назначением является поиск битых ссылок, однако софт позволяет решать и другие задачи.
Cкачать дистрибутив Xenu можно на официальном сайте home.snafu.de. Программа работает стабильно, несмотря на то, что последняя сборка датирована 2010 годом, и станет полезным инструментом для тех, кто занимается развитием своего проекта.
Единственными минусами Xenu для некоторых пользователей могут стать полностью английский интерфейс и отсутствие возможности экспорта отчетов в таблицы.
Начало работы с Xenu
После установки и запуска программы откроется окно минималистичного интерфейса.
Для запуска нового проекта выберите в меню File > Check URL.
В открывшемся окне вбейте адрес своего проекта.
Галочка Check external links означает,что будут просканированы внешние (исходящие) ссылки сайта.
Если вы хотите исключить из внешнего ссылочного профиля некоторые ссылки, например, на поддомены или зеркала, укажите, какие URLы считать внутренними в секции Include/Exclude.
Также здесь можно исключить из сканирования целые директории, если они слишком обширны или вы разделили сканирование на несколько этапов.
Настройка программы
В меню Options можно установить дополнительные настройки для сканирования. Так, в секции Basic отмечаем галочками нужные виды отчетов.
По окончании сканирования вы увидите окошко.
Кликните Да и отчет откроется локально в окне браузера.
Анализ html-отчетов
Xenu формирует html-страничку с отчетами, указанными в настройках.
Используя полученные данные, можно найти достаточно серьезные проблемы в оптимизации сайта.
Какие ошибки можно выявить с помощью отчета
1. Найти и устранить неработающие ссылки.
Со временем информация на сайте устаревает и появляются битые ссылки на уже удаленные страницы, картинки, документы вашего же или стороннего ресурса. Большое количество неработающих ссылок служит сигналом поисковику о том, что развитию сайта не уделяют внимания, а значит, возможно, и его контент не несет большой ценности. Кроме того, битые URLы — однозначно плохой user experience.
Программа найдет все неработающие ссылки, в том числе на служебные файлы и элементы дизайна.
Смотрите отчеты:
— Broken links, ordered by link
— Broken links, ordered by page
— Broken page-local links
2. Увидеть, какие ссылки возвращают редирект.
В SEO часто используется склейка редиректом дублирующих адресов или удаленных страниц с новыми, чтобы не терять посетителей. При этом за внутренними ссылками следят не так внимательно и при простановке редиректов оставляют их в исходном виде. Тогда как большое число активных редиректов — это еще один сигнал для поисковика о том, что информация на сайте не актуализируется.
Смотрите отчет:
— List of redirected URLs
3. Получить список всех страниц сайта и выстроить его структуру.
Список всех доступных страниц поможет составить правильную логическую структуру сайта и найти URLы с большим уровнем вложенности. Если вы нашли важную информацию на странице 4-го или 5-го уровня вложенности, стоит подумать над улучшением внутренней навигации.
Смотрите отчеты:
— List of valid URLs you can submit to a search engine
— Site Map of HTML pages with a Title
4. Составить HTML-карту сайта.
Программа создаст карту сайта, которую удобно использовать на небольших статичных ресурсах взамен долгого ручного труда.
Смотрите отчет:
— Site Map of HTML pages with a Title
5. Найти неуникальные тайтлы.
Дублирование браузерных заголовков — критичная ошибка в оптимизации сайта. Для поисковика title был и остается одним из ключевых сигналов о содержимом страницы. Если на сайте несколько URL с одинаковым заголовком, поисковику придется случайным образом решать, какой же из них отвечает на запрос пользователя, что негативно скажется на ранжировании всего сайта.
Смотрите отчет:
— Site Map of HTML pages with a Title
6. Получить экспресс-статистику сайта.
В этом отчете вы найдете статистику по сайту с указанием типов данных, кодов ответа и размеров передаваемого кода.
Смотрите отчет:
— Statistics for managers
Данные в окне программы
Тем временем, в основном окне программы останется доступным список всех просканированных адресов и их параметров.
К сожалению, эту информацию нельзя выгрузить в привычный табличный редактор, но с ней можно работать прямо в окне программы — доступна сортировка по столбцам.
Что можно узнать по собранным данным
1. Найти страницы с наибольшим и наименьшим количеством внутренних ссылок.
Полученные данные можно использовать при перелинковке сайта. Наиболее важные страницы должны иметь самое большое число входящих ссылок.
Для просмотра всех внутренних связей страницы кликните по URL-адресу правой кнопкой мыши и выберите URL properties.
2. Найти страницы с долгим ответом и ошибками сервера.
Потребуется исправить конфигурацию или удалить ошибочные ссылки.
3. Найти исходящие ссылки на другие ресурсы.
Адреса этих сайтов появятся в первом столбце вместе с вашими URL.
Злоумышленники используют чужие сайты в том числе для простановки вредоносных ссылок. Проверьте, действительно ли вы размещали эти ссылки.
4. Найти изображения без атрибута Alt.
Если на вашем сайте много уникального графического контента, то поиск по изображениям может приносить неплохой трафик. Для того, чтобы пользователи находили ваш сайт, обязательно заполните атрибут Alt у всех изображений поясняющей подписью. О правилах составления Alt-ов и других работах для продвижения по картинкам читайте в статье Оптимизация изображений для поисковых систем.
Увидеть заполненные и найти пустые можно в окне программы, оссортировав таблицу по типу контента.
В итоге
Несмотря на то, что с момента релиза софта прошло много времени, за которое появилось немало аналогичных инструментов, Xenu остается отличным средством для быстрого аудита не слишком крупных ресурсов.
Основными преимуществами программы остаются простота использования, скорость работы и, конечно, доступность на бесплатной основе, а недостатками — английский интерфейс и невозможность экспорта отчетов в таблицы.
Программы Xenu’s Link Sleuth и Netpeak Spider
Как пользоваться программой Xenu.
Работать с этой программой не сложно, а в результате получается подробный и обстоятельный отчет обо всех имеющихся на сайте ссылках. Помимо своего основного предназначения, проверки битых ссылок, Xenu может выполнять и другие задачи:
Обозначенные моменты весьма немаловажны для развития ресурса. Решение данных задач послужит для оптимизации вашего вордпресс-блога. Поэтому предлагаю вам внимательно изучить инструкцию по работе с Xenu Link Sleuth. Начнем.
Разархивируем файл и запускаем Setup.exe. После установки программы можно приступать к настройке её основных параметров. Следует отметить, что Xenu написана для Windows и не работает с другими операционными системами.
Вверху вписываем адрес инспектируемого ресурса. Если вы хотите включить в проверку ссылки на внешние ресурсы, следует оставить галочку возле пункта «Check external links». Кнопка «Local file» предназначена для выбора файла на вашем компьютере, если вы хотите проанализировать таковой.
В поле же «Do not check any URLs beginning with this:» можно перечислить те линки, которые вы хотите исключить из проверки программой Xenu.
В нижней части расположена кнопка «e- mail». Она потребуется вам в том случае, если вы захотите получить отчет о проделанном анализе блога на свой e-mail с помощью SMTP-Server:
Помимо этого, в Xenu предусмотрено большое количество дополнительных настроек. Их можно вызвать, кликнув по кнопке «More options».
Справа расположен блок чекбоксов «Report». Он служит для того, чтобы настроить вывод отчета после сканирования сайта. Выберите те параметры, показатели которых вы хотите видеть в итоге:
Если мы хотим применять данные настройки для всех проектов, нужно отметить галочкой поле «Apply to all jobs».
Сделав настройки Xenu, жмем «ОК». Программа начинает аудит сайта. Она проходит по всему блогу и определяет наличие ссылок. Если возникает необходимость приостановить работу приложения, на панели вверху есть кнопки «Pause» (приостановить), «Stop» (прервать), «Continue» (продолжить). Сколько будет длиться анализ ресурса, зависит от количества страниц, одновременных потоков, скорости соединения и загруженности сервера. По завершению работы, появляется диалоговое окно, сообщающее об этом и предлагающее вывести отчет.
Если соглашаемся, Xenu формирует htm-документ с результатами проделанного анализа в режиме реального времени.
Теперь разберем, как можно пользоваться данными, полученными с помощью Xenu Link Sleuth, в самой программе. Результаты seo-анализа сайта расположены в нескольких столбцах. «Address» содержит список всех найденных URL. Для того, чтобы получить более детальную информацию о какой-то конкретной ссылке, кликаем по ней правой кнопкой мыши, в появившемся контекстном меню выбираем пункт «URL properties». Открывается окно, в котором отображены следующие характеристики линка:
Далее идет столбец «Status», где указаны статусы всех ссылок. Если мы хотим отфильтровать битые ссылки, достаточно просто кликнуть по названию колонки. Нерабочие ссылки, выделенные красным цветом, будут сгруппированы программой Xenu в верхней части страницы.
Битые ссылки могут иметь такие статусы:
Закладка «Type» позволяет сортировать файлы по типу расширения: картинки, html/css-файлы и т.д.
Во вкладке «Size» собрана информация о весе файлов в Кб. Этими данными можно воспользоваться, чтобы найти и сжать самые тяжелые изображения на блоге.
В колонке «Title» можно отсортировать результаты по одноименному мета-тегу title. Это дает возможность найти дубли страниц по визуальному совпадению заголовков.
Также приложение предоставляет информацию по таким параметрам:
Воспользовавшись инструкцией по работе с Xenu Link Sleuth и проанализировав результаты seo-анализа, вы с легкостью сможете устранить все битые ссылки и большинство дублей на вашем блоге.
Netpeak Spider: определение основных сео-параметров сайта.
Данная программа является аналогом Xenu. Она позволяет просканировать сайт на наличие ошибок, связанных с внутренней оптимизацией. При этом приложение имеет русскоязычный интерфейс, что значительно упрощает работу с ним. И если вы уже знакомы с программой Xenu, выполнить настройки Netpeak Spider для вас не составит труда.
Вот список тех параметров, которые можно получить в результате аудита сайта с помощью данной программы:
После запуска приложения, открываем окно с необходимыми настройками: «Настройки» — «Сканирование». Выбираем необходимые параметры, сохраняем.
В основном окне программы прописываем адрес проверяемого ресурса, указываем количество параллельных потоков и глубину вложенности страниц. Запускаем сканирование (пиктограмма справа от поля для вставки URL).
Полученные результаты можно фильтровать по такому же принципу, как и в программе Xenu. Для доступа к детальной информации об интересующем нас показателе достаточно вызвать контекстное меню кликом правой кнопки мыши. Так, к примеру, если мы хотим увидеть список всех исходящих ссылок на конкретной странице, кликаем по количеству и выбираем в появившемся окне пункт «Посмотреть все ссылки с этой страницы».
Для поиска дублей справа от основного размещено окно поменьше. Здесь предлагается кнопка «Найти дубли» и возможность выбрать критерий фильтрации – «По title», «По description» или «По keywords». Результаты аудита можно сохранить в виде файла Excel. Для этого следует кликнуть по основному меню в верхней области окна «Экспорт в Excel».
В заключение следует упомянуть, что и Xenu Link Sleuth, и Netpeak Spider зарекомендовали себя как отличные инструменты для проверки битых ссылок и имеют множество положительных отзывов среди веб-мастеров. Отмечу, что хотя функционал Netpeak Spider несколько шире, в отличии от Xenu, в ней нет возможности повторно открыть проверяемый файл.
Проверка неработающих, битых и исходящих ссылок сайта программой XENU
Вступление о битых ссылках
Если вы следите за своим сайтом, рано или поздно, встанет вопрос о неработающих иначе их называют «битых» ссылках. Появляются битые ссылки по разным причинам, но основных четыре: удаление страницы или документа, обновление данных в автоматическом режиме, переборка сайта, изменения на внешних источниках.
Нерабочие ссылки в пределах сайта, мешают посетителю, нормально по нему передвигаться, битые исходящие ссылки уводят посетителя прочь, а поисковики, совсем «не любят» сайты с большим количеством битых ссылок. Именно, по этому, битые ссылки нужно искать и с ними нужно бороться.
Найти битые ссылки сайта можно несколькими программами. Одни из них лучше, другие хуже. Одни платные другие бесплатные. Отличной, бесплатной программой считается программа Xenu. В этой статье я расскажу, как делается проверка неработающих (битых) и исходящих ссылок сайта программой XENU. Список других программ для поиска неработающих ссылок в конце статьи.
О программе Xenu
Установка и настройка Xenu’s Link Sleuth
Для начала нужно скачать программу на странице автора. Устанавливается программа стандартно. Если ваша ось подходит под системные требования программы, то проблем с установкой, обычно, не возникает. Переходим к настройке.
Настройка Xenu
Как осуществляется проверка неработающих, битых и исходящих ссылок сайта программой XENU
Приступаем к анализу.
Если вы ждете большего, то напрасно, жмем «Ok» и программа начинает проверку вашего сайта. Ход проверки отражается в правом нижнем углу. В зависимости от объема сайта она длится от 5 до 20 минут. После окончания проверки программа сообщит вам об этом и откроет результаты проверки.
Результаты проверки программы это список все URL страниц вашего сайта. Зеленым цветом обозначены рабочие ссылки, красным цветом обозначены битые ссылки, включая внутренние и исходящие ссылки.
Чтобы просмотреть только неработающие, битые ссылки в пезультат анализа в меню View (вверху) выберите “Show broken links only”.
Примечание: XENU считает ссылку ошибочной, если в URL есть заглавная буква. Проверить “красную” ссылку просто: Правая кнопка “мыши”→Open in Browser.
Список ссылок можно сохранить и при необходимости заново открыть для работы.
Как работать со списком найденных ссылок
Для работы со ссылками используйте перестроение списка по столбцам: Address/Status/Type/Title/Data/Level/OutLinks/Server/Error/Description. Анализируйте ссылки, изучайте, оптимизируйте – ваш сайт как на ладони. Анализ производится полный, вплоть до показа описания (Descriptions) каждой страницы.
Чтобы битые ссылки появились вверху списка, используйте перестройку списка по столбцам Address или Status, можно Error.
XENU не работает, сканирует только главную страницу сайта
Другие программы проверки битых ссылок
В начале статьи обещал список других анализаторов, пожалуйста:
Majento SiteAnalyzer: Majento SiteAnalyzer это программа-паук, позволяющая сканировать сайты и проверять основные технические и SEO-параметры на предмет ошибки. Язык русский.
Linkbot. Веб приложение Chrom.
LinkScan. LinkScan ™ – это инструмент для проверки ссылок и управления сайтом. Семейство продуктов LinkScan ™ обеспечивает гибкие возможности автоматизации тестирования для всего спектра веб-приложений. Скачать: http://www.elsop.com/download/
LinkAlarm. Веб-сервис Link Alarm автоматизирует процесс проверки ссылок с помощью отчетов и предназначен для улучшения рабочего процесса обслуживания веб-сайтов. http://www.linkalarm.com/
Web Link Validator. Web Link Validator помогает веб-мастерам автоматизировать процесс проверки веб-сайтов и проверки сайтов на наличие ошибок. http://www.relsoftware.com/wlv/
Screaming Frog. 500 ссылок сайта проверяются в бесплатной версии. Полный анализ сайта не только по ссылкам, но и всем мета тегам. Отчеты можно скачать.
InSpyder. Simple, powerful Website & SEO software
Compatible with Windows XP to 10. //www.inspyder.com/.
LinkExaminer. LinkExaminer работает в Windows XP или любой версии Windows.
Скачать бесплатно Xenu’s Link Sleuth
Скачать бесплатно Xenu’s Link Sleuth
Предлагаем последнюю официальную (стабильную) версию программы Xenu’s Link Sleuth (current version: 1.3.8 from September 4th, 2010) без вирусов и шелов. Программа запакована в WinRar архив, проверена на отсутствие вирусов.
Системные требования: Microsoft Windows 95/98/ME/NT/2000/XP/Vista/7, (для работы требуется библиотека WININET.DLL, входящая в состав Internet Explorer). Также программа работает под Red Hat 8 и Ubuntu с помощью wine, и под Mac с помощью Crossover.
Настройки программы Xenu’s Link Sleuth
В открывшемся окне вводим необходимую информацию, чтобы провести seo аудита сайта:
Сначала надо указать адрес страницы сайта, которая подвергнется проверке. Это может быть как главная, так и любая другая, например: https://goldbusinessnet.com/ или https://goldbusinessnet.com/dvizhok-wordpress/wordpress-vidzhet/.
Внимание! Адрес страницы должен обязательно заканчиваться символом слеш «/». Будьте внимательны!
Теперь небольшое отступление. Как видите, настройки имеют такую замечательную функцию как «e-mail». Если я правильно разобрался, она предназначена для того, чтобы сообщить результаты аудита сайта другому лицу (например, своему другу об анализе его сайта). Для этого нажимаем эту кнопку и получаем:
Если ставим флажок e-mail only if there are broken links (отправить e-mail только, если обнаружены битые ссылки), то лицо, аудит сайта которого вы проводили, получит отчет только тогда, когда на его ресурсе будут найдены битые ссылки. SMTP-сервер поддерживает отправку электронной почты. В диалоговом окне указываете адреса отправителя, получателя, а также тему послания (subject).
Насколько понимаю, это бесплатная услуга. Какой сервис выбрать? Вот тут я теряюсь, поскольку еще не пользовался данной опцией. На скриншоте указан один из них, его я обнаружил в сети. Также некоторые провайдеры предоставляют данную услугу, но, к сожалению, более ничего сказать по этому поводу не могу. Надеюсь, кому-нибудь пригодится данная опция. Далее, необходимые пояснения для начала проведения seo анализа:
Находим соответствующий HTML-документ, потом нажимаем «Открыть». Адрес этого файла может быть такого вида: file://C:/document.html/.
Далее кликаем «More options», чтобы получить дополнительные настройки:
«Basic» (базовые настройки):
В случае небольшого блога, если к тому же у вас действует самый дешевый пакет хостинга, необходимо ставить значение 2-4. Когда я выполняю seo аудит своего блога, я устанавливаю значение 4. Естественно, если нагрузка на хостинг оптимизирована, то можно ставить больше (говорят, среднее оптимальное значение 10).
Ask for password or certificate when needed (запрашивать пароль или сертификат, когда необходимо). По ходу проведения seo аудита сайта под проверку могут попасть страницы, для которых используется защищенное соединение (протокол https). Тогда происходит запрос вышеуказанных данных.
Treat redirections as errors (считать редиректы, или перенаправления, как ошибки). В случае, если флажок не установлен, то ответы сервера со статусом редиректа не будут считаться ошибками.
Теперь посмотрим,что можно включить в рапорт (report), который будет представлен по итогам аудита сайта:
На скриншоте выше флажками (галочками) отмечены те пункты, которые я использую при проведении аудита сайта. Вы можете отметить все опции, но надо ли это? Рапорт будет очень объемным, не исключена серьезная нагрузка на сервер. Конечно, при необходимости получения разовой дополнительной информации возможно включение других функций, например, если вам необходимо создать карту сайта.
Аудит сайта с помощью программы Xenu’s Link Sleuth
Переходим непосредственно к аудиту сайта. После всех этих манипуляций нажимаем «ОК» и Xenu’s Link Sleuth начнет работу. Процесс может занять от нескольких минут до нескольких часов. Это зависит от многих причин, включая число страниц сайта, загруженность сервера и т.д. В результате программа начнет анализировать все внутренние, внешние (ведущие с вашего сайта на другие ресурсы) ссылки. В окне программы есть возможность сортировки результатов по табуляторам:
В табуляторе «Status» дается пояснение касательно состояния данных битых ссылок, то есть практически причин их возникновения: no connection (нет соединения с сервером; в этом случае программу можно запустить еще раз, возможно, это временный сбой из-за перегруженности сервера), not found (страница не создана; это некорректная ссылка).
Возможны другие варианты; но согласитесь, очень удобный функционал, вы знаете причину возникновения битой ссылки. Более того, получите информацию, на какой именно странице ее искать. Для этого кликните правой клавишей вашей мышки по соответствующей ссылке в окне программы Xenu’s Link Sleuth и выберите из контекстного меню вариант «URL properties»:
В самом низу дан список адресов,где обнаружена данная битая ссылка. Идете туда, затем удаляете ее. Подсказкой служит текст этой ссылки (исходя из данного примера Title or link text: подтверждение). Для этого копируем адреса страниц, заходим в визуальный редактор админ-панели например wordpress, в разделе «Записи»→«Все записи» выбираем необходимую, кликаем «Изменить». Покажу пример своей статьи, где была проставлена неправильная ссылка:
С помощью мышки выделяем слово или словосочетание, содержащее неправильную ссылку, нажимаем на инструмент удаления ссылки. Все, задача решена.
Также «Type» позволяет проанализировать эти ссылки. Скажем, можно проверить имеют ли изображения атрибут alt, который, как известно, имеет решающее значение при поиске по изображениям в поисковых системах.
Еще некоторые важные табуляторы, которые отображены программой Xenu’s Link Sleuth, они появляются после получения результатов seo аудита сайта:
После окончания seo аудита ресурса программа Xenu’s Link Sleuth предложит сохранить отчет об анализе (Окончание seo аудита программой Xenu’s Link Sleuth):
Нажимаем «Да», затем получаем отчет Xenu’s Link Sleuth о проведенном seo аудите вашего блога, где наверху расположено меню полученных результатов:
Ну вот, пожалуй, все. Я постарался подробно описать все возможности Xenu’s Link Sleuth при самостоятельном проведении аудита сайта, потому что материалы в интернете не дают полного описания функционала. Надеюсь, вы почерпнули максимум информации, дорогие читатели, которой воспользуетесь с пользой.
Практические примеры использования Xenu’s Link Sleuth
1. Найти битые ссылки
Это нужно, чтобы ваш сайт был более качественным в глазах пользователей и для поисковых систем. В программе нужно сортировать столбик «Status». Для этого нужно просто на него нажать.
2. Найти дублированные названия
Рекомендуется, чтобы каждая страница сайта имела уникальное название. Нажмите на название столбика «Title» и вы сможете найти дублированные названия.
3. Поиск больших страниц и картинок
Желательно не иметь на сайте страницы большого размера, так как не у всех пользователей есть хорошее подключение к интернету. Чтобы найти такие страницы, нажмите в программе на «Size».
4. Узнать количество входящих ссылок на страницу
Для этого нажмите на столбик «In Links». Чтобы узнать какие именно страницы ссылаются на текущую страницу, щелкните правой кнопкой мыши и выберите «Options».
5. Поиск страниц с наибольшим количеством исходящих ссылок
Если вам нужно узнать число исходящих ссылок на определённых страницах, то вы это можете легко сделать, нажав на «Out Links».
6. Найти страницы на глубоких уровнях
Для большего понимания что это значит, приведу пример: www.site.ru/уровень1/уровень2/уровень3. Для этого нажмите на «Level».
7. Найти изображения без названий
Если вы хотите, чтобы ваш сайт находили чаще, то постарайтесь не оставлять изображения без названий. Для поиска незаполненных названий нажмите на «Type».
Как проверить сайт на наличие битых ссылок?
В видео я показал, как можно обнаружить битые ссылки через сервисы яндекс вебмастер, гугл вебмастер и программу Xenu Links Sleuth.