корректировка ссылок на 404 на что влияет
Чем опасны битые ссылки на сайте, как их искать и что делать дальше
Едете до указанного адреса, а там… пустой офис, гараж или вообще будка с трансформатором. Обидно? Ещё как. Вот с битыми ссылками примерно так же.
Битая ссылка (broken link) — ссылка, которая ведёт на несуществующую страницу. При переходе по ней пользователь видит сообщение об ошибке. Например, такое:
Ошибка 404 или Not Found — стандартный код ответа сервера. Он сообщает, что по заданному адресу HTML-страницы не существует, запрошенные данные найти не удаётся.
Пишущий интернет-маркетолог, автор-фрилансер. Помогает развивать и продвигать блоги, делает контент для внешних площадок. Пишет об интернет-маркетинге, реже о финансах и бизнесе.
Откуда берутся битые ссылки
В процессе продвижения сайта приходится постоянно вносить изменения: удалять устаревшие статьи, объединять разделы в интернет-магазине, переименовывать URL. И чем сложнее ресурс, тем легче что-то забыть и допустить ошибки.
Например, страница имела адрес «site.ru/page123», а получила «site.ru/price-list». При этом не было настроено перенаправление с первого URL на второй. Значит, все ссылки, ведущие на «site.ru/page123», станут битыми. При попытке перехода по ним пользователь увидит в браузере ошибку 404.
Broken links появляются также в результате банальных опечаток. Копирайтер при написании статьи может случайно вставить в текст ссылки лишний символ, что тоже сделает её нерабочей. Сервер не догадается интуитивно, что «site.ru/statya-» — это вроде похоже на «site.ru/statya» и, значит, можно открыть её.
В общем, битые ссылки — не проделки хакеров или злых конкурентов, а вполне естественное явление.
Чем опасны ссылки, ведущие не туда
Битые ссылки, скорее всего, ухудшают продвижение в поисковых системах. Для поисковых роботов они могут быть признаком некачественного, неудобного для пользователей, устаревшего ресурса. Правда, пока нет подтверждённых данных, что битые ссылки напрямую влияют на ранжирование.
Тем не менее битые ссылки однозначно влияют на поведение на сайте. Допустим, пользователь хочет почитать статью, кликает и видит ошибку. Он может вернуться назад, воспользоваться меню или поиском по сайту — а может просто уйти.
А вот поведенческие показатели (отказы, количество просмотров страниц, продолжительность посещения) уже играют значительную роль в SEO. Исследование компании «Ашманов и партнёры» показывает корреляцию с топом или позициями и в Google, и в Яндексе.
Какие инструменты подойдут для проверки битых ссылок
Если сайт с большим количеством страниц, невозможно вручную проверять каждую и кликать по всем имеющимся ссылкам. Для поиска лучше использовать специальные инструменты. Это можно сделать с помощью официальных вебмастеров:
Если хотите быть на «ты» с инструментами вебмастеров и системами веб-аналитики, приглашаем на онлайн-курс « SEO-специалист с нуля до PRO ». Подходит новичкам в поисковом продвижении, интернет-маркетологам, владельцам бизнеса.
SEO-специалист с нуля до PRO
Один из самых полных и профессиональных курсов по SEO в Рунете, созданный на основе стандартов и компетенций экспертов компании Ingate. Вы освоите профессию
SEO-специалиста с нуля. Узнаете, как работают поисковые системы, научитесь собирать семантику, познакомитесь с сервисами «Яндекс.Вебмастер», Google Search Console.
Как избавиться от битых ссылок
Ссылки, ведущие на несуществующие страницы, можно просто удалить. Если в тексте опечатка, то нужно внести правки. Это легко сделать самому через панель управления сайтом или делегировать тому, кто отвечает за наполнение и редактирование контента, — вебмастеру, контент-менеджеру или верстальщику.
Но даже если на сайте не будет битых ссылок, пользователи всё равно будут видеть код ответа 404. Написать URL с ошибкой могут и в соцсетях, и на сторонних ресурсах. И всегда есть вероятность, что пользователь опечатается, когда захочет напрямую зайти на ваш сайт. Чтобы уменьшить процент отказов и негатив в таких случаях, лучше оформить страницу 404 нестандартно. Дайте задание копирайтеру и дизайнеру, а разработчика попросите настроить переадресацию.
«Битые» ссылки: избавляемся от трупов негатива
Наверняка многие из вас попадали в ситуацию, когда кликаешь по ссылке на сайте и попадаешь на страницу с текстом «404 Error», «Not Found» или «Страница не найдена». К примеру, вот такую:
Рис.1. Пример 404 страницы
Согласитесь, это неприятно? И раздражает практически всех пользователей! Следовательно, владельцы сайтов не должны допускать такой оплошности – нужно своевременно отслеживать и удалять такие нерабочие ссылки.
Именно об этом мы и поговорим в статье. Но сначала немного теории.
Что такое битые ссылки и какие они бывают?
Битые ссылки (еще их называют «мертвые ссылки») – гиперссылки, которые ведут на несуществующий сайт, веб-страницу или отдельный файл (изображение, файл с музыкой, фотографии и пр.). Обычно они сопровождаются ошибками (чаще всего 404-й).
Такие ссылки можно сравнить с домом на карте, которого на самом деле не существует: на карте здание отмечено, но в реальности его нет.
Различают два вида битых ссылок: внешние и внутренние.
Внешние битые ссылки – это гиперссылки, которые ведут на сторонние ресурсы, а не на страницы внутри одного ресурса.
Внутренние битые ссылки – ссылки веб-сайта, которые ведут на страницы, документы и файлы этого самого сайта.
Почему битые ссылки – это плохо?
Битые ссылки очень вредят ресурсу. Первое и самое главное – они раздражают пользователей. Посетитель переходит по ссылке в поиске нужной информации, а по итогу получает сообщение, что такой страницы нет или документ не обнаружен. Так пользователи теряют доверие, чаще всего закрывают сайт и не возвращаются.
И хорошо, если страница 404 оформлена правильно и пользователю предлагаются варианты дальнейшего взаимодействия с сайтом, есть шансы не упустить посетителя совсем. Например, на сайте М-Видео с несуществующей страницы можно вернуться на главную или изучить каталог:
Рис.2. Пример 404-страницы на сайте М-Видео
Но очень часто встречаются ресурсы с неоформленной 404-страницей, наткнувшись на которую, скорее всего, пользователь просто нажмет на крестик. И вот отличный пример:
Рис.3. Неправильно оформленная 404 страница
Кстати, в одной из статей мы делали подборку красивых 404-страниц и рассказывали, как правильно их оформить. Советую обязательно посмотреть, думаю многих эта подборка вдохновит на создание своей уникальной страницы.
Но кроме плохого восприятия посетителей сайтов к мертвым ссылкам, нельзя не отметить и не очень хорошее отношение поисковиков. Яндекс и Google могут негативно относиться к сайту, на котором большое количество ссылок, которые ведет в никуда.
Стоит также отметить, что наличие большого количества битых ссылок – это признак некачественного ресурса. И чтобы ваш сайт не подорвал доверие пользователей и поисковых систем, мы рекомендуем внимательно следить за их появлением.
Откуда же берутся мертвые ссылки?
Причины могут быть разными, вот основные из них:
Как исправить битую ссылку?
Если ссылка стала битой из-за ошибки или опечатки в адресе, то нужно просто указать правильный URL. Если же страница, на которую ссылается гиперссылка, перестала существовать, стоит удалить ссылку или исправить ее на ту, которая актуальна.
Теперь предлагаю разобраться, какими способами можно обнаружить на своем сайте битые ссылки.
Как найти битые ссылки на сайте?
Способ № 1. Вручную
Не самый эффективный способ и подходящий далеко не всем. Если вы обладатель ресурса с 20-30 страницами, такой метод вполне хорош. Вы можете отдельно открыть каждую и изучить на ней все ссылки, проверить их на работоспособность. Но даже вручную можно что-то упустить.
Способ № 2. Яндекс.Вебмастер
Вебмастер Яндекса поможет найти на сайте 404 страницы и битые ссылки с указанием адресов страниц, с которых они получены и на какие страницы ведут.
Для этого необходимо войти в Яндекс.Вебмастер, пере йти в раздел Ссылки. В разделе «Внутренние ссылки» вы сможете посмотреть битые ссылки внутри сайта, а «Внешние» – те, что ведут со сторонних ресурсов.
Рис.4. Поиск 404-страниц в Яндекс.Вебмастере
Сервис представит список нерабочих ссылок с указанием ответа сервера, откуда и куда они ведут. Если все в порядке, будет указано «Робот не обнаружил битых ссылок».
Рис.5. Страницы 404 в Яндекс.Вебмастере
Способ № 3. Google Search Console
Через Вебмастер от Google тоже можно найти страницы с 404 ошибкой на вашем сайте, это поможет в устранении битых ссылок.
Для этого нужно войти в Google Search Console, выбрать раздел «Покрытие» → «Исключено» и кликнуть на статус «Не найдено (404)»:
Рис.6. Поиск 404 страниц через Google Search Console
Так вы получите весь список 404 страниц вашего сайта:
Рис.7. Страницы 404 в Вебмастере Google
Способ № 4. Сервис Online Broken Link Checker
Признаюсь честно, это мой любимый метод – считаю его надежным, простым и очень понятным. Только есть одно НО: проверить бесплатно можно только 3000 страниц сайта, сервис сам определяет какие. Если на вашем сайте более 3-х тысяч страниц, то нужно запрашивать ценовое предложение и оплачивать проверку.
Чтобы найти битые ссылки, войдите на сервис, введите адрес сайта, укажите код, выберите проверку всех битых ссылок, далее нажмите «Искать все битые ссылки сейчас»:
Рис.8. Broken Link Checker
По окончании проверки сервис выдаст таблицу, в которой будут указаны битые и некорректные ссылки, их текст, статус и даже страницы, на которых они находятся:
Рис.9. Примеры битых ссылок в Broken Link Checker
Способ № 5. Программа Netpeak Spider
Для поиска 404 страниц вам нужно установить программу, указать в строке URL-адрес сайта, запустить проверку кнопкой Play:
Рис.10. Netpeak Spider (битые ссылки)
Далее выбираем вкладку «Ошибки» и смотрим список страниц с ответом 404:
Рис.11. Поиск 404 страниц через Netpeak Spider
Способ № 6. Программа Xenu’s Link Sleuth
Еще одна хороший сервис для проверки битых ссылок на сайте.
Чтобы найти нерабочие ссылки, установите программу, откройте, укажите адрес сайта в строке URL и запустите проверку:
Далее по статусу можно отсортировать все нерабочие страницы и файлы:
Рис.13. Проверка битых ссылок в Xenu Link
Способ № 7. Программа Comparser
Сразу же скажу, что это очень эффективная программа для глубокого изучения индексации сайта, с помощью нее вы сможете проанализировать многие параметры сайта, в том числе и битые ссылки.
Для этого вам нужно установить программу, запустить проверку сайта, в разделе «Статистика» будет указано количество 404 страниц:
Рис.14. Comparser (проверка 404 страниц)
Программа предоставит весь перечень 404 страниц на сайте:
Рис.15. Поиск битых ссылок в Comparser
Способ № 8. Поиск битых ссылок на сайте с помощью плагинов
Для сайтов на WordPress существуют два мощных плагина: Broken Link Checker и WP Broken Link Status Checker. Инструменты проверяют контент на наличие битых ссылок, несуществующих картинок и оповещают через админ-панель, страницу самого плагина или по email. Вы сможете не только быстро находить нерабочие ссылки, но и удалять, корректировать их через плагин.
Неплохое расширение для проверки битых ссылок предлагает Google – Check My Links. Туллбар позволяет найти на странице все ссылки, указывает как действующие, а какие нерабочие. Минус в том, что сканирование через плагин постраничное, целиком сайт проверить не получится.
Заключение
Конечно, вариантов поиска битых ссылок больше, но мы постарались перечислить одни из самых эффективных, понятных и, что важно, бесплатных. Не забывайте отслеживать и устранять битые ссылки на своем сайте вовремя, чтобы не злить читателей и не вредить продвижению.
Помощь в поиске и исправлении битых ссылок, а также другие услуги по улучшению и продвижению ваших сайтов вы всегда можете заказать у нас.
Как оптимизировать страницу 404
Каждый из нас сталкивался с 404-й ошибкой на сайте и такую страницу хотелось покинуть как можно скорее. Но некоторые компании, интернет-магазины, медиа создают страницы с 404 ответом сервера, которые срочно добавляешь в закладки. Давайте поговорим о том, как добиться такого эффекта и «выжать» из 404 максимум.
Ошибка 404 вредит SEO?
404 Not Found (ресурс не найден) — код ответа сервера, который сообщает, что невозможно найти страницу по указанному адресу.
Существует мнение, что наличие страниц с 404 ошибкой на сайте негативно влияет на SEO, но на самом деле это не совсем так.
Обычно ошибки 404 не влияют на рейтинг сайта в Google, поэтому их можно игнорировать. Чаще всего они бывают связаны с опечатками, неправильными настройками или попытками Google распознать и просканировать ссылки во встроенном контенте (например, в коде JavaScript).
Появление 404 ошибок на сайте — явление неизбежное и причины тому могут быть разные:
Эти причины требуют тщательной проработки — необходимо заменять битые ссылки на актуальные, при изменении структуры и URL адресов сайта корректно настраивать 301-е редиректы на актуальные страницы. Однако существуют и вполне «житейские» ситуации появления 404-х страниц. Например:
В перечисленных случаях появление 404-й страницы неминуемо и логично для поисковых роботов. Как минимизировать влияние большого количества таких страниц я расскажу в следующей статье, а сейчас давайте рассмотрим, как разработать качественную 404-ю страницу для сайта.
В каждом из указанных случаев необходимо создать шаблон и настроить 404 код ответа сервера для несуществующих страниц. При этом следуйте правилам, которые помогают SEO:
Нужно ли создавать кастомные 404 страницы?
Очень часто страницы 404 оформлены стандартным образом и выглядят примерно так:
Согласитесь, не сильно лояльно по отношению к пользователю и мы его с большей долей вероятности потеряем, если не создадим уникальный и полезный шаблон 404 ошибки.
Google рекомендует создавать собственные страницы 404:
Стандартная страница 404 обычно неинформативна и никак не связана с вашим сайтом. А на собственной странице 404 вы можете разместить полезные ссылки и элементы дизайна своего сайта.
Если у вас есть доступ к серверу, то попробуйте создать собственную страницу 404. Она поможет пользователям найти нужную информацию или предложит им другое интересное содержание, чтобы они остались на вашем сайте.
Создаем 404 страницы для людей
Основные рекомендации по созданию собственных 404 страниц:
Дизайну страницы 404 быть!
Используйте креативные идеи и подавайте такие страницы со вкусом — это сгладит неприятное впечатление от 404-й страницы и задержит человека на вашем сайте:
Как настроить 404 страницу?
Существует достаточно плагинов для настройки 404 страниц на платформе WordPress. Но не всегда получается настроить через плагин или сделать это для сайта на другой платформе. Предлагаю вам такой способ:
Если этого не сделать, то страницы могут попасть в индекс, а в панеле для вебмастеров вы можете увидеть:
Чтобы проверить код ответа сервера, воспользуйтесь такими сервисами:
Надеюсь, я убедила вас в целесообразности создания привлекательной 404-й страницы. В следующий раз подробнее остановлюсь на ситуациях, когда влияние 404 ошибок все же нужно минимизировать и отвечу на такие вопросы:
Выводы
Работайте над лояльностью аудитории, старайтесь врезаться в память: запомниться и выделиться даже с помощью 404-й ошибки. Сделайте ее фишкой сайта и помните:
При создании 404-х страниц правильно настраивайте коды ответа сервера и проверяйте их на https://www.bertal.ru/, https://checkmy.ru/, https://webmaster.yandex.ru/tools/server-response/. Это поможет избежать проблем с индексированием сайта поисковыми системами.
Нашли крутые по дизайну, идее, реализации страницы — давайте ссылки в комментариях, добавлю в пост.
Битые ссылки на сайте – влияние на позиции, поиск и удаление
Один из важных пунктов технического SEO — работа с битыми ссылками. Вебмастера и SEO-специалисты по-разному относятся к этой проблеме, но все знают, что большое количество 404 ошибок вредит сайту. В статье расскажем подробно:
А вы также посмотрите seo чеклист и проверьте, какие из пунктов технического SEO уже внедрили и что еще нужно проверить, кроме битых ссылок. А если только начинаете свой путь в SEO, пройдите бесплатные курсы по SEO для начинающих от Сергея Кокшарова.
Что значит битая ссылка сайте?
Битая ссылка — линк, который ведет на несуществующую страницу. Если перейти по такому адресу в браузере, отобразится ошибка «404 Not Found».
Внешний вид технической страницы зависит от заданных настроек. Пользователи увидят либо стандартный текст в духе «Такого адреса не существует», либо уникальный контент.
Тем, у кого мало опыта в SEO, может показаться, что битые ссылки на сайте — незначительные ошибки, которые не влияют на эффективность продвижения в поисковиках. Это действительно так, но только если битых ссылок мало. Когда их количество постоянно увеличивается, необходимо принять экстренные меры.
Поиск битых ссылок на сайте и борьба с их возникновением — стандартная задача технического SEO, которую опытные сеошники и вебмастера решают с помощью специализированных инструментов. Ее нужно делать вместе с другими техническими задачами: устранением дублей, оптимизацией скорости загрузки сайта и др.
Как влияют битые ссылки на продвижение сайтов
В среде оптимизаторов давно сложился стереотип, что битые ссылки выступают в роли «красной тряпки» для роботов поисковых систем. Якобы, если на сайте будет много 404 ошибок, позиции обязательно упадут.
На самом деле, ничего страшного в наличии битых ссылок нет. Если у сайта нет других критических недостатков, несколько 404 ошибок не повлияют на видимость в поисковых системах.
Но если битые ссылки будут расти в геометрической прогрессии и с ними никак не бороться, со временем проблема может стать заметной. К примеру, если на сайте 300 проиндексированных страниц, а 404 ошибок в панели для вебмастеров несколько тысяч — это тревожный сигнал для краулеров. В таком случае могут быть проблемы с индексацией новых страниц.
Битые ссылки опасны тем, что:
Вебмастера и SEO-специалисты боятся битых ссылок из-за распространенного мифа о том, что они расходуют краулинговый бюджет. Якобы если на сайте с несколькими тысячами страниц много 404 ошибок, то робот потратит ресурсы на обход несуществующих посадочных, а страницы с уникальным контентом не попадут в индекс.
Джон Мюллер, специалист отдела качества поиска по работе с вебмастерами Google, ещё в 2017 году развенчал этот миф. Он отметил, что страницы с 4xx ошибками не снижают краулинговый бюджет и не влияют на рейтинг остальных страниц.
Они используют обычный бюджет сканирования, но мы стараемся не обновлять их часто, поскольку они не так уж «меняются».
Будет справедливо отметить, что так называемые «SOFT 404» влияют на распределение краулингового бюджета. Это подтверждает статья в официальном блоге поисковой системы. «Мягкие 404» — несуществующие страницы, которые при обращении к серверу отдают код 200, а не 4xx.
Откуда берутся битые ссылки?
Битые ссылки не возникают сами по себе, они появляются из-за ошибок вебмастера, технических проблем на сайте или особенностей системы управления контентом. Проверка битых ссылок – стандартная процедура технического SEO, но не все владельцы веб-ресурсов уделяют ей достаточно внимания.
Анализ битых ссылок важен так же, как и проверка позиций сайта в поисковиках или мониторинг бэклинков. Если проверять наличие 404 ошибок раз в полгода, может оказаться, что за это время их количество сильно увеличилось.
Если хотите найти CMS с идеальной защитой от битых ссылок, то такой не существует. Даже в самых продвинутых системах управления контентом часто появляются программные ошибки, которые влияют в том числе и на формирование URL-адресов.
Изменения в структуре сайта
При глобальных изменениях в структуре почти всегда появляются 4xx ошибки. Например, если на этапе создания сайта выбрали неправильную структуру URL, а в процессе продвижения решили изменить её, появления битых ссылок не избежать.
В популярных системах управления контентом реализован автоматический редирект. Если изменить адрес страницы и попытаться перейти в браузере по старому URL, произойдет перенаправление. Посадочные, которые приносят трафик, лучше не трогать, но если пришлось изменить структуру, обязательно проверьте корректность настройки 301 редиректа.
В среде оптимизаторов есть хорошее правило: «Работает — не трогай» и оно напрямую касается структуры URL. Настраивать ЧПУ и решать другие задачи по оптимизации необходимо до старта активного продвижения сайта.
Удаление старых страниц и файлов
В процессе работы над проектом часто приходится удалять страницы и файлы. Ссылки на картинки или документы, которых нет на сервере тоже создают 404 ошибки. Пристально следите за ними и старайтесь не допускать лавинообразного увеличения битых ссылок.
Если продвигаете интернет-магазин с большим количеством товаров, и часто возникает необходимость избавляться от неактуальных страниц, можно не удалять их, а менять статус товара. Если его больше не производят, удалите страницу и обязательно проверьте, чтобы на неё не было внутренних ссылок.
Ошибки вебмастера
Даже опытные оптимизаторы могут пострадать от последствий банальных ошибок. Важно понять, что появление битых ссылок — неизбежный процесс, который нужно контролировать и стараться по максимуму предупреждать появление 404 ошибок.
Битые ссылки могут возникнуть даже если вебмастер не делает глобальных изменений в структуре сайта и не удаляет старые страницы. Например, при покупке ссылок на бирже оптимизатор указал правильный адрес, но позже его пришлось изменить. Если он забудет поставить редирект, а стандартный алгоритм CMS не сработает, появится внешняя битая ссылка.
Битые ссылки как конкуренты по SEO, которые стараются обойти ваш сайт. Не хотелось бы, чтобы они существовали, но это неизбежно и приходится постоянно с ними бороться для сохранения высокого рейтинга.
Проверка битых ссылок на сайте
Поиск и удаление битых ссылок — рутинная задача, которая решается с помощью специализированных инструментов. Она сводится к двум шагам: обнаружение и уничтожение. Найти 404 ошибки несложно, а вот борьба с их повторным возникновением может затянуться надолго.
Если на сайте 5-10 страниц, SEO-инструменты не нужны, можно проверить все ссылки на каждой странице вручную. Когда посадочных сотни, а бэклинков тысячи, без автоматизации не обойтись.
Google Search Console
Недавно Google обновил консоль для вебмастеров и теперь инструмент проверки 404 ошибок находится в разделе «Покрытие». В разделе показывается информация о статусе обработанных страниц.
Если в разделах «Ошибка» и «Исключено» нет проблем, значит с сайтом всё в порядке. Как только роботы Google обнаружат страницы, которые не могут обойти, в консоли появится уведомление.
Яндекс.Вебмастер
В консоли Яндекса для вебмастеров тоже есть инструмент проверки взаимодействия роботов с сайтом. Информация о статусе индексации отображается в разделе «Индексирование» → «Статистика обхода».
Переключитесь во вкладку «История обхода» и посмотрите количество 4xx ошибок. Если Яндекс обнаружил их и проблема остаётся актуальной длительное время, понадобится вмешательство вебмастера. Если битые ссылки пропадают сами по себе, значит проблемы на стороне поисковика.
Дополнительный инструмент проверки битых ссылок доступен в разделе «Ссылки» → «Внутренние ссылки». Если ошибок нет, в интерфейсе отобразится соответствующее уведомление.
Netpeak Spider
Незаменимый инструмент для тех, кто работает с клиентскими сайтами на потоке или продвигает свои проекты с большим количеством страниц. Netpeak Spider проверяет сайт на 100+ ошибок по внутренней оптимизации и 70+ основных SEO-параметров. В числе возможностей и поиск битых ссылок.
Как запустить сканирование:
Главный недостаток софта в том, что в пробной версии нельзя получить доступ к отфильтрованным отчётам. Придется либо покупать платный тариф, либо вручную анализировать таблицу со списком всех URL и искать 4xx ошибки.
Чтобы ускорить процесс поиска, нажмите на пункт «Код ответ сервера» несколько раз, пока в верхней части списка не появятся страницы с нужным кодом ответа. Выгрузить данные в файл не получится, придется вручную проходить каждый проблемный URL.
Xenu Link Sleuth
Популярный в среде оптимизаторов инструмент, который создавался для поиска битых ссылок. Программа давно не обновлялась, но и сейчас хорошо работает. Поиск осуществляется по стандартной схеме — после ввода домена запускается анализ структуры проекта.
После завершения сканирования все найденные URL окрасятся определенным цветом в зависимости от кода ответа сервера. Зеленый означает, что со страницей все в порядке. Нас интересуют элементы, которые подсвечены красным. Это страницы с 4xx ошибками.
Xenu Link Sleuth отлично справляется с поиском битых ссылок и работает довольно шустро, но для корректной работы необходимо изучить настройки. В стандартной конфигурации программа добавляет в таблицу много нерелевантных элементов: закодированные изображения, внешние ссылки и служебные URL.
Screaming Frog SEO Spider
«Лягушка» сканирует сайт, формирует его структуру, показывает страницы с редиректами и ошибками, помогает решать задачи по техническому SEO. Она находит битые ссылки и в отличие от Netpeak Spider не накладывает ограничения на просмотр отчета по 4xx ошибкам и выгрузку данных в формат Excel.
Запустите сканирование сайта, дождитесь завершения обработки данных, перейдите во вкладку «Response Codes» → «Filter» → «Client Error 4xx». Кнопка экспорта отчета находится рядом с фильтром. В бесплатной версии программа обрабатывает не более 500 страниц сайта. Более подробно о возможностях и настройке Screaming Frog SEO Spider читайте в статье.
Check My Links
Бесплатный плагин для браузера Google Chrome, который находит битые ссылки. После установки откроется страница с настройками расширения. Здесь можно добавить домены для исключения, выбрать метод запроса и включить анализ ссылок с атрибутом nofollow.
Check My Links работает постранично. Откройте любую страницу, нажмите на иконку расширения в браузере и ознакомьтесь с результатами отчёта. Если в разделе «Invalid Links» пусто, значит на странице нет битых ссылок.
Поиск битых ссылок с помощью плагинов
Кроме десктопных программ и браузерных расширений можно проверить битые ссылки с помощью плагинов для CMS. Они уступают по возможностям мощным SEO-комбайнам вроде Netpeak Spider или Screaming Frog, но со своими задачами справляются.
К примеру, для популярной CMS WordPress есть плагин Broken Link Checker, который умеет находить внутренние и внешние битые ссылки в контенте. Он сканирует содержимое страниц и показывает проблемные ссылки с соответствующими статусами.
Информация о битых ссылках отображается в разделе «Инструменты» → «Неправильные ссылки». В настройках плагина можно настроить периодичность проверок и включить уведомления о проблемах по электронной почте.
Для других систем управления контентом существуют аналогичные плагины. Однозначно стоит воспользоваться ими, потому что даже самые популярные программы иногда не находят все битые ссылки. Аудит будет полезным только если пользоваться минимум двумя инструментами.
Как избавиться от битых ссылок
Найти и удалить битые ссылки иногда бывает сложно из-за ограничений систем управления контентом. Некоторые CMS генерируют несуществующие адреса и приходится ставить задачу программисту, потому что решить проблему штатными средствами не удаётся.
Если 404 ошибки появились из-за удаления страниц или технических проблем в плагинах для системы управления контентом, исправить битые ссылки не составит труда.
Самое главное — обнаружить все упоминания несуществующих страниц. В этом помогут инструменты из предыдущего раздела статьи. Лучше всего с задачей справляется Screaming Frog, поэтому если у вас небольшой сайт, можно остановиться на этой программе.
Внешняя битая ссылка
Не все вебмастера знают, что существуют внешние битые ссылки. Это не только упоминания сторонних сайтов в статьях, а и бэклинки с других ресурсов, ведущие на несуществующие страницы вашего проекта.
Они вредят сайту, потому что вес донора не передаётся акцептору. Если ссылка размещена на платной основе, а страница перестала открываться или переехала на другой адрес без редиректа, важно как можно быстрее исправить проблему.
Алгоритм действий для внешних битых ссылок:
Внешние битые ссылки в контенте вашего проекта тоже вредны. Пользователи могут кликнуть по адресу и при переходе на внешний ресурс увидят 404 ошибку. В итоге они потеряют доверие к сайту, который ввел их в заблуждение.
Screaming Frog и аналоги умеют находить внешние битые ссылки. Для этого необходимо воспользоваться соответствующими фильтрами и ознакомиться с результатами анализа.
Внутренняя битая ссылка
Удалить внутренние битые ссылки проще, чем бэклинки с внешних ресурсов, потому что есть доступ к административной панели сайта. Прежде чем избавляться от ссылок на несуществующие страницы, необходимо найти источник проблемы.
Варианты борьбы с битыми ссылками:
Битые ссылки в малом количестве не влияют на рейтинг сайта в поисковых системах и позиции по конкретным запросам, но лучше если их не будет совсем. Проводите аудит сайта раз в месяц или чаще, чтобы вовремя заметить проблемы и оперативно от них избавиться.
Как удалить несуществующие страницы из индекса
Сейчас в Гугле и Яндексе нет глобальных проблем с индексированием контента, как 3-5 лет назад, когда апдейты происходили редко и несуществующие страницы могли долго присутствовать в выдаче. Но иногда поисковые системы добавляют в базу посадочные, которых на самом деле нет.
Удалить несуществующие страницы из поисковиков можно несколькими методами:
В этом случае им надо помочь — сделать запрос через соответствующие инструменты в Google Search Console и Яндекс.Вебмастер. В Яндексе панель доступна в разделе «Инструменты» → «Удаление страниц из поиска». В Google за это отвечает вкладка «Удаления».
Оба инструмента работают примерно одинаково — можно удалить конкретный URL или адреса с префиксом. Если страница не закрыта от индексации или при обращении возвращает не 4xx ответ, страница может не пропасть из выдачи. Для проверки кода ответа сервера страницы или списка страниц можете воспользоваться нашим инструментом: Массовая проверка ответа сервера.
В статье мы разобрались, что значит битая ссылка, как проверить их на сайте и рассказали об эффективных методах борьбы с этим явлением. Используйте наши советы, чтобы решить стандартную задачу технического SEO.