Как бороться с битыми ссылками > NetPeak - Независимость и осознанность
NetPeak Biz Tech    


Как бороться с битыми ссылками

Как бороться с битыми ссылками

< >

Как оптимизировать страницу 404 В прошлый раз мы обсудили, как качественно подготовить страницу 404 для пользователей и поисковых систем. Напомню, в некоторых случаях появление таких страниц вполне объяснимо. Но большое количество 404-страниц и ссылок на них может негативно сказаться на ранжировании сайта в поисковых системах.

Битые ссылки — это ссылки, которые ведут на страницы с сообщением «Ошибка 404 Not Found» (Не найдено). Бывают внешние и внутренние битые ссылки. Первые ведут на другие ресурсы, вторые — существуют в пределах одного сайта.

Зачем возиться с битыми ссылками?

Почему много битых ссылок — это плохо? Давайте рассмотрим подробно. 

Во-первых, ухудшаются поведенческие факторы. Пользователь ожидает увидеть полезный контент, а попадает на несуществующую страницу. Он покидает ваш сайт и начинает поиск снова. Таким образом, повышается показатель отказов, снижается время взаимодействия с сайтом. В результате — негативный пользовательский опыт.

Во-вторых, мусорные ссылки влияют на ранжирование поисковыми системами. Сайт теряет позиции и снижается его видимость в поисковых системах.

Почему так происходит? Когда поисковые роботы часто попадают на несуществующие страницы, они воспринимают ресурс, как некачественный. Возможно, устаревший и бесполезный для пользователя. Также наличие битых ссылок влияет на расход краулингового бюджета. Ведь роботы выполняют бессмысленную работу: переходят по битым ссылкам, не попадая на действительно полезные страницы сайта. Итог — сайт хуже сканируется и индексируется.

Кроме того, при наличии внешних битых можно потерять трафик и недополучить ссылочный вес — он будет утекать в никуда.

Откуда на сайте битые ссылки?

Существует много причин, по которым на сайте появляются зловредные ссылки. Но чаще всего это происходит в таких случаях:

  1. Реорганизация сайта. Изменение структуры сайта или переезд на другой домен, без настройки постраничных 301 редиректов. Например, переезд сайта с HTTP на HTTPS протокол http://site.com и https://site.com — разные сайты.
  2. Удаление части сайта или отдельных страниц. При этом ссылки на страницы остались. Очень популярно среди интернет-магазинов — когда товара нет в наличии или он снят с производства, его удаляют.
  3. Опечатки в URL при добавлении ссылки. Например, структура URL-адресов подразумевает в конце слеш, а на сайте добавлена ссылка без слеша, при этом не настроен 301-й редирект.

Как найти битые ссылки?

Для поиска таких ссылок предлагаю воспользоваться следующими инструментами:

  1. Google Search Console. Необходимо выбрать «Сканирование» — «Ошибки сканирования».

Здесь можно увидеть полный отчет о найденных страницах с кодом ответа «404 Not Found».

  1. Яндекс.Вебмастер. Необходимо выбрать «Индексирование» —  «Статистика обхода»:

Далее, с помощью фильтра сортируем страницы, выбрав HTTP-код «404 Not Found».

  1. Google ***ytics — для поиска страниц, с хаpaктерным для 404-ошибки названием в Title: «Страница не найдена», «Page not found», «Ошибка 404» и так далее. Чтобы найти такие страницы, узнайте, как оформлен Title для 404 страницы на вашем сайте. Например:

Далее в Google ***ytics действуйте, как указано на скриншоте:

Учтите, этот способ не сработает, если у вас пустой Title для 404 страницы или он ничем не отличается от существующих страниц.

Если Title не оформлен, найти несуществующие страницы на сайте можно другим способом.

Выгружаем все страницы, которые приносят трафик в Google ***ytics (берем период не менее года).

Список выгруженных страниц нужно проверить на код ответа сервера. Для этого рекомендую воспользоваться сервисом Netpeak Checker — он быстро справляется с задачей и не вызывает сложностей в работе.

  1. Ahrefs. С помощью данного сервиса также можно отследить битые ссылки — они образуются, потому что внешние ресурсы ссылаются на несуществующие страницы сайта. Для этого смотрим отчет «Broken Backlinks» и нажимаем «Export».

  1. Netpeak Spider. Удобный сервис, чтобы найти битые ссылки внутри сайта. Как начать поиск ошибок: в строку поиска прописываем домен сайта и нажимаем на «Старт».

После сканирования выбираем отчет «Битые ссылки»слева откроется таблица, которая содержит информацию о битых ссылках на сайте.

Netpeak Spider не только находит битые ссылки, но и определяет, на какой именно странице сайта они находятся и с каким анкором. Это облегчает исправление ошибок.

Как работает: выбираем «Отчет об ошибке» — «Входящие ссылки»

  1. Web Archive. Сервис, с помощью которого можно выгрузить все страницы, которые есть в архиве и проверить их код ответа.

Для этого нужно зайти в https://archive.org/index.php и ввести домен сайта.

В Web Archive откройте любую архивную страницу и посмотрите, как выглядит URL-адрес в строке.

Далее с помощью Netpeak Spider необходимо спарсить все страницы сайта из веб-архива. Для этого следуйте подсказкам:

  1. Чтобы начать сканирование, задайте стартовую страницу.
  2. В Web Archive архивные страницы отображаются по такому типу URL https://web.archive.org/web/[дата-и-время]/[страницы сайта]. Через регулярные выражения можно задать правила, с помощью которых Netpeak Spider достанет из веб-архива страницы сайта:
  • https://web.archive.org/web/.+/https://site.com/ — найдет главную страницу;
  • https://web.archive.org/web/.+/https://site.com/.+ — найдет все остальные страницы сайта.
  1. На третьем шаге начинаем сканирование.

В результате можно получить все найденные страницы в Web Archive

Далее выделите URL архивных страниц. Для этого откройте отчет с выгруженными страницами в Netpeak Spider и сделайте следующее:

Для того, чтобы выделить URL-адреса страниц своего сайта необходимо:

  • указать регулярное выражение (№ 1) — это поможет выделить часть URL (№5) ;
  • в поле «Заменить на» (№2) оставить строку пустой;
  • в чек-листе (№3) выбрать первый и третий пункты;
  • кликнуть на «Заменить все» (№4). 

В результате получаем конечные URL страниц сайта, которые находятся в Web Archive.

Затем проверьте код ответа сервера этих страниц (следуйте всему, что описано в третьем пункте).

Как исправить ошибки?

После того, как вы нашли битые ссылки, сформируйте список страниц с 404-м кодом и проанализируйте природу появления таких ошибок. Чтобы исправить битые ссылки, рекомендую:

  1. Заменить битые ссылки на актуальные. Для этого пройдитесь по списку с битыми ссылками и внимательно изучите его. Если на сайте настроен ЧПУ (Человеко-понятный URL), то уже по фрагменту адреса можно понять, о чем идет речь и искать похожие категории или наиболее релевантные страницы.

Например, есть список страниц с битыми ссылками. С помощью Netpeak Spider мы нашли, где они размещены. Из ЧПУ стало понятно, что это за страницы, благодаря чему мы нашли актуальные страницы сайта. Как оказалось, дело в опечатке в URL.

Также для поиска актуальных страниц можно воспользоваться сервисом Ahrefs. Если есть внешние ссылки на 404 страницу, по анкору можно догадаться о примерном содержании искомой страницы.

То есть наша задача — отыскать наиболее подходящие или релевантные страницы сайта вручную или с помощью внутреннего поиска на сайте и заменить битую ссылку на актуальную.

Способ требует много ручной работы и временных затрат, но вы обязательно получите положительный эффект.

  1. Настроить постраничный 301-й редирект с неактуальной страницы на актуальную или наиболее релевантную новую страницу сайта. Например, при изменении уровня вложенности страниц, изменения названия категории или изменения структуры сайта.

Пример:

При этом помните, злоупотрeбление внутренними редиректами (наличие ссылок, которые ведут на другие внутренние страницы сайта с 30X кодом ответа сервера) может повлечь негативные последствия для сайта. Так что лучше предоставлять пользователям актуальные ссылки без переадресаций.

  1. Удалить битые ссылки — способ применим, если актуальных или похожих по содержанию страниц не найдено. Таким образом нужно избавиться от мусорных ссылок.
  1. Проанализировать посещаемость страниц с 404-м кодом ответа сервера, выгруженных через Google ***ytics. Если есть страницы, которые приносили или приносят трафик, может лучше их восстановить?

Выводы

В некоторых случаях, битые ссылки могут навредить поисковому продвижению сайта, поэтому нужно регулярно искать и устранять «проблемные места». Что важно запомнить:

  1. Большое количество битых ссылок негативно сказывается на доверии к сайту у пользователей и поисковых систем, а также может повлечь потерю трафика и уменьшить ссылочную массу.
  2. Есть множество доступных способов поиска мусорных ссылок — не стоит ими пренебрегать и желательно использовать в комплексе.
  3. Как лучше бороться с битыми ссылками — заменить их на актуальные и полезные для пользователей ссылки.



Комментарии:

Десять фишечек юзабилити — примеры, которые стоит почерпнуть

Десять фишечек юзабилити — примеры, которые стоит почерпнуть Семинар с примерами юзабилити решений от Twitter, Airbnb, Amazon и других компаний....

28 09 2022 19:44:33

Индекс ридабилити и SEO

Индекс ридабилити и SEO Часто копирайтеры пишут для поисковых роботов, не заботясь о качестве контента и читабельности. Рассмотрим метрики для оценки ридабилити....

27 09 2022 11:52:51

Какому бизнесу нужно отслеживать позиции в выдаче?

Какому бизнесу нужно отслеживать позиции в выдаче? Клиентам не нужно ориентироваться на попадание к поисковым топам выдачи...

26 09 2022 4:55:51

Мобильные приложения: как собрать данные на этапе MVP, чтобы было с чем идти к инвестору

Мобильные приложения: как собрать данные на этапе MVP, чтобы было с чем идти к инвестору Как протестировать MVP мобильного приложения, получить обратную связь и сформировать гипотезы...

25 09 2022 18:35:41

Подборка обучающих материалов для начинающего аналитика

Подборка обучающих материалов для начинающего аналитика Список курсов, книг, каналов и пабликов для работы с данными...

24 09 2022 3:43:24

Основатель Depositphotos Дмитрий Сергеев: «Играйте только там, где вам проще»

Основатель Depositphotos и Clashot Дмитрий Сергеев рассказал нам о базовых правилах ведения бизнеса на западном рынке....

23 09 2022 17:13:53

Дэн Ариэли про пятничную усталость от правильных решений

Дэн Ариэли про пятничную усталость от правильных решений Вместо легкой пятничной темы, представляю вольный перевод статьи автора книги «Позитивная иррациональность»....

22 09 2022 16:33:40

Что такое Netpeak Friends Day и почему его стоит посетить

Что такое Netpeak Friends Day и почему его стоит посетить А сейчас про конференцию Netpeak Friends Day для друзей Netpeak Group...

21 09 2022 8:34:32

Девять месседжей клиенту от агентства интернет-маркетинга

Девять месседжей клиенту от агентства интернет-маркетинга Лучшие маркетинговые ориентиры тем, кто захочет познакомиться с SEO и контекстной рекламе...

20 09 2022 1:16:55

Что такое Server-side tracking

Что такое Server-side tracking И чем этот тип отслеживания событий отличается от Client-side. Узнать!...

19 09 2022 17:24:31

Кейс по контекстной рекламе новостного сайта: качественный трафик за $0,02

Кейс по контекстной рекламе новостного сайта: качественный трафик за $0,02 В этом кейсе я не смогу похвастаться ROMI (возврат маркетинговых инвестиций), так как его герои — это новостные порталы. Основная задача — трафик. Но не просто трафик, а трафик по низкой стоимости....

18 09 2022 14:50:26

Тактики видеомаркетинга — как покорить алгоритм YouTube

Тактики видеомаркетинга — как покорить алгоритм YouTube Отмена видео-сниппетов в выдаче Google, удаление страницы с тегами и инструмента подсказки ключевых слов в YouTube — все события последних месяцев свидетельствуют: Google всерьёз взялся за видеохостинги и решил изменить правила игры для видеомаркетинга в...

17 09 2022 1:47:37

Как работают смарт-баннеры в Яндекс.Директ — кейс интернет-магазина товаров для сада и огорода

Как работают смарт-баннеры в Яндекс.Директ — кейс интернет-магазина товаров для сада и огорода Решили написать про новый формат рекламы — баннерный...

16 09 2022 19:59:27

Собеседование в рекламное агентство Ogilvy

Собеседование в рекламное агентство Ogilvy Тест, который проходят все соискатели. Никому не показывайте!...

15 09 2022 9:55:47

Как сделать зеркало сайта

Как сделать зеркало сайта Зеркалами считаются сайты с разными доменными именами, но идентичным контентом...

14 09 2022 3:32:32

Решения микро UX на сайтах интернет-магазинов. Удачные кейсы

Решения микро UX на сайтах интернет-магазинов. Удачные кейсы Как с помощью элементов микро UX в дизайне сделать сайт интернет-магазина незабываемым...

13 09 2022 9:22:52

Выход на новый рынок, рост видимости сайта в 5 раз и +20% небрендового трафика ежемecячно — кейс Decathlon

Выход на новый рынок, рост видимости сайта в 5 раз и +20% небрендового трафика ежемecячно — кейс Decathlon Начинали с SEO на этапе разработки нового сайта. Узнать больше!...

12 09 2022 16:32:21

Форматы рекламных объявлений в Facebook и Instagram

Форматы рекламных объявлений в Facebook и Instagram Гайд по рекламе для SMM-, PPC-специалистов, блогеров и владельцев бизнеса...

11 09 2022 18:14:52

Переход на удаленку и положительные тенденции на рынке ecommerce — опыт IT-компании Хорошоп

Переход на удаленку и положительные тенденции на рынке ecommerce — опыт IT-компании Хорошоп О тенденциях на рынке ecommerce и переходе Хорошоп на удалёнку....

10 09 2022 16:12:27

Правила хорошего тона при создании Google Презентаций

Правила хорошего тона при создании Google Презентаций Как сделать красиво. Алгоритм подготовки красивых и понятных презентаций, рекомендации и полезные ссылки, а также простые правила хорошего тона в дизайне Google Презентаций. Узнать больше и сделать свою презентацию эффективнее!...

09 09 2022 3:13:28

20 ошибок при запуске рекламы в myTarget, из-за которых вы сливаете бюджет

Чек-лист для РРС-специалистов. Всегда быстрее учиться на опыте других людей, а не набивать шишки самостоятельно. А также советы, как исправить рекламные кампании. Обо всем читайте в этой статье!...

08 09 2022 16:21:54

Очистка Twitter от ботов и спаммеров

Очистка Twitter от ботов и спаммеров Чтобы раскрутить себя в Твиттер иногда нужно чистить списки фолловеров и это намного проще, чем кажется :)...

07 09 2022 12:29:39

Сколько стоил клик в Google Ads в Украине в первом квартале 2021 года — исследование Netpeak

Данные по 22,4 миллионам кликов в 46 тематиках и 392 населенных пунктах страны — собрана статистика исключительно по проектам агентства Netpeak. Узнать больше!...

06 09 2022 9:37:17

Сколько стоил клик в Google Ads и Facebook в Украине в третьем квартале 2017

Сколько стоил клик в Google Ads и Facebook в Украине в третьем квартале 2017 Данные по более 26 млн кликов в 23 тематиках и 402 городах Украины...

05 09 2022 20:35:18

Что такое CTA: как сформировать эффективный призыв к действию

Основная цель CTA — помочь посетителю принять решение о покупке, скачивании, регистрации или подписке...

04 09 2022 3:44:14

Какие фишки я беру у конкурентов — дневник оптимизатора

Какие фишки я беру у конкурентов — дневник оптимизатора Заимствуете лучшее, коллекционируйте идеи и не откладывайте тестирование фишек в долгий ящик...

03 09 2022 20:57:52

6 эффективных приемов работы в Директ Коммaндере

6 эффективных приемов работы в Директ Коммaндере Быстрые ссылки и другие советы на тему того, как эффективно работать в Директ Коммaндере....

02 09 2022 4:54:45

11 вопросов перед заказом коллтрекинга

11 вопросов перед заказом коллтрекинга Какие типы звонков отслеживаются? Есть ли интеграция с Google ***ytics? Существуют ли в выбранном сервисе или на платформе инструменты интеграции с другими системами? Больше вопросов и ответов на них — в статье....

01 09 2022 17:36:53

Инструменты для парсинга в работе SEO-специалиста

Инструменты для парсинга в работе SEO-специалиста Парсинг сайтов: как избавиться от головной боли и сэкономить сотни часов рутинного труда...

31 08 2022 20:35:40

От хорошего к великому

От хорошего к великому Большой проект Джима Коллинза и его комaнды. Одна из лучших книг в нашей библиотеке. Всем рекомендуется к прочтению!...

30 08 2022 6:26:36

Как мы снизили стоимость лида для клининга ковров в Эмиратах на 60%

Как мы снизили стоимость лида для клининга ковров в Эмиратах на 60% Услуга уровня элит-класса в конкурентной нише и не в самом простом для продвижения регионе. Рассказываем, как привели целевой трафик по минимальной цене. Узнать!...

29 08 2022 4:48:50

Что такое PageRank страницы сайта и как его узнать

Что такое PageRank страницы сайта и как его узнать Алгоритм ссылочного ранжирования, который показывает ее значимость, в частности, для поисковиков. Важность показателя PageRank оспаривают, но до сих пор считают. Читать!...

28 08 2022 14:37:59

Исследование — сколько стоил клик в Яндекс.Директ в Казахстане во втором квартале 2021 года

Исследование — сколько стоил клик в Яндекс.Директ в Казахстане во втором квартале 2021 года Используйте эти данные в составлении медиапланов. Зная стоимость клика в тематике или регионе, коэффициент конверсии на сайте, вы можете оценить объем инвестиций в рекламу и прогнозировать стоимость конверсии. Читать дальше!...

27 08 2022 17:37:26

Дублирование контента на сайтах, ориентированных на разные страны

Дублирование контента на сайтах, ориентированных на разные страны Дублирование контента на разных сайтах, ориентированных на рынки разных стран, например, на публику Канады...

26 08 2022 22:24:36

Миллион сеансов в месяц на AMP-страницы в E-commerce

Миллион сеансов в месяц на AMP-страницы в E-commerce Как Bigl.ua внедрили AMP и остались очень довольны результатом....

25 08 2022 14:36:25

Netpeak + RadASO = Netpeak RadASO. Мы выходим на рынок комплексного продвижения мобильных приложений

Netpeak + RadASO = Netpeak RadASO. Мы выходим на рынок комплексного продвижения мобильных приложений Агентство Netpeak закрыло сделку по покупке агентства мобильного маркетинга Радомира Новковича RadASO....

24 08 2022 17:11:19

Что такое Netpeak Group? Все, что нужно знать

Компании и продукты, социальные инициативы, главные проекты и миссия группы. Разложили все о Netpeak Group по полочкам в новом посте....

23 08 2022 20:33:30

40+ сервисов для работы с текстом — для копирайтеров, редакторов и других создателей контента

40+ сервисов для работы с текстом — для копирайтеров, редакторов и других создателей контента Подборка онлайн-платформ и программ для работы с текстом и изображениями....

22 08 2022 17:52:26

Как мы сделали инструмент веб-аналитики для сайта Ecommerce

Как мы сделали инструмент веб-аналитики для сайта Ecommerce Зачем амбициозным онлайн-проектам индивидуальные инструменты веб-аналитики....

21 08 2022 14:43:45

Лучшие программы для исправления орфографических ошибок

Лучшие программы для исправления орфографических ошибок Исправление ошибок в тексте возможно с помощью онлайн-инструментов и стационарных программ...

20 08 2022 21:52:55

Первая помощь в офисе — как вести себя в нештатных ситуациях

Первая помощь в офисе — как вести себя в нештатных ситуациях Человеку стало плохо, он теряет сознание. Те, кто рядом, хотят помочь, но не знают, как это сделать. Давайте разбираться....

19 08 2022 4:15:47

SEO-среда: отcлеживание целей и настройка событий

SEO-среда: отcлеживание целей и настройка событий Настройка целей в Google ***ytics, а также отслеживание событий....

18 08 2022 8:44:53

Размеры картинок для социальных сетей: Facebook, ВК, Twitter, Instagram, YouTube, Pinterest, LinkedIn, Tumblr, OK

Пост постоянно обновляется актуальными данными о размерах картинок...

17 08 2022 9:45:27

Репутация за деньги: откровения скупщика фейковых фолловеров

Раньше покупка фолловеров, лайков, репостов строго осуждалась. Сегодня это обычное дело. Всё больше сервисов предлагают по приемлемой цене купить репутацию в соцсетях: от лайков в Instagram до фолловеров в твиттере. Покупка фолловеров аукнется мне в будущ...

16 08 2022 23:47:21

Кейс по продвижению интернет-магазина медицинских товаров: ROMI 32%

Кейс по продвижению интернет-магазина медицинских товаров: ROMI 32% Продвигаем медицинский проект. Кроме цифр рассказываем, что и как делали...

15 08 2022 18:58:56

Сeкc и эpoтика, магия, тренер-олень, и даже ребус! Апрельская реклама с блоком 18+

Чем шокировала, радовала и удивляла реклама в социальных сетях и контекстная в Google в апреле 2021 года...

14 08 2022 7:47:59

Chrome Dev Tools: 7 фишек для SEO анализа в инструментах разработчика Chrome

Chrome Dev Tools: 7 фишек для SEO анализа в инструментах разработчика Chrome Какие возможности дает Chrome DevTools для SEO-оптимизации...

13 08 2022 11:59:54

Как вернуть органический трафик после неправильного переноса сайта

Как вернуть органический трафик после неправильного переноса сайта Обидно терять сохраненные достижения. Почему падает трафик из поисковых систем и как это исправить...

12 08 2022 20:56:48

Исследование о влиянии отзывов в интернете на решение о покупке

Бизнесу следует позаботиться о том, чтобы представить отзывы на всех площадках (как минимум на тех, которые есть на трех страницах выдачи), где только может искать информацию пользователь. Узнать больше!...

11 08 2022 6:59:42

Сколько стоил клик в Google Ads в первом квартале 2017

Сколько стоил клик в Google Ads в первом квартале 2017 Анализ цены за клик в 25 тематиках и 852 городах Украины, России, Казахстана, Болгарии...

10 08 2022 20:31:56

Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::