Как бороться с битыми ссылками > NetPeak - Независимость и осознанность
NetPeak Biz Tech    


Как бороться с битыми ссылками

Как бороться с битыми ссылками

< >

Как оптимизировать страницу 404 В прошлый раз мы обсудили, как качественно подготовить страницу 404 для пользователей и поисковых систем. Напомню, в некоторых случаях появление таких страниц вполне объяснимо. Но большое количество 404-страниц и ссылок на них может негативно сказаться на ранжировании сайта в поисковых системах.

Битые ссылки — это ссылки, которые ведут на страницы с сообщением «Ошибка 404 Not Found» (Не найдено). Бывают внешние и внутренние битые ссылки. Первые ведут на другие ресурсы, вторые — существуют в пределах одного сайта.

Зачем возиться с битыми ссылками?

Почему много битых ссылок — это плохо? Давайте рассмотрим подробно. 

Во-первых, ухудшаются поведенческие факторы. Пользователь ожидает увидеть полезный контент, а попадает на несуществующую страницу. Он покидает ваш сайт и начинает поиск снова. Таким образом, повышается показатель отказов, снижается время взаимодействия с сайтом. В результате — негативный пользовательский опыт.

Во-вторых, мусорные ссылки влияют на ранжирование поисковыми системами. Сайт теряет позиции и снижается его видимость в поисковых системах.

Почему так происходит? Когда поисковые роботы часто попадают на несуществующие страницы, они воспринимают ресурс, как некачественный. Возможно, устаревший и бесполезный для пользователя. Также наличие битых ссылок влияет на расход краулингового бюджета. Ведь роботы выполняют бессмысленную работу: переходят по битым ссылкам, не попадая на действительно полезные страницы сайта. Итог — сайт хуже сканируется и индексируется.

Кроме того, при наличии внешних битых можно потерять трафик и недополучить ссылочный вес — он будет утекать в никуда.

Откуда на сайте битые ссылки?

Существует много причин, по которым на сайте появляются зловредные ссылки. Но чаще всего это происходит в таких случаях:

  1. Реорганизация сайта. Изменение структуры сайта или переезд на другой домен, без настройки постраничных 301 редиректов. Например, переезд сайта с HTTP на HTTPS протокол http://site.com и https://site.com — разные сайты.
  2. Удаление части сайта или отдельных страниц. При этом ссылки на страницы остались. Очень популярно среди интернет-магазинов — когда товара нет в наличии или он снят с производства, его удаляют.
  3. Опечатки в URL при добавлении ссылки. Например, структура URL-адресов подразумевает в конце слеш, а на сайте добавлена ссылка без слеша, при этом не настроен 301-й редирект.

Как найти битые ссылки?

Для поиска таких ссылок предлагаю воспользоваться следующими инструментами:

  1. Google Search Console. Необходимо выбрать «Сканирование» — «Ошибки сканирования».

Здесь можно увидеть полный отчет о найденных страницах с кодом ответа «404 Not Found».

  1. Яндекс.Вебмастер. Необходимо выбрать «Индексирование» —  «Статистика обхода»:

Далее, с помощью фильтра сортируем страницы, выбрав HTTP-код «404 Not Found».

  1. Google ***ytics — для поиска страниц, с хаpaктерным для 404-ошибки названием в Title: «Страница не найдена», «Page not found», «Ошибка 404» и так далее. Чтобы найти такие страницы, узнайте, как оформлен Title для 404 страницы на вашем сайте. Например:

Далее в Google ***ytics действуйте, как указано на скриншоте:

Учтите, этот способ не сработает, если у вас пустой Title для 404 страницы или он ничем не отличается от существующих страниц.

Если Title не оформлен, найти несуществующие страницы на сайте можно другим способом.

Выгружаем все страницы, которые приносят трафик в Google ***ytics (берем период не менее года).

Список выгруженных страниц нужно проверить на код ответа сервера. Для этого рекомендую воспользоваться сервисом Netpeak Checker — он быстро справляется с задачей и не вызывает сложностей в работе.

  1. Ahrefs. С помощью данного сервиса также можно отследить битые ссылки — они образуются, потому что внешние ресурсы ссылаются на несуществующие страницы сайта. Для этого смотрим отчет «Broken Backlinks» и нажимаем «Export».

  1. Netpeak Spider. Удобный сервис, чтобы найти битые ссылки внутри сайта. Как начать поиск ошибок: в строку поиска прописываем домен сайта и нажимаем на «Старт».

После сканирования выбираем отчет «Битые ссылки»слева откроется таблица, которая содержит информацию о битых ссылках на сайте.

Netpeak Spider не только находит битые ссылки, но и определяет, на какой именно странице сайта они находятся и с каким анкором. Это облегчает исправление ошибок.

Как работает: выбираем «Отчет об ошибке» — «Входящие ссылки»

  1. Web Archive. Сервис, с помощью которого можно выгрузить все страницы, которые есть в архиве и проверить их код ответа.

Для этого нужно зайти в https://archive.org/index.php и ввести домен сайта.

В Web Archive откройте любую архивную страницу и посмотрите, как выглядит URL-адрес в строке.

Далее с помощью Netpeak Spider необходимо спарсить все страницы сайта из веб-архива. Для этого следуйте подсказкам:

  1. Чтобы начать сканирование, задайте стартовую страницу.
  2. В Web Archive архивные страницы отображаются по такому типу URL https://web.archive.org/web/[дата-и-время]/[страницы сайта]. Через регулярные выражения можно задать правила, с помощью которых Netpeak Spider достанет из веб-архива страницы сайта:
  • https://web.archive.org/web/.+/https://site.com/ — найдет главную страницу;
  • https://web.archive.org/web/.+/https://site.com/.+ — найдет все остальные страницы сайта.
  1. На третьем шаге начинаем сканирование.

В результате можно получить все найденные страницы в Web Archive

Далее выделите URL архивных страниц. Для этого откройте отчет с выгруженными страницами в Netpeak Spider и сделайте следующее:

Для того, чтобы выделить URL-адреса страниц своего сайта необходимо:

  • указать регулярное выражение (№ 1) — это поможет выделить часть URL (№5) ;
  • в поле «Заменить на» (№2) оставить строку пустой;
  • в чек-листе (№3) выбрать первый и третий пункты;
  • кликнуть на «Заменить все» (№4). 

В результате получаем конечные URL страниц сайта, которые находятся в Web Archive.

Затем проверьте код ответа сервера этих страниц (следуйте всему, что описано в третьем пункте).

Как исправить ошибки?

После того, как вы нашли битые ссылки, сформируйте список страниц с 404-м кодом и проанализируйте природу появления таких ошибок. Чтобы исправить битые ссылки, рекомендую:

  1. Заменить битые ссылки на актуальные. Для этого пройдитесь по списку с битыми ссылками и внимательно изучите его. Если на сайте настроен ЧПУ (Человеко-понятный URL), то уже по фрагменту адреса можно понять, о чем идет речь и искать похожие категории или наиболее релевантные страницы.

Например, есть список страниц с битыми ссылками. С помощью Netpeak Spider мы нашли, где они размещены. Из ЧПУ стало понятно, что это за страницы, благодаря чему мы нашли актуальные страницы сайта. Как оказалось, дело в опечатке в URL.

Также для поиска актуальных страниц можно воспользоваться сервисом Ahrefs. Если есть внешние ссылки на 404 страницу, по анкору можно догадаться о примерном содержании искомой страницы.

То есть наша задача — отыскать наиболее подходящие или релевантные страницы сайта вручную или с помощью внутреннего поиска на сайте и заменить битую ссылку на актуальную.

Способ требует много ручной работы и временных затрат, но вы обязательно получите положительный эффект.

  1. Настроить постраничный 301-й редирект с неактуальной страницы на актуальную или наиболее релевантную новую страницу сайта. Например, при изменении уровня вложенности страниц, изменения названия категории или изменения структуры сайта.

Пример:

При этом помните, злоупотрeбление внутренними редиректами (наличие ссылок, которые ведут на другие внутренние страницы сайта с 30X кодом ответа сервера) может повлечь негативные последствия для сайта. Так что лучше предоставлять пользователям актуальные ссылки без переадресаций.

  1. Удалить битые ссылки — способ применим, если актуальных или похожих по содержанию страниц не найдено. Таким образом нужно избавиться от мусорных ссылок.
  1. Проанализировать посещаемость страниц с 404-м кодом ответа сервера, выгруженных через Google ***ytics. Если есть страницы, которые приносили или приносят трафик, может лучше их восстановить?

Выводы

В некоторых случаях, битые ссылки могут навредить поисковому продвижению сайта, поэтому нужно регулярно искать и устранять «проблемные места». Что важно запомнить:

  1. Большое количество битых ссылок негативно сказывается на доверии к сайту у пользователей и поисковых систем, а также может повлечь потерю трафика и уменьшить ссылочную массу.
  2. Есть множество доступных способов поиска мусорных ссылок — не стоит ими пренебрегать и желательно использовать в комплексе.
  3. Как лучше бороться с битыми ссылками — заменить их на актуальные и полезные для пользователей ссылки.



Комментарии:

Что объединяет в себе понятие ремаркетинг

Что объединяет в себе понятие ремаркетинг Подробнейшая статья об эффективном использовании ремаркетинга. Мотаем на ус!...

28 05 2023 16:51:41

10 ошибок молодого бизнеса в Instagram

10 ошибок молодого бизнеса в Instagram Как не нужно делать, запуская свой профиль и таргетированную рекламу в Instagram...

27 05 2023 1:23:24

11 функций Google Таблиц в помощь SEO-специалистам

11 функций Google Таблиц в помощь SEO-специалистам Нужно разбить ячейку или составить график? Если вы знаете функции, таблицы гугл могут пpaктически заменить отдельные сервисы или дополнения...

26 05 2023 10:59:49

Google по Монтессори, или Разворот от каверзных интервью

Google по Монтессори, или Разворот от каверзных интервью Правильно задать вопрос или сфоримулировать ответ на собеседовании это еще далеко не все. Рецензия на книгу Ласло Бока «Работа рулит»...

25 05 2023 9:27:39

Обзор Netpeak Spider 2.1: классификация ошибок, выбор параметров, новая логика работы с результатами

Обзор Netpeak Spider 2.1: классификация ошибок, выбор параметров, новая логика работы с результатами Встречайте Netpeak Spider 2.1 — программу, предназначенную для обнаружения и уничтожения ошибок внутренней оптимизации сайта. Мы хотим, чтобы 4 августа 2016 года запомнилось вам как «День кроулинга»!...

24 05 2023 2:43:59

Как бесплатно защитить книгу от копирования — инструкция для писателей

Как бесплатно защитить книгу от копирования — инструкция для писателей Как обезопасить себя от интернет-пиратов и защитить авторское право онлайн....

23 05 2023 6:19:15

Как не сломать работу автостратегий Google, когда на сайте произошел сбой — используем «Исключение данных»

Как не сломать работу автостратегий Google, когда на сайте произошел сбой — используем «Исключение данных» Качество передаваемых данных напрямую отражается на качестве решений, принимаемых для бизнеса. Как защититься от таких ошибок?...

22 05 2023 10:29:17

Сравнение First Click, Last Click и Funnel Based моделей атрибуции — кейс Serpstat

Сравним разные модели атрибуции с точки зрения оценки финансовых показателей проекта...

21 05 2023 9:16:40

Продвижение детской костюмерной Colombina.ua — рост заявок на 227% в сезон

Кейс детской костюмерной Colombina.ua — как продвигать проект с ярко выраженной сезонностью....

20 05 2023 16:24:54

Функции вычисляемых полей Google Data Studio

Всё, что вы хотели знать о функциях вычисляемых полей, но боялись спросить....

19 05 2023 22:51:39

Особенности регионального продвижения сайтов

Особенности регионального продвижения сайтов SEO-специалисты используют создание поддоменов, подпапок или отдельных доменов...

18 05 2023 3:59:58

Как использовать регулярные выражения в Google ***ytics и Google Tag Manager

Как использовать регулярные выражения в Google ***ytics и Google Tag Manager Как поможет Regex Engines в работе с Google ***ytics и преимущества использования Regex в Диспетчере тегов Google. Узнать больше....

17 05 2023 5:48:26

Google показывает не все результаты поиска

Google показывает не все результаты поиска Сколько страниц на самом деле показывает и может перевести поисковик Google?...

16 05 2023 18:49:54

Кейс: как провести анализ конкурентов с помощью SimilarWeb

Кейс: как провести анализ конкурентов с помощью SimilarWeb Определение, исследование и проверка конкурентов в Similarweb — первый шаг перед запуском и масштабированием проекта...

15 05 2023 11:12:35

Как не слить бюджет при запуске контекстной рекламы

Как не слить бюджет при запуске контекстной рекламы Ошибки, которые допускают новички и теряют деньги, трафик, клиентов....

14 05 2023 6:29:32

Как работать с автостратегиями Google Ads

Как работать с автостратегиями Google Ads И научиться делать свою рекламу прибыльной. Читайте про типы автостратегий и способы их оптимизации....

13 05 2023 3:39:10

Как превратиться в робота и повысить продуктивность — советы для CEO

Как превратиться в робота и повысить продуктивность — советы для CEO Нет прокрастинации! Советы для личной эффективности от руководителя двух стартапов...

12 05 2023 0:56:30

Как достичь роста дохода на 172% за 10 месяцев, когда среди конкурентов — аптеки. SEO для Amrita

Как достичь роста дохода на 172% за 10 месяцев, когда среди конкурентов — аптеки. SEO для Amrita Продвижение монобренда: особенности, трудности, подводные камни. Ниша здоровья и красоты....

11 05 2023 18:58:32

Как настроить ретаргетинг для рекламы в Instagram и Facebook

Как настроить ретаргетинг для рекламы в Instagram и Facebook Понятная инструкция для SMM-специалистов для тех, кто экспериментирует с настройками аудиторий в рекламных кампаниях. Вы увидите, как настраивать ремаркетинг на примере Facebook. Существует 10 типов индивидуализированных аудиторий в Facebook, разберем три...

10 05 2023 10:55:26

Блог Netpeak 2.0 — мы всё поменяли, и вот почему

Блог Netpeak 2.0 — мы всё поменяли, и вот почему Блог на новом движке и с новым дизайном, перетянувший в себя огромное количество постов и комментариев за Х лет своей работы...

09 05 2023 21:13:29

Как увеличить доход на 500% и не «сломать» долю рекламных расходов — кейс Беккер

Кейс, в котором мы описываем работу с одним из наших старейших клиентов (с 2014 года) и как нам пришлось изменить устоявшийся формат работы и рекламного бюджета, чтобы соответствовать реалиям 2020 года....

08 05 2023 6:26:36

Как автоматизировать PPC-отчетность с помощью языка R, Google Таблиц и Data Studio

Как автоматизировать PPC-отчетность с помощью языка R, Google Таблиц и Data Studio Новый способ автоматизации процессов при настройке аналитики больших объемов данных....

07 05 2023 0:29:58

Три уровня оптимизации рекламной кампании в Google Ads

Предположим, что оптимизация в аккаунте похожа на реальный мир и рассмотрим несколько примеров :)...

06 05 2023 4:20:36

Семь улучшений Netpeak: создаем бизнес-страницу в Instagram, на Facebook, делаем email-маркетинг и публикуем истории бизнеса

Семь улучшений Netpeak: создаем бизнес-страницу в Instagram, на Facebook, делаем email-маркетинг и публикуем истории бизнеса Настроенная бизнес-страница компании в Instagram и на Facebook помогает в продвижении товаров и услуг в интернете. Поэтому так важно сделать их seo-friendly. Читать!...

05 05 2023 14:42:50

Запорожский козак на динозавре, реклама наркотиков в Instagram и «курка» вместо SPAM — мартовская реклама в соцсетях

Запорожский козак на динозавре, реклама наркотиков в Instagram и «курка» вместо SPAM — мартовская реклама в соцсетях Чем радовала, смущала и шокировала реклама в социальных сетях в марте 2021-го...

04 05 2023 21:27:21

На что ориентироваться при составлении бюджета на рекламу

На что ориентироваться при составлении бюджета на рекламу Что делать перед составлением рекламного бюджета — инструкция для предпринимателей...

03 05 2023 5:49:16

Как мы нашли модель аналитики для SaaS-проекта UniSender.com

Как мы нашли модель аналитики для SaaS-проекта UniSender.com Что делать, если нет четкой модели оценки эффективности контекстной рекламы?...

02 05 2023 18:53:53

Библиотеки JavaScript для Google ***ytics: в чем разница между ***ytics.js, gtag.js и ga.js

Библиотеки JavaScript для Google ***ytics: в чем разница между ***ytics.js, gtag.js и ga.js Почему стоит внимательно относиться к выбору библиотеки JavaScript....

01 05 2023 17:49:18

Кейс по контекстной рекламе сайта купальников и нижнего белья марки Victoria’s Secret: ROMI 255%

Кейс по контекстной рекламе сайта купальников и нижнего белья марки Victoria’s Secret: ROMI 255% Наибольшее количество онлайн транзакций было получено по брендовым запросам женского белья...

30 04 2023 9:22:21

SEO-среда: отcлеживание целей и настройка событий

SEO-среда: отcлеживание целей и настройка событий Настройка целей в Google ***ytics, а также отслеживание событий....

29 04 2023 4:23:33

Азы типографики — нескучно о шрифтах

Азы типографики — нескучно о шрифтах Нужно подобрать красивый шрифт? Готический или народный? Стандартный или фирменный? Как выбрать — рассказывает профессионал...

28 04 2023 0:53:49

Кейс «Мой Город»: как мы за месяц подняли трафик из Facebook на 86%

Цель — трафик facebook. Делимся кейсом проекта «Мой город»....

27 04 2023 1:47:44

Как настроить умную кампанию в контекстно-медийной сети Google

Готовы ли вы доверить основные настройки кампании автоматическим алгоритмам?...

26 04 2023 18:40:52

Главные инструменты увеличения продаж в интернет-магазине

Главные инструменты увеличения продаж в интернет-магазине Знания основных принципов конверсионности сайта, этапов воронки продаж важны для того, чтобы наладить процессы, рост продаж в любом бизнесе. Узнать больше!...

25 04 2023 16:51:33

Контекстная реклама интернет-магазина автотоваров — как снизить траты и увеличить ROMI на 772%

Контекстная реклама интернет-магазина автотоваров — как снизить траты и увеличить ROMI на 772% Изучаем на примере тестирования товарных кампаний в момент смены логотипа и ренейминга...

24 04 2023 12:26:25

Как настроить рекламу в Facebook Messenger, Instagram Direct и даже WhatsApp

Как настроить рекламу в Facebook Messenger, Instagram Direct и даже WhatsApp Что нужно знать перед запуском рекламы в мессенджерах....

23 04 2023 23:57:47

10 лучших книг о маркетинге

Это не автобиографические романы, не бесплатные учебники и не подборка книжек, чтобы скачать в epub. Это интересная топ литература о маркетинге, которую мы хотим вам посоветовать....

22 04 2023 0:31:28

Как анализировать рекламные кампании с помощью Excel и Power BI

Как анализировать рекламные кампании с помощью Excel и Power BI Расчет вероятности конверсии, быстрое и эффективное создание дашбордов, строение моделей KPI. Примеры аналитики кампаний с помощью Excel и Power BI от спикера 8P 2016 Максима Уварова....

21 04 2023 9:44:29

Как работать с Microsoft Power BI — подробное руководство

Как работать с Microsoft Power BI — подробное руководство Мануал по Microsoft Power BI — мощному инструменту для бизнес-аналитики. Освоив эту платформу, вы сможете с легкостью создавать понятные отчеты и обновлять их в режиме реального времени....

20 04 2023 23:31:37

SEO для магазина лакокрасочных и строительных материалов — как мы увеличили объем бесплатного трафика на 463%

SEO для магазина лакокрасочных и строительных материалов — как мы увеличили объем бесплатного трафика на 463% Эта история о том, как за два года комплексный подход к поисковому продвижению (SEO на этапе разработке сайта и дальнейшие действия по оптимизации) помог увеличить рост бесплатного трафика на 463% или Что делать, если SEO не приносит результаты сразу...

19 04 2023 18:46:29

Сколько стоил клик в Google Ads и Facebook в Украине во втором квартале 2019 года

Сколько стоил клик в Google Ads и Facebook в Украине во втором квартале 2019 года Данные по 24 миллионам кликов в 24 тематиках и 391 городу...

18 04 2023 11:47:37

«Металл профиль» — как мы запустили кастомный коннектор для загрузки данных из API Google ***ytics в Microsoft SQL Server

«Металл профиль» — как мы запустили кастомный коннектор для загрузки данных из API Google ***ytics в Microsoft SQL Server Узнаем расширенную информацию о посещениях сайта с помощью языка R — кейс Netpeak...

17 04 2023 23:28:39

Как создать рекламную кампанию в Bing Ads — подробное руководство

Как создать рекламную кампанию в Bing Ads — подробное руководство Инструкция о том, как создать новую кампанию в Bing Ads или импортировать существующую из Google Рекламы? Как добавить способ оплаты? Читайте о первых шагах настройки рекламы в Bing...

16 04 2023 13:41:17

7 уроков о всплывающих окнах для мобильных, которые мы выучили благодаря A/B-тестам

Выясняем, есть ли жизнь у мобильных всплывающих окон, и как их сделать правильно...

15 04 2023 1:47:15

Почему отдел продаж сидит без дела. Находим решение с помощью коллтрекинга

Почему отдел продаж сидит без дела. Находим решение с помощью коллтрекинга Отслеживаем пропущенные, анализируем входящие и делаем выводы о том, как организовать работу менеджеров....

14 04 2023 14:48:38

Кейс по продвижению детских товаров в Google Рекламе: ROMI 23%

Кейс по продвижению детских товаров в Google Рекламе: ROMI 23% Полем битвы стала тематика кроваток, игрушек и прочих детских товаров, основным оружием в бою — контекстная реклама....

13 04 2023 21:37:40

Инструменты для веб-аналитики

Инструменты для веб-аналитики Инструменты веб-мастера: что может заменить Google ***ytics?...

12 04 2023 23:53:16

Как повысить эффективность своей работы — 17 советов от тимлида Netpeak

Как повысить эффективность своей работы — 17 советов от тимлида Netpeak Как добиться эффективности и самоорганизации. Читайте о системе тимлида Netpeak Андрея Коваля....

11 04 2023 2:50:14

Примеры лучших страниц оформления заказа интернет-магазинов

Примеры лучших страниц оформления заказа интернет-магазинов Корзина интернет-магазина поможет повысить продажи, если ее функционал содержит: фото товара, кликабельное наименование товара, перечень способов оплаты. Узнать больше!...

10 04 2023 11:34:23

Discovery Ads для рекламы в YouTube и Gmail — мини кейс Intertop

Discovery Ads для рекламы в YouTube и Gmail — мини кейс Intertop Новый тип рекламных кампаний, который помогает расширить целевую аудиторию. Потенциальных покупателей можно найти среди людей не знакомых с вашим брендом....

09 04 2023 18:13:29

Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::