Как быстро найти ошибки SEO-оптимизации с помощью Netpeak Spider
Анализ ошибок SEO-оптимизации — это стандартная задача любого SEO-специалиста на протяжении всего времени работы с проектами. Чтобы сэкономить время на проверках, используя при этом минимум сервисов и ресурсов, можно быстро найти основные ошибки SEO-оптимизации с помощью Netpeak Spider. Детальнее об отчетах и настройках инструмента рассказываю на примере из своей работы.
Сканирование
Настройки следует выбирать в зависимости от целей сканирования. Например, если хотите проанализировать весь сайт или один раздел, все поддомены, а также учесть внешние ссылки вы можете дополнительно выбрать настройки 1, 2 или 3 соответственно.
Также, по необходимости можно зайти в раздел «Продвинутые» и добавить настройки по учету инструкций индексации (если вы уверены в корректной работе таких инструкций).
Какую информацию мы можем получить для анализа ошибок на сайте с помощью Netpeak Spider:
- ошибки XML карты сайта;
- настройка canonical;
- страницы с кодом ответа 4**;
- динамические URL;
- настройка 301 редиректов;
- проверить, какие страницы закрыты или какие необходимо закрыть в robots.txt;
- скорость загрузки страниц сайта;
- дубли мета-данных title, description.
Все эти данные (и даже больше) предоставляет Netpeak Spider.
Теперь переходим к параметрам анализа — можем выбрать на рабочей панели Netpeak Spider шаблон параметров «по умолчанию» (рекомендуемый разработчиками) со всеми основными параметрами для анализа и немного его подкорректировать.
Правлю относительно необходимых данных, чтобы сканировать быстрее и получать в отчетах информацию в удобном виде. Например так:
Ошибки XML-карты сайта
Почему стоит проверять ошибки XML-карты? Этот файл — помощник в индексации важных страниц сайта. Если в нем ошибки, появятся дубли страниц и на их индексацию впустую пойдет краулинговый бюджет.
Для того, чтобы проверить ошибки карты сайта, выбираем меню «Инструменты» — «Валидатор XML Sitemap». Затем вставляем ссылку на соответствующую карту сайта и нажимаем кнопку «Старт».
Появится отчет такого вида:
В моем примере критических ошибок нет, есть ошибка относительно скорости и указание на то, что ссылка на Sitemap отсутствует в robots.txt. Это легко исправить.
В случае, если ошибок нет вообще, можно сразу отправить пинг поисковым системам и уведомить, что надо прокраулить нашу карту.
Какие критические ошибки может показать нам валидатор (согласно официальной документации Standart Sitemap Protocol, всего их 34):
Из вышеперечисленных ошибок высокой критичности чаще встречаются ошибки, связанные с кодировкой не UTF-8, блокировкой сайта в robots.txt, неправильным форматом URL и размером файла.
Средней критичности — ошибка с наличием дубликатов URL и скоростью загрузки (как в примере). Но это не означает что остальные ошибки могут не появится в вашем анализе.
Проверка canonical на страницах сайта
Основная и главная функция rel=\"canonical\" — возможность избежать появления дублей контента на сайте и копирования его на сторонние ресурсы.
Напомним, мы настраиваем каноникал на страницах:
- фильтрации/сортировки — в таком случае атрибут rel=\"canonical\" должен вести на эту же страницу без атрибутов фильтрации в URL;
-
Оптимизация страниц пагинации интернет-магазина — подробная инструкция
пагинации — в данном случае на всех страницах пагинации каноническая ссылка может быть указана на страницу «page all», если этой страницы нет, то каноникал настраиваем на сами страницы пагинации или на первую страницу пагинации; - страницы печати — в данном случае основная версия страницы является канонической;
- с UTM-метками — каноникал на страницы без UTM меток.
Какие ошибки могут возникать при добавлении атрибута rel=\"canonical\"?
- На странице указано больше, чем одна каноническая ссылка.
- Каноническая страница закрыта от индексации через мета тег robots или noindex.
- Цепочка канонических URL, когда на странице URL 1 тег rel=\"canonical\" ссылается на URL 2, который в свою очередь содержит такой же канонический тег на URL 3. Данный отчет можно увидеть через панель «Экспорт» — «Отчёты по ошибкам» — «Цепочки канонических URL».
Чтобы исправить, каноникал для страниц сайта необходимо настраивать на адреса страниц, которые в свою очередь не ссылаются в этом теге или заголовке на другие URL.
- Одинаковые канонические URL (необходимо убедится, что одинаковый каноникал настроен для похожих по содержанию и контенту страниц).
Чтобы проверить канонические ссылки, следует выбрать соответствующий пункт на боковой панели:
Для более полного отчета и глубинной работы с каноническими ссылками, также можно открыть отчет через меню «База данных» (пункт «canonical»).
Далее откроется подробный отчет с данными кода ответа текущей и канонической ссылки, а также информацией о закрытии целевого URL от индексации:
Так мы получаем максимально доступный, понятный отчет который можно использовать для постановки технического задания на программистов.
Страницы с кодом ответа 404
Пользователи не любят такие страницы и могут быстро уйти с сайта. В лучшем случае, вернуться на предыдущую страницу или главную. Когда человек покидает сайт, это негативно влияет на поведенческие факторы, которые учитываются при ранжировании сайта.
Что делать, если на сайте найдены страницы с 404 кодом ответа сервера?
- Проверяем, что это за страницы и есть ли на них входящие ссылки, через которые может зайти пользователь или поисковой робот.
- Если это удаленные страницы сайта, настроить код ответа 410, чтобы убрать страницы из индекса.
- Если был переезд или изменены URL страниц, исправить переадресацию с помощью создания карты редиректов (используйте 301 редирект со страниц с ошибками на правильные страницы).
«Проблемные» страницы можем найти в отчетах раздела «Битые страницы», «4хх ошибки» и «5хх ошибки» соответственно.
Следующий шаг после просмотра таких отчетов — узнать входящие ссылки на данные страницы, чтобы определить, нужно ли настраивать редирект, и возможно ли составить корректное и полное техническое задание для программиста.
Или так:
Страницы, закрытые от индексации
При ежемecячном анализе, не лишним будет периодически проверять, какие страницы сайта скрыты от индексации с помощью robots.txt, meta-robots и X-robots-tag. Вдруг важные категории и страницы сайта случайно скрыли или наоборот ненужные страницы стали доступны для индекса.
Если говорить про страницы, которые точно не должны попадать в индекс, то это:
- корзина (для интернет-магазинов, доставок и так далее) ;
- личный кабинет;
- сортировка;
- страницы пересечения фильтров (в зависимости от тематики сайта).
В результате сканирования, Spider предоставит список страниц, который можно отфильтровать по значениям и принять необходимые меры (то есть открыть или закрыть определенные страницы сайта).
А также с помощью отчетов:
Теперь остается составить техническое задание для программиста и исправить все ошибки.
Проверка 301 редиректов
Существует много причин, по которым на сайте необходимо использовать 301 редирект. Например:
- склейка домена;
- избавление от дублей главной страницы и слеша в конце URL;
- переезд на новый домен;
- смена структуры URL на сайте;
- частные случаи при удалении и исправлении битых страниц на сайте.
При настройке 301 редиректов, возникают подобные ошибки как и с добавлением rel= “canonical” на сайт:
- страницы не должны вести на битые или закрытые от индексации страницы;
- нерелевантные страницы редиректа;
- многошаговость редиректа (когда редирект ведет на страницу с редиректом).
Далее открывается отчет с данными о коде ответа на страницах, уровень вложенности и закрытые от индексации страницы:
Также для дальнейшей работы можно сразу сделать выгрузку специального отчета в готовый документ. Он более полный и содержит ссылку на страницу с редиректом.
После представленных данных можно также составить корректную карту редиректов и сделать реализацию, которая бы уменьшила количество внутренних 301, 302 редиректов на сайте.
Дубли мета-данных title, description
Мета-данные title, description в целом относятся к контенту сайта, и появление таких дублей может негативно отражаться на SEO-оптимизации сайта.
Если на сайте дублируются title или description, поисковый робот может предположить, что такие страницы сайта — дубли. В дальнейшем из-за этого можно потерять позиции в выдаче. Дело в том, что робот не сможет определить, какая страница приоритетней для показа пользователям. Отсутствующие и незаполненные поля, блоки (везде, где нужна информация) также не дают полной картины пользователю, какая именно информация содержится на странице.
В Spider существуют специальные отчеты для этого.
Для решения ошибки существует два варианта:
- Для похожих страниц категорий, фильтров, можно прописать шаблон генерации мета-тегов.
- Вероятнее всего будут и страницы, для которых шаблон может не сработать — здесь не обойтись без ручных мета-данных.
Данные в Spider подаются в виде таблицы с удобным представлением. Ее можно экспортировать и внести необходимые изменения, на основе этой таблицы удобно составить техническое задание для исправления ошибки.
С помощью инструмента также можно проверить, как внедрили шаблоны формирования мета-данных. Каким образом? Просканировав раздел или категорию, для которого применялись шаблоны.
Скорость загрузки страниц сайта
Один из важных показатель качества и оптимизации сайта — скорость загрузки. Сюда входит время ответа сервера, построения DOM и так далее.
Важно: чем сайт быстрее, тем лучше. Если данный показатель больше секунды, вы уже рискуете потерять позиции, а посетители скорее всего покинут сайт, не дождавшись загрузки.
Оптимизация скорости сайта: как уменьшить время ответа сервера Проверку скорости загрузки полезно осуществлять как в начале работы с проектом, так и ежемecячно — чтобы контролировать ситуацию и принимать своевременные меры, чтобы
Напомним, рекомендуемое оптимальное значение времени ответа сервера — 200 мс.
Данные из Netpeak Spider представлены в отчете «Большое время ответа сервера» в виде списка. Для удобства в настройках сканирования на вкладке «Ограничения» можно задать своё значение для времени ответа сервера, которое будет считаться ошибкой. В Netpeak Spider данное значение по умолчанию равно 500 мс.
Динамические URL
Вопрос о негативном или благоприятном влиянии динамических страниц на сайте до сих пор открыт. Часть SEO-специалистов, чтобы не дублировать контент, и не терять CTR страниц, предпочитают псевдостатистические URL. Другие не видят проблем в таких страницах и ничего с этим не делает.
Основная загвоздка с динамическими URL — они генерируются автоматически и вероятность дублирования контента становится выше. Поэтому так актуально своевременно обнаружить и проанализировать такие страницы.
Основное отличие динамических URL — наличие в нем знаков «?», «&» или «=». Соответственно, мы можем отфильтровать и проанализировать данный тип страниц. Выбираем «Настроить сегмент», далее добавляем соответствующие условия.
Или с помощью регулярного выражения:
После этого получаем список динамических URL и можем их проанализировать, нам важно:
- если это страницы пагинации — проверить, чтобы они были канонические, с настроенным корректно каноникал;
- если это не страницы пагинации, необходимо проверить данные страницы на дубль контента. Если его нет, настроить каноникал на эти же страницы без get-параметра.
Выводы
Анализ сайта будь-то на первом этапе работы с проектом, или периодические проверки внедрения рекомендаций — важный пункт SEO-оптимизации. Без подходящего инструмента комплексного анализа на проведение проверки будет уходить большое количество времени.
Netpeak Spider — многофункциональный инструмент SEO-специалиста на всех этапах работы. Кроме полного анализа можно также сохранить время и ресурсы для проверки типичных задач реализованных клиентом на сайте. А сохраненное время SEO-специалист может использовать на дополнительные креативные задачи и решения.
Комментарии:
Настроенная бизнес-страница компании в Instagram и на Facebook помогает в продвижении товаров и услуг в интернете. Поэтому так важно сделать их seo-friendly. Читать!...
26 04 2024 4:49:59
Информация поможет вам в составлении медиапланов. Зная стоимость клика в вашей тематике или регионе, и коэффициент конверсии на вашем сайте, можно оценить объем необходимых инвестиций в рекламу и прогнозировать стоимость конверсии. Узнать больше!...
25 04 2024 9:49:55
Счетчик Яндекс.Метрики: создание и установка кода, важные настройки....
24 04 2024 23:51:14
Case по продвижению в Instagram. В любой непонятной ситуации — масштабируйте рекламные инструменты...
23 04 2024 8:13:21
Чтобы эффективно продвигать товар или услугу в Instagram, необходимо повысить охват целевой аудитории. Одно из возможных решений — привлечение блогеров. Казалось бы, достаточно предложить платное размещение рекламы…...
22 04 2024 2:45:16
10 шагов к я-бренду из книги «Я-бренд. Формула успеха». Марк вырастил свой бренд до размеров торгового бизнеса с объемами продаж в миллиарды долларов. Читайте, здесь есть и сама формула, подходящая для товара, сайта или торговли машинами...
21 04 2024 5:14:26
Как бесплатно пользоваться преимуществами, особенностями и дополнительными инструментами сервиса...
20 04 2024 13:38:35
14 пунктов, которые помогут вам лучше изучить свой бизнес и подготовить эффективную SMM-стратегию...
19 04 2024 18:16:24
Как Bigl.ua внедрили AMP и остались очень довольны результатом....
18 04 2024 12:57:12
Регулярный мониторинг позиций необходим для отслеживания истории их изменений после внедрения новых ключевых слов и других работ над сайтом...
17 04 2024 22:35:48
Чтобы и клиенту не стыдно было показать и свои ожидания не обмануть....
16 04 2024 2:18:36
Открытие проверенных действий по увеличению продаж...
15 04 2024 10:22:18
Как Blizzard реализует тимбилдинг, мотивирует сотрудников и превращает офис в музей...
14 04 2024 0:56:13
Как увеличить количество транзакциий, сохранив прибыльность кампании в РСЯ?...
13 04 2024 0:57:40
Как найти сетку сайтов конкурентов — рассказываем о популярных методах и секретных фишках. Бонус — инструкция по выявлению PBN конкурентов. Читать дальше!...
12 04 2024 16:49:59
Пример, как 4000+ гривен превращаются в 45000+ гривен. Ниша интернет-магазинов, да еще и бытовой техники уже давно является высококонкурентной. Но при правильном продвижении даже новичок может добиться результатов....
11 04 2024 12:59:37
Положительная динамика с первых месяцев работы....
10 04 2024 8:54:25
Facebook buttons. Пора поделиться самым волнующим вопросом 2011-го года...
09 04 2024 8:46:34
Мы решили узнать, как дорого обходятся рекламодателям клики по объявлениям в разных странах и тематиках, чтобы читателям блога было удобнее планировать бюджет на рекламные кампании....
08 04 2024 20:13:17
Происходит все большая автоматизация рекламы от Google. И это хорошо....
07 04 2024 2:12:12
Сторителлинг — это способ рассказывать истории, его цель — дать возможность читателю или зрителю почувствовать себя героем этой истории,...
06 04 2024 15:59:44
В третьем квартале Netpeak внедрил множество крутых улучшений. Мы подробно расскажем о семи самых интересных новостях....
05 04 2024 21:13:15
Что делать, если вы специально или нет попали под фильтр: руководство от выявления до спасения...
04 04 2024 17:12:58
Собирательный опыт сотрудников Netpeak. Мы изучали много всего в стиле «купить парковку в аэропорту Гатвика в Лондоне» и тому подобное. Но все, кроме описанного ниже, показалось сложным и ненадежным. Поэтому рассказываем про спокойные варианты....
03 04 2024 3:24:26
Начинаем серию постов в режиме реалити-шоу о подробностях продвижения крупного игрока бизнеса email- и sms-рассылок — компании UniSender....
02 04 2024 23:24:54
Руководитель отдела HR, Ольга Пачесная, написала пост о главном — людях, которые выбрали работу в Netpeak....
01 04 2024 12:32:51
От идеи для стартапа до плана развития и масштабирования бизнеса. Познавательные, полезные каналы, которые помогут реализовать смелые бизнес-цели. Узнать больше!...
31 03 2024 2:23:26
Важный вопрос, если вы рассчитываете на вирусный эффект своих рекламных идей....
30 03 2024 11:43:31
Определяем, кто из mail подписчиков предан вашему бренду по-настоящему....
29 03 2024 14:32:44
Что нужно знать перед запуском рекламы в мессенджерах....
28 03 2024 11:20:46
Аромамаркетинг. Почему В Нью-Йоркских магазинах Samsung пахнет медовой дыней, в British Airways — луговыми травами. Что мы знаем о восприятии нами сенсорной информации, а конкретно — ароматов. Читать дальше!...
27 03 2024 12:50:18
Как понять, что проект нуждается в новых текстах и сделать читателя счастливым...
26 03 2024 21:33:49
Короткий интересный клип в Instagram — фишка маркетингового сезона 2015...
25 03 2024 15:46:37
Пост о том, как и когда тратит деньги американский и украинский покупатель...
24 03 2024 20:56:16
Академия — набор структурированного контента, интеpaктивных заданий и обучающих курсов, посвященных конкретному продукту или индустрии в целом...
23 03 2024 20:43:46
Как настроить эксперимент на сайте без сторонней помощи...
22 03 2024 2:46:38
Таблицы Google позволят перенести рекламную кампанию и сохранить при этом ключевые слова в разных типах соответствия. Подробный мануал — в новом посте....
21 03 2024 20:31:30
2 любопытные истории и 8 успешных стартапов, которые вас удивят....
20 03 2024 4:27:53
Новости агентства Netpeak за предыдущий квартал. Появление отдела веб-аналитики. Открыли услугу «Создание и ведение блогов». Добавили мультивалютность. Глобально изменили скрипт Netpeak X-Reference. Запустили серию писем. Что еще?...
19 03 2024 13:53:42
Технология «лёгкость восприятия» — инструмент, который поможет убедить клиентов покупать именно у вас...
18 03 2024 2:38:55
Наука перехода — понятие краулинга (crawling, сканирование) сайта и принципа его работы. Виды поисковых роботов и способы их управления и другие полезные фишки в рубрике Азбука SEO на Netpeak Blog...
17 03 2024 0:58:42
5 примеров маркетингового троллинга. Сатира, ирония, пародия — все эти приемы в рекламе помогают брендам выделиться среди конкурентов. Если их правильно использовать, конечно, это отличный способ привлечь клиентов и создать запоминающийся образ бренда...
16 03 2024 21:56:24
Почему нельзя просто взять и перевести. В худшем случае специализированный текст на иностранном языке должен стать для переводчика дорожной картой, в лучшем — источником вдохновения. Почему? Читайте об этом!...
15 03 2024 12:21:39
Как стандартизировали сбор данных по проектам клиентов и отчетности, чтобы тратить меньше времени и не совершать лишние действия...
14 03 2024 20:54:59
Советы специалистов по продвижению интернет-магазинов в сверхконкурентной нише одежды и обуви...
13 03 2024 0:44:58
LinkedIn хороший инструмент для достижения B2B целей. Пока его редко используют в СНГ, что делает LinkedIn еще привлекательней. В этой социальной сети возможности рекламных форматов и таргетингов почти безграничны. Узнать больше....
12 03 2024 21:22:26
Домен — это адрес (имя) сайта в сети интернет, по которому его находят пользователи. Он состоит из букв, символов и цифр, должен быть уникальным, чтобы владельцу ресурса удалось добиться качественного продвижения. Как подобрать лучший? Читайте!...
11 03 2024 0:23:16
Как специалисту сэкономить время для создания и оптимизации кампаний, проверки орфографии и другие фишки. Советы из пpaктики....
10 03 2024 1:16:11
Как сформировать правильную стратегию продвижения и сфокусировать внимание на получении прибыли...
09 03 2024 11:27:56
Каждому бизнесу в интернете важно продумать систему оплаты для своих товаров или услуг. При этом следует учитывать объемы и нишу бизнеса. Узнать больше!...
08 03 2024 22:32:57
Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::