Как правильно «закрывать» свой сайт
В январе 2012 года прошли массовые протесты против SOPA и PIPA: многие авторитетные западные сайты прекратили работу на сутки.
У многих вебмастеров возник вопрос: как сделать «blackout», но при этом не навредить сайту? На форуме вебмастеров Google появился пост сотрудника JohnMu с детальными рекомендациями по отключению сайта. Данные рекомендации полезны не только для протестующих американским законам, но и для всех вебмастеров, которым бывает необходимо закрыть временно сайт на обновление, исправление критических ошибок и т.д. В любом случае лучше не выключать сайт, но если без этого не обойтись, то делать это нужно правильно. Вот, что рекомендует сотрудник Google:
Используйте 503 HTTP-статус, но внимательно читая справку.
Самый частый сценарий — вебмастера решают заменить контент на сайте попросту убрав тексты и оставив какое-то «послание». Важно в данном случае сделать так, чтобы возвращался 503 HTTP-статус для всех URL, участвующих в «акции» (конкретных страниц или всего сайта).
Зачем это нужно?
а) это будет значить, что это не «настоящий» контент и он не будет проиндексирован; б) учитывая первый пункт, даже если мы видим тот же контент (сообщение о политическом протесте, к примеру) на всех страницах, проблем и санкций, связанных дублированием контента не будет; в) скорость индексации сайта снизится, если сайт отдает 503 код. Это неизбежно, однако это не повлечет длительных проблем, так как скорость индексации сайта быстро восстановится после того, как сайт начнет отдавать 200-й код. То, насколько быстро восстановится нормальная индексация, зависит от вашего сайта.
Два важных замечания насчет robots.txt
a) Бот Google сейчас настроен так, что он останавливает индексацию сайта, если robots.txt отдает 503 код ответа. Индексация восстанавливается только после того, как робот получит 200 или 404 код ответа сервера при запросе robots.txt. Поэтому, если вы решили заблокировать только часть сайта, убедитесь, что robots.txt не отдает 503 код. В противном случае вы заблокируете сразу весь сайт от робота Google.
б) Некоторые вебмастера решают изменить robots.txt, чтобы остановить индексацию сайта и добавляют директиву «Disallow: /». Никогда не блокируйте бота Google таким образом — это может вызвать проблемы, решение которых займет значительно больше времени, чем несколько дней.
Веб-мастера увидят ошибки в Google Webmaster tools. Пристально следите несколько недель после протеста (или после любого другого планового отключения сайта) за ошибками сканирования в вебмастерке, чтобы убедиться в том, что нет никаких проблем с индексацией сайта.
Общий совет: Не меняйте всё подряд. Не меняйте настройки DNS. Как уже сказано выше, не меняйте содержание robots.txt. Также не стоит менять скорость индексации сайта в GWT. Чем меньше вы делаете изменений, тем больше шансов, что отключение сайта пройдет без нежелательных последствий.
Комментарии:
Ещё один проект, который продвигался во время карантина....
12 11 2025 22:46:49
Callback от Ringostat: пример того, как увеличить конверсии с помощью формы заказа обратного звонка...
11 11 2025 8:16:55
Готовы ли вы доверить основные настройки кампании автоматическим алгоритмам?...
10 11 2025 13:21:16
Как найти продавцов для маркетплейса с помощью рекламы в Google, Facebook, TikTok и Viber....
09 11 2025 4:23:26
Основные этапы раскрутки сайта. Что такое и как работает поисковая оптимизация, ее виды, особенности, преимущества...
08 11 2025 21:31:24
Гениальный математик создал систему, которая вполне может конкурировать с Google — Wolfram|Alpha. Или нет? Это не поисковик, тогда при чем здесь Гугл и теория вычислимости?...
07 11 2025 18:58:55
Первая часть иллюстрированного руководства, в котором мы взяли 20 самых важных фактора ранжирования представлены с краткими иллюстрированными примерами. В этом тексте вы найдете первые 10. Узнать больше!...
06 11 2025 1:14:31
Что, если бы покупка в супермаркете происходила так же, как в онлайн-магазине?...
05 11 2025 14:47:30
Расскажу, как подобрать картинку на рабочий стол объявления в Рекламной сети Яндекса, и приведу небольшой кейс о том, как это делали мы для агентства путешествий...
04 11 2025 19:34:53
Рекомендации от Google для бизнеса о поведении в период распространения коронавируса....
03 11 2025 19:35:50
Кейсы, фишки и советы, опыт крупных брендов, маркетологов....
02 11 2025 5:53:47
Недавно у меня закончилась видеокампания на ютуб, по которой удалось собрать исследование Brand Lift. Хочу поделиться инсайтами...
01 11 2025 11:56:33
SEOmoz создал систему, которая определяет релевантность страницы поисковому запросу....
31 10 2025 8:24:41
Терялись ли вы некогда в лабиринте Википедии из внутренних ссылок и побочных статей? Представьте, насколько непредсказуемым он может стать через несколько десятилетий....
30 10 2025 8:46:13
Прогнозирование с помощью «Планировщика ключевых слов»....
29 10 2025 8:43:16
Создаем фид с помощью выгрузки товаров в формате yml и специального скрипта, который сделает всю (почти) грязную работу за вас....
28 10 2025 23:43:26
Как стандартизировали сбор данных по проектам клиентов и отчетности, чтобы тратить меньше времени и не совершать лишние действия...
27 10 2025 20:14:47
Игроков интернета России, Уанета и Казнета зарубежные сайты coблaзняют семизначными результатами продаж во время «черной пятницы» и «киберпонедельника»....
26 10 2025 19:54:45
Брендовые или витальные запросы содержат только название компании или бренда, без дополнительных уточнений...
25 10 2025 2:31:45
Читайте простой мануал о том, как перейти на Universal ***ytics и не поломать весь сбор данных...
24 10 2025 22:17:43
Советы и даже требования SEO-специалистов к разработчикам сайтов....
23 10 2025 22:26:44
Семинар с примерами юзабилити решений от Twitter, Airbnb, Amazon и других компаний....
22 10 2025 18:23:50
Когда на сайт добавляют новый контент, он тут же трaнcлируется в RSS-ленту и отображается в специальных программах для чтения, либо в email подписчиков. Как это работает?...
21 10 2025 9:40:32
Данные по 24 миллионам кликов в 24 тематиках и 391 городу...
20 10 2025 4:57:37
Спикер ОА Петр Аброськин рассказал всем читателям блога о фишках настройки ремаркетинга в контекстной рекламе и социальных сетях...
19 10 2025 4:44:40
Наибольший эффект по продвижению сайта при минимальных затратах — именно таков принцип SEO growth hacking. Как найти кратные точки роста, читайте статье....
18 10 2025 12:48:58
Почему лендинги на Тильде выгодны бизнесу, какие задачи он решает, о форматах работы по услуге, детально о ее составе и спецпредложениях от Netpeak и наших партнеров по настройке контекстной рекламы, сервисов на лендинге и даже промокод на скидку Yagla...
17 10 2025 9:22:49
Когда саппорт-отдел не справляется, подключайте к работе ПланФикс и Телеграм....
16 10 2025 9:15:17
XML-фид представляет собой файл с кодом на языке XML, ссылку на который используют в различных сервисах...
15 10 2025 20:37:46
Таблица общих для Google и Яндекс микроформатов инсайде...
14 10 2025 20:28:13
Иконки отличаются между собой размером, формой, весом, количеством оттенков и объемом. Наиболее популярными считаются векторные пиктограммы...
13 10 2025 16:11:21
И уж если бумага стерпит все, интернет — тем более, а значит онлайн-исповедальне быть! И не только ей......
12 10 2025 15:23:21
Как работать с Facebook ***ytics — бесплатным инструментом с богатым инструментарием и лучшей из всех существующих решений интеграцией с платформой Facebook...
11 10 2025 7:15:15
Объявление или кабинет блокируют из-за эмоджи. Что делать?...
10 10 2025 5:56:57
Как купить дешевый трафик из Facebook? Образец работы со структурой рекламного аккаунта...
09 10 2025 11:29:27
Что делать, если нет четкой модели оценки эффективности контекстной рекламы?...
08 10 2025 1:19:21
Крупным брендам не избежать негатива в сети. Но с ним можно и нужно работать. Читайте успешный кейс для DOM.RIA....
07 10 2025 2:57:52
Первая реакция на перегорание — послать все к чертям собачьим. Очень заманчиво, но правильно ли убегать от всех проблем?...
06 10 2025 7:31:45
Повышаем эффективность рекламных кампаний. Как рекламодателю-новичку самостоятельно провести аудит своих кампаний в Google Ads, а также про наиболее частые ошибки новичков, связанные с работой и аудитами кампаний в Google Ads. Читайте дальше!...
05 10 2025 8:11:55
Определяем, кто из mail подписчиков предан вашему бренду по-настоящему....
04 10 2025 3:13:21
Сегодня мы открываем новую регулярную серию постов, в которых будем стараться раз в квартал рассказывать про семь важных улучшений Netpeak в работе с клиентами. Сейчас мы максимально сфокусированы на SEO и PPC....
03 10 2025 2:12:37
У вас фирма с филиалами по всей стране? Короткий инструктаж по массовой загрузке адресов...
02 10 2025 18:50:15
Грамотная группировка поисковых запросов позволяет максимально увеличить поисковой трафик....
01 10 2025 21:11:50
Личный кабинет на сайте: что нового во внешнем виде, внутренностях и отчетах, функционале и юзабилити, автоматизации работы с оплатами, интернет-представительстве клиента и для специалистов. Узнайте больше!...
30 09 2025 8:47:23
Гифка — это зациклиненное видеоизображение, рисунок-ролик, крохотный фильм, без которого трудно представить современный сайт. Как быстро создавать гифки и получать профит....
29 09 2025 7:31:48
Если вам нужно быстро изменить небольшой объем контента на сайте без доступа к CMS, можно воспользоваться GTM. Как именно, читайте дальше....
28 09 2025 1:27:54
Сервисы для сбора поисковых фраз позволяют регулярно расширять семантическое ядро, обеспечивая сайту высокую видимость и увеличение трафика по тематическим запросам...
27 09 2025 2:54:40
Как правильно оптимизировать страницы пагинации, чтобы не допустить проседание целевого трафика...
26 09 2025 5:19:15
В мае прошлого года Google анонсировал выход нового Core Web Vitals. Что это и как будет работать рассмотрим в статье...
25 09 2025 3:45:30
Публикуем рецензию на новое издание Брайана Клифтона. Несмотря на узкую специализацию, эта книга стала бестселлером на Amazon и уже переведена на 5 разных языков. Стоит отметить, что две предыдущие редакции «Google ***ytics для профессионалов» успешно ис...
24 09 2025 13:38:41
Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::
