Как правильно «закрывать» свой сайт

В январе 2012 года прошли массовые протесты против SOPA и PIPA: многие авторитетные западные сайты прекратили работу на сутки.
У многих вебмастеров возник вопрос: как сделать «blackout», но при этом не навредить сайту? На форуме вебмастеров Google появился пост сотрудника JohnMu с детальными рекомендациями по отключению сайта. Данные рекомендации полезны не только для протестующих американским законам, но и для всех вебмастеров, которым бывает необходимо закрыть временно сайт на обновление, исправление критических ошибок и т.д. В любом случае лучше не выключать сайт, но если без этого не обойтись, то делать это нужно правильно. Вот, что рекомендует сотрудник Google:
Используйте 503 HTTP-статус, но внимательно читая справку.
Самый частый сценарий — вебмастера решают заменить контент на сайте попросту убрав тексты и оставив какое-то «послание». Важно в данном случае сделать так, чтобы возвращался 503 HTTP-статус для всех URL, участвующих в «акции» (конкретных страниц или всего сайта).
Зачем это нужно?
а) это будет значить, что это не «настоящий» контент и он не будет проиндексирован; б) учитывая первый пункт, даже если мы видим тот же контент (сообщение о политическом протесте, к примеру) на всех страницах, проблем и санкций, связанных дублированием контента не будет; в) скорость индексации сайта снизится, если сайт отдает 503 код. Это неизбежно, однако это не повлечет длительных проблем, так как скорость индексации сайта быстро восстановится после того, как сайт начнет отдавать 200-й код. То, насколько быстро восстановится нормальная индексация, зависит от вашего сайта.
Два важных замечания насчет robots.txt
a) Бот Google сейчас настроен так, что он останавливает индексацию сайта, если robots.txt отдает 503 код ответа. Индексация восстанавливается только после того, как робот получит 200 или 404 код ответа сервера при запросе robots.txt. Поэтому, если вы решили заблокировать только часть сайта, убедитесь, что robots.txt не отдает 503 код. В противном случае вы заблокируете сразу весь сайт от робота Google.
б) Некоторые вебмастера решают изменить robots.txt, чтобы остановить индексацию сайта и добавляют директиву «Disallow: /». Никогда не блокируйте бота Google таким образом — это может вызвать проблемы, решение которых займет значительно больше времени, чем несколько дней.
Веб-мастера увидят ошибки в Google Webmaster tools. Пристально следите несколько недель после протеста (или после любого другого планового отключения сайта) за ошибками сканирования в вебмастерке, чтобы убедиться в том, что нет никаких проблем с индексацией сайта.
Общий совет: Не меняйте всё подряд. Не меняйте настройки DNS. Как уже сказано выше, не меняйте содержание robots.txt. Также не стоит менять скорость индексации сайта в GWT. Чем меньше вы делаете изменений, тем больше шансов, что отключение сайта пройдет без нежелательных последствий.
Комментарии:
Как протестировать MVP мобильного приложения, получить обратную связь и сформировать гипотезы...
16 04 2026 17:17:50
Продажа климатического оборудования. Кейс о проекте, который продвигался у нас на услуге «продвижение по позициям» и не демонстрировал хороших результатов как по росту трафика, так и по продажам, не смотря на высокие места в выдаче. Узнать больше!...
15 04 2026 7:48:49
Многие не догадываются о том, что в КМС Google можно разместить и редактировать графические объявления онлайн...
14 04 2026 10:20:39
Основная цель CTA — помочь посетителю принять решение о покупке, скачивании, регистрации или подписке...
13 04 2026 22:47:44
Как Blizzard реализует тимбилдинг, мотивирует сотрудников и превращает офис в музей...
12 04 2026 1:22:47
Рекомендации по ведению переговоров в непростых условиях....
11 04 2026 18:12:59
Исследование Ringostat о самых востребованных CRM-системах в США...
10 04 2026 5:58:58
Структура обзора, правила написания и важные хаpaктеристики этого формата. Подача информации в обзоре и запрещенные методы, которые отпугнут клиентов. Узнать больше!...
09 04 2026 11:50:23
Активно юзая Google Tag Manager, узнали много нового о dataLayer и методах отслеживания статистики в Google ***ytics для SPA-сайтов и лендингов. Об этом и расскажем...
08 04 2026 19:12:49
При работе с рекламным аккаунтом приходится вносить много однотипных изменений. Рассказываем, как сделать это быстро....
07 04 2026 11:25:21
Правильно задать вопрос или сфоримулировать ответ на собеседовании это еще далеко не все. Рецензия на книгу Ласло Бока «Работа рулит»...
06 04 2026 15:57:43
Кейсы с наибольшим количеством комментариев, репостов, оценок и дочитываний; по контекстной рекламе, поисковому продвижению, аналитике, SMM и другие. Узнать больше!...
05 04 2026 20:47:26
Результаты кампании динамического ремаркетинга для соцсетей...
04 04 2026 11:44:18
Часто копирайтеры пишут для поисковых роботов, не заботясь о качестве контента и читабельности. Рассмотрим метрики для оценки ридабилити....
03 04 2026 17:37:12
Наш обзор кинофильма «Социальная сеть» про Facebook и Марка Цукерберга....
02 04 2026 16:19:57
Какие шаги стоит сделать, чтобы обойти ямы профессионального влогинга и как заработать на его вершинах...
01 04 2026 6:44:47
Повышение эффективности продаж через звонки с помощью call tracking....
31 03 2026 8:13:43
Как найти и быстро исправить причины падения трафика? Совет номер один — не паниковать....
30 03 2026 21:10:16
Ещё один проект, который продвигался во время карантина....
29 03 2026 17:52:34
Решили написать про новый формат рекламы — баннерный...
28 03 2026 4:45:19
История от первого лица про звуковые сигналы в Facebook....
27 03 2026 19:25:37
Исправление ошибок в тексте возможно с помощью онлайн-инструментов и стационарных программ...
26 03 2026 6:42:57
Проверенные лайфхаки по платному трафику от спикеров и участников конференции 8P 2018...
25 03 2026 13:11:44
Охват и средняя цена за клик в самых популярных тематиках....
24 03 2026 19:29:25
О видах мобильных версий, их плюсах и минусах, а также советы по аудиту....
23 03 2026 17:17:47
Эти данные пригодятся в составлении медиапланов по продвижению в интернете. Понимания стоимость конверсии и необходимое количество конверсий, вы можете прогнозировать, сколько денег на рекламу нужно выделить. Читать!...
22 03 2026 10:39:28
И как с ними справиться. Рабочие инструкции для Chief Executive Office и менеджеров в целом. Давайте управлять комaндой и собой более эффективно и без выгорания. Узнать больше!...
21 03 2026 3:59:16
Рынок мобильных приложений и его глобальные тренды из исследования App Annie...
20 03 2026 13:44:58
Если на вашем смартфоне установлен только стандартный набор Uber, Glovo, 2ГИС и нескольких мессенджеров — смотрите подборку необычных и смешных приложений....
19 03 2026 9:21:14
Кейс детской костюмерной Colombina.ua — как продвигать проект с ярко выраженной сезонностью....
18 03 2026 11:50:33
История Affise от фаундера компании, рассказанная на SaaS Nation....
17 03 2026 17:30:11
Советы от Agorapulse, Smarp, Readdle, Competera, Leadfeeder, Smartly, Toggl, Grammarly, .Io Media, MacPaw, Depositphotos, Promorepuplic, OWOX, Serpstat, Quokka и TemplateMonster для развития SaaS-продуктов...
16 03 2026 1:54:35
Почему имеет смысл выбрать его, а не Google Tag Manager?...
15 03 2026 19:40:45
Как разобраться в типах соответствия ключевых слов и определить, что минус-слова блокируют показы нужных ключевых слов....
14 03 2026 7:18:37
Хотите раскрутить свои соцсети в 2022 году? Тогда уже сейчас нужно задуматься, что будете публиковать. В статье расскажем, какой контент будет в тренде в будущем году....
13 03 2026 14:42:15
Метод бoмжа в маркетинге. Как разработать позиционирование стартапа при ограниченных ресурсах...
12 03 2026 0:23:35
Краткий обзор динамических мультимедийных объявлений...
11 03 2026 14:38:44
Самые популярные блоги Рунета по интернет-маркетингу — все RSS-фиды в одном месте...
10 03 2026 9:40:15
Что нужно сделать, чтобы ваши объявления показывались только заинтересованным клиентам? В первую очередь, подобрать ключевые слова, релевантные запросу потенциального клиента и ориентированные на пользователей с мотивацией совершить действие....
09 03 2026 20:26:18
Как METRO Cash & Carry Украина нашла индивидуальный подход к 1 000 000 клиентов....
08 03 2026 5:56:36
Перевод колонки директора по маркетингу Ahrefs: об органическом поисковом трафике, высокопотенциальных темах для бизнеса, уникальности и качестве контента, его продвижении. С реальными рекомендациями и примерами. Узнайте больше!...
07 03 2026 23:38:14
Как украинский бизнес использует Черную пятницу, чтобы увеличить продажи и привлечь клиентов. Одежда, детские товары, курсы английского языка, экзотические фрукты, постельное белье, посуда, бытовая техника, SMM-агентство и многое другое...
06 03 2026 19:24:54
Хорошая история состоит из узнаваемых образов, которые вызывают у пользователя ассоциации с личными переживаниями....
05 03 2026 0:39:13
Когда на сайт добавляют новый контент, он тут же трaнcлируется в RSS-ленту и отображается в специальных программах для чтения, либо в email подписчиков. Как это работает?...
04 03 2026 11:48:49
Как за полгода обновить корпоративный блог, зачем это может быть нужно. О том, как начинали с сегментации, внедряли SEO-рекомендации, оптимизировали ЧПУ, трaнcлитерацию, пагинацию и структуру блога вплоть до конкретной работы со статьями, рейтингами и их страницами...
03 03 2026 11:23:10
В основе каждой великой компании – хорошо рассказанная история....
02 03 2026 22:20:25
Бесплатные CMS помогают решить много задач без привлечения программиста или самостоятельного изучения кодов. Но у таких движков есть свои недостатки. Узнать больше!...
01 03 2026 17:30:44
На этой картинке изображены два предмета. Один из них называется «буба», а второй «кики»....
28 02 2026 5:29:38
Полтора года работы и 32 тысячи привлеченных подписчиков. Рассказываем о плюсах и минусах продвижения телеграм-канала....
27 02 2026 7:48:38
В 2019 году в цикл зрелости вошли 28 технологий и инструментов...
26 02 2026 1:22:29
Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::