Как правильно «закрывать» свой сайт
В январе 2012 года прошли массовые протесты против SOPA и PIPA: многие авторитетные западные сайты прекратили работу на сутки.
У многих вебмастеров возник вопрос: как сделать «blackout», но при этом не навредить сайту? На форуме вебмастеров Google появился пост сотрудника JohnMu с детальными рекомендациями по отключению сайта. Данные рекомендации полезны не только для протестующих американским законам, но и для всех вебмастеров, которым бывает необходимо закрыть временно сайт на обновление, исправление критических ошибок и т.д. В любом случае лучше не выключать сайт, но если без этого не обойтись, то делать это нужно правильно. Вот, что рекомендует сотрудник Google:
Используйте 503 HTTP-статус, но внимательно читая справку.
Самый частый сценарий — вебмастера решают заменить контент на сайте попросту убрав тексты и оставив какое-то «послание». Важно в данном случае сделать так, чтобы возвращался 503 HTTP-статус для всех URL, участвующих в «акции» (конкретных страниц или всего сайта).
Зачем это нужно?
а) это будет значить, что это не «настоящий» контент и он не будет проиндексирован; б) учитывая первый пункт, даже если мы видим тот же контент (сообщение о политическом протесте, к примеру) на всех страницах, проблем и санкций, связанных дублированием контента не будет; в) скорость индексации сайта снизится, если сайт отдает 503 код. Это неизбежно, однако это не повлечет длительных проблем, так как скорость индексации сайта быстро восстановится после того, как сайт начнет отдавать 200-й код. То, насколько быстро восстановится нормальная индексация, зависит от вашего сайта.
Два важных замечания насчет robots.txt
a) Бот Google сейчас настроен так, что он останавливает индексацию сайта, если robots.txt отдает 503 код ответа. Индексация восстанавливается только после того, как робот получит 200 или 404 код ответа сервера при запросе robots.txt. Поэтому, если вы решили заблокировать только часть сайта, убедитесь, что robots.txt не отдает 503 код. В противном случае вы заблокируете сразу весь сайт от робота Google.
б) Некоторые вебмастера решают изменить robots.txt, чтобы остановить индексацию сайта и добавляют директиву «Disallow: /». Никогда не блокируйте бота Google таким образом — это может вызвать проблемы, решение которых займет значительно больше времени, чем несколько дней.
Веб-мастера увидят ошибки в Google Webmaster tools. Пристально следите несколько недель после протеста (или после любого другого планового отключения сайта) за ошибками сканирования в вебмастерке, чтобы убедиться в том, что нет никаких проблем с индексацией сайта.
Общий совет: Не меняйте всё подряд. Не меняйте настройки DNS. Как уже сказано выше, не меняйте содержание robots.txt. Также не стоит менять скорость индексации сайта в GWT. Чем меньше вы делаете изменений, тем больше шансов, что отключение сайта пройдет без нежелательных последствий.
Комментарии:
Как настроить отправку писем с помощью языка R и как избежать подводных камней....
07 02 2026 7:44:10
Обо всех способах передачи данных из несвязанных с сайтом источников, а также о ручной передаче данных...
06 02 2026 13:37:14
Проверенные лайфхаки по платному трафику от спикеров и участников конференции 8P 2018...
05 02 2026 6:41:10
Покупать в Китае. Как брендам покорить сердца и кошельки китайских пользователей...
04 02 2026 17:18:54
Как без проблем пересылать данные в Google Покупки....
03 02 2026 0:50:27
Алексей Селезнев проанализировал более 7 миллионов кликов и посчитал, во сколько обходятся рекламодателям клики по объявлениям в разных странах и тематиках....
02 02 2026 15:59:40
При использовании похожих инструментов важно не переборщить с количеством рекламы...
01 02 2026 10:44:28
Как сэкономить время, ресурсы, и сделать онлайн-маркетинг эффективнее с помощью языка R...
31 01 2026 14:11:57
Относящиеся к низкочастотным long-tail запросы при правильном подходе могут стать эффективным инструментом для увеличения трафика. Рассказываем почему, а главное — как....
30 01 2026 11:28:51
Метод бoмжа в маркетинге. Как разработать позиционирование стартапа при ограниченных ресурсах...
29 01 2026 4:32:51
Знания основных принципов конверсионности сайта, этапов воронки продаж важны для того, чтобы наладить процессы, рост продаж в любом бизнесе. Узнать больше!...
28 01 2026 4:15:45
Используем маску ввода для оптимизации сбора телефонных номеров в формах на сайте: кейсы агентства Netpeak...
27 01 2026 23:52:23
5 мая в 17:00 — митап в Zoom с Радомиром Новковичем — фаундером RadASO и CEO Tonti Laguna Mobile....
26 01 2026 10:17:12
Отслеживание конверсий: покупка, подписка на рассылку, отправка контактных данных и другое....
25 01 2026 9:44:31
Что делать контент-маркетологам, когда все тексты в интернете начнут генерировать боты? Спойлер: обновлять старый контент....
24 01 2026 7:32:40
Четкий мануал для настройки Яндекс.Аудиторий от создания сегмента, работы с геолокацией, пикселем аудитории, похожими аудиториями, ретаргетингом и до корректировки ставок...
23 01 2026 11:44:37
Бесплатные CMS помогают решить много задач без привлечения программиста или самостоятельного изучения кодов. Но у таких движков есть свои недостатки. Узнать больше!...
22 01 2026 7:58:13
Система почтового маркетинга. Как удержать доверия подписчиков одним приветственным письмом...
21 01 2026 2:35:49
Клиникка использует лазеры и нуждается в продвижении. В специфических сферах привлечь потребителя впервые бывает сложнее и дороже, чем удержать его. Этот кейс о том, как повысить количество обращений новых клиентов с помощью видеорекламы...
20 01 2026 0:52:36
Корневой каталог это папка, содержащая все файлы на сайте, в том числе системные файлы....
19 01 2026 16:43:44
Узнайте зарплату интернет-маркетологов с новым рейтингом от Serpstat....
18 01 2026 6:49:38
Из нового исследования вы узнаете, сколько стоил клик в Google Ads и Яндекс.Директ в Казахстане в третьем квартале 2018 года...
17 01 2026 23:10:55
Настраиваем автоматическое получение отчетов по потерянным конверсиям для оптимизации рекламных кампаний....
16 01 2026 4:50:16
Проверка структурированных данных поисковыми роботами нуждается в нашей поддержке...
15 01 2026 8:21:25
Рассказываем в подробностях, что полезного сделал Netpeak для своих клиентов с января по апрель 2017 года...
14 01 2026 4:16:53
После нехитрых манипуляций с текстом вторая строка оказывается в заголовке....
13 01 2026 8:43:32
Гениальный математик создал систему, которая вполне может конкурировать с Google — Wolfram|Alpha. Или нет? Это не поисковик, тогда при чем здесь Гугл и теория вычислимости?...
12 01 2026 8:39:14
Как рекламировать смартфоны в YouTube — советы крупному бизнесу по настройке и запуску эффективной рекламы. Важно: корректный анализ результатов. Узнайте как его сделать!...
11 01 2026 21:53:32
Хасан Исламов о развитии Chocofamily, крупнейшего интернет-холдинга Казахстана....
10 01 2026 8:51:58
Список минус-слов для Google Рекламы для B2B сайтов....
09 01 2026 20:44:48
Тематический кейс в нише «Фотография и аксессуары»: проделанные работы и полученные результаты...
08 01 2026 16:37:59
Создаем фид с помощью выгрузки товаров в формате yml и специального скрипта, который сделает всю (почти) грязную работу за вас....
07 01 2026 0:41:41
О ловушке медиа, Стивене Пинкере и почему в любой ситуации важно оставаться оптимистом....
06 01 2026 11:59:53
Когорта в google ***ytics позволяет снять любые претензии в духе «прошел уже целый месяц, где результаты»....
05 01 2026 9:10:42
Влияет ли значение показателя отказов на ранжирование сайта в поисковых системах и стоит ли переживать из-за высоких показателей отказов? Узнать больше....
04 01 2026 17:24:21
Как создать и внедрить баннеры об использовании куки-файлов с помощью Google Tag Manager и OneTrust...
03 01 2026 8:19:28
Пять примеров дизайна, который помогает продавать в рассылках. Просто любуемся и тренируем насмотренность....
02 01 2026 11:52:35
Узнать, как управлять репутацией в сети для молодой компании, можно в статье Netpeak Journal: что такое репутация, как формируется образ бренда и что нужно делать для получения положительных отзывов....
01 01 2026 1:53:12
Пример, как 4000+ гривен превращаются в 45000+ гривен. Ниша интернет-магазинов, да еще и бытовой техники уже давно является высококонкурентной. Но при правильном продвижении даже новичок может добиться результатов....
31 12 2025 0:23:24
Возможности и перспективы Clubhouse, лайфхаки для пользователей и бонус в конце...
30 12 2025 20:52:46
Какие рассылки можно отправить покупателю, если у вас есть только данные из карточки товара...
29 12 2025 7:12:44
На украинском рынке услуг велик выбор качественных платформ. Главное понимать, как правильно проводить миграцию....
28 12 2025 1:54:47
Мануал по созданию удобного планировщика повторяющихся действий....
27 12 2025 7:17:30
SEO для цветочных магазинов с оплатой за трафик и полученные результаты...
26 12 2025 3:10:35
Неля Серебро рассказывает про внутреннюю кухню блога Netpeak...
25 12 2025 4:15:10
Если вы не можете разработать технические задания для себя в виде структурированного текста, вы, скорее всего, плохо понимаете, что хотите от исполнителя...
24 12 2025 23:50:51
Интересные маркетинговые методы, эффективные профессиональные хитрости и много другое прозвучало на круглом столе по фишкам контекстной рекламы...
23 12 2025 3:36:35
Что нужно знать о целевой аудитории, как грамотно воровать у других и что нужно сделать, чтобы настроить идеальную рекламную кампанию....
22 12 2025 19:35:31
Определение, исследование и проверка конкурентов в Similarweb — первый шаг перед запуском и масштабированием проекта...
21 12 2025 12:15:55
Бухгалтерский мир Netpeak: цель, задачи, мотивация....
20 12 2025 18:18:17
Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::
