Как правильно «закрывать» свой сайт
В январе 2012 года прошли массовые протесты против SOPA и PIPA: многие авторитетные западные сайты прекратили работу на сутки.
У многих вебмастеров возник вопрос: как сделать «blackout», но при этом не навредить сайту? На форуме вебмастеров Google появился пост сотрудника JohnMu с детальными рекомендациями по отключению сайта. Данные рекомендации полезны не только для протестующих американским законам, но и для всех вебмастеров, которым бывает необходимо закрыть временно сайт на обновление, исправление критических ошибок и т.д. В любом случае лучше не выключать сайт, но если без этого не обойтись, то делать это нужно правильно. Вот, что рекомендует сотрудник Google:
Используйте 503 HTTP-статус, но внимательно читая справку.
Самый частый сценарий — вебмастера решают заменить контент на сайте попросту убрав тексты и оставив какое-то «послание». Важно в данном случае сделать так, чтобы возвращался 503 HTTP-статус для всех URL, участвующих в «акции» (конкретных страниц или всего сайта).
Зачем это нужно?
а) это будет значить, что это не «настоящий» контент и он не будет проиндексирован; б) учитывая первый пункт, даже если мы видим тот же контент (сообщение о политическом протесте, к примеру) на всех страницах, проблем и санкций, связанных дублированием контента не будет; в) скорость индексации сайта снизится, если сайт отдает 503 код. Это неизбежно, однако это не повлечет длительных проблем, так как скорость индексации сайта быстро восстановится после того, как сайт начнет отдавать 200-й код. То, насколько быстро восстановится нормальная индексация, зависит от вашего сайта.
Два важных замечания насчет robots.txt
a) Бот Google сейчас настроен так, что он останавливает индексацию сайта, если robots.txt отдает 503 код ответа. Индексация восстанавливается только после того, как робот получит 200 или 404 код ответа сервера при запросе robots.txt. Поэтому, если вы решили заблокировать только часть сайта, убедитесь, что robots.txt не отдает 503 код. В противном случае вы заблокируете сразу весь сайт от робота Google.
б) Некоторые вебмастера решают изменить robots.txt, чтобы остановить индексацию сайта и добавляют директиву «Disallow: /». Никогда не блокируйте бота Google таким образом — это может вызвать проблемы, решение которых займет значительно больше времени, чем несколько дней.
Веб-мастера увидят ошибки в Google Webmaster tools. Пристально следите несколько недель после протеста (или после любого другого планового отключения сайта) за ошибками сканирования в вебмастерке, чтобы убедиться в том, что нет никаких проблем с индексацией сайта.
Общий совет: Не меняйте всё подряд. Не меняйте настройки DNS. Как уже сказано выше, не меняйте содержание robots.txt. Также не стоит менять скорость индексации сайта в GWT. Чем меньше вы делаете изменений, тем больше шансов, что отключение сайта пройдет без нежелательных последствий.
Комментарии:
Истории бизнеса и советы от Игоря Жаданова (Readdle), Александра Галкина (Competera) и Рагнара Саас (Pipedrive)...
31 05 2026 12:17:23
Пошагово подключаем скрипт проверки бюджета аккаунтов Google Ads. Скрипт отправляет уведомление на почту и в Telegram — это поможет вовремя пополнить счет. Узнать больше!...
30 05 2026 10:16:13
Что делать перед составлением рекламного бюджета — инструкция для предпринимателей...
29 05 2026 23:28:11
Расчет вероятности конверсии, быстрое и эффективное создание дашбордов, строение моделей KPI. Примеры аналитики кампаний с помощью Excel и Power BI от спикера 8P 2016 Максима Уварова....
28 05 2026 9:57:28
Поиск крутых авторов и качественные тексты для блога об email-рассылке...
27 05 2026 15:23:47
Доля органического трафика увеличилась с 14% до 44%, а небрендового — на 184%....
26 05 2026 6:22:17
Зеркалами считаются сайты с разными доменными именами, но идентичным контентом...
25 05 2026 11:36:28
Как стандартизировали сбор данных по проектам клиентов и отчетности, чтобы тратить меньше времени и не совершать лишние действия...
24 05 2026 13:37:36
Пиксель Facebook — инструмент аналитики рекламной системы, который можно использовать и для Instagram....
23 05 2026 5:45:44
О работе, креативности, мотивации и многом другом....
22 05 2026 17:48:34
Отрывок из книги «Статистика: базовый курс в комиксах» Грейди Клейн и Алана Дебни...
21 05 2026 16:56:24
Как сделать склейку и сохранить трафик, распространенные ошибки при склеивании. Узнать больше!...
20 05 2026 0:12:58
Те самые проблемы, если бизнес пришел к вам за услугой, но ему не нужен маркетинг в интернете. Мнения экспертов интернет-маркетинга....
19 05 2026 17:51:19
Как говорится, люди делятся на тех, кто делит других на типы и тех, кто не делит. В этом посте — про желтых, синих, красных и зеленых людей....
18 05 2026 21:14:14
Лучшие маркетинговые ориентиры тем, кто захочет познакомиться с SEO и контекстной рекламе...
17 05 2026 9:38:16
Требования к интернет-магазину, мануал по регистрации, что может пойти не так...
16 05 2026 2:38:59
Эффективен ли ваш канал привлечения трафика? Лучше писать об этом с помощью формул...
15 05 2026 10:19:11
Онлайн-корпоративы стали трендом 2020 года, но останутся с нами надолго если не в чистом, то в гибридном формате. Делимся опытом организации дня рождения компании в Zoom....
14 05 2026 0:44:13
Чтобы эффективно продвигать товар или услугу в Instagram, необходимо повысить охват целевой аудитории. Одно из возможных решений — привлечение блогеров. Казалось бы, достаточно предложить платное размещение рекламы…...
13 05 2026 11:12:52
Необходимый элемент для защиты контента от копирования и в то же время — шанс стать популярным автором. Тем не менее, от водяных знаков отказываются. Узнать больше!...
12 05 2026 18:45:53
Лучшие фишки продвижения мобильных приложений в адаптированном переводе отчета Branch.io...
11 05 2026 3:13:12
Кейсы, фишки и советы, опыт крупных брендов, маркетологов....
10 05 2026 8:10:31
Короткий интересный клип в Instagram — фишка маркетингового сезона 2015...
09 05 2026 12:49:24
Реклама мобильных приложений. Хотите показывать рекламу в играх? Вам сюда. Узнайте как правильно настроить показ рекламы на мобильных устройствах....
08 05 2026 20:49:34
Работ по оптимизации всегда много, а выделить приоритеты при продвижении онлайн — непросто. Что стоит проверять и исправлять в первую очередь?...
07 05 2026 5:32:47
Как создать портрет покупателя и зачем он нужен бизнесу....
06 05 2026 14:16:24
Подобрать нужные слова поможет проверка Google Рекламы....
05 05 2026 4:49:26
Перво-наперво для мониторинга ошибок SEO-специалист открывает вебмастерку с подсказками Google — она же панель вебмастеров, она же Google Search Console...
04 05 2026 15:30:57
Почти 3 миллиона клика в 24 тематиках в 15 городах Казахстана. Читайте новое исследование нашего аналитика....
03 05 2026 23:26:41
Расскажем в двух словах о всеми забытой функции «Анализ конкуренции»....
02 05 2026 22:33:33
Callback от Ringostat: пример того, как увеличить конверсии с помощью формы заказа обратного звонка...
01 05 2026 5:52:24
Что делать, если вы специально или нет попали под фильтр: руководство от выявления до спасения...
30 04 2026 22:13:50
Точность и полезность — главные фишки нашего сервиса для расчета показателя LTV (Customer Lifetime Value)....
29 04 2026 6:42:31
Для эффективной оценки работы кампаний не обойтись без вычисляемых показателей. Они экономят время PPC-специалиста и позволяют правильно анализировать рекламные кампании....
28 04 2026 11:41:18
Агентство Netpeak закрыло сделку по покупке агентства мобильного маркетинга Радомира Новковича RadASO....
27 04 2026 5:16:50
Как вернуть клиентов с помощью реактивационных email-рассылок. Внутри идеи таких брендов: Bershka, Wildberries, LinguaLeo, Facebook, Mail.ru, Coub, BlaBlaCar, Repka.ua и другие. Узнайте принципы красивой реактивации!...
26 04 2026 22:37:43
9 тревожных признаков того, что ваши подчиненные могут выгореть и уволиться. Обратите внимание и, возможно, не придется терять ценных для компании людей....
25 04 2026 18:17:34
Адвент-календарь, конкурсы и викторины, праздничные линейки товаров, подборки подарков для родных и близких, опросы, тесты и другие интересности. Используйте, если нужны идеи и вдохновение....
24 04 2026 4:55:44
Что поможет написать объявление без грамматических ошибок? В недрах агентства Netpeak рождается новый полезный сервис...
23 04 2026 5:10:30
Кто ведет соцсети Netpeak и заказывает мерч для всего агентства...
22 04 2026 21:46:46
Занимайтесь оптимизацией определенной категории товаров за полгода до скачка спроса....
21 04 2026 9:20:15
Как работать с Facebook ***ytics — бесплатным инструментом с богатым инструментарием и лучшей из всех существующих решений интеграцией с платформой Facebook...
20 04 2026 3:15:41
Клиенты возвращаются к хорошему сервису, который начинается с понятного интерфейса на сайте, продолжается в общении с вежливым сотрудником и заканчивается в общении с воспитанным курьером или менеджером в пункте самовывоза. Что ещё? Читайте!...
19 04 2026 12:39:37
От того, что такое оффер до лучших стратегий и избежания ошибок...
18 04 2026 15:33:41
Как написать годный кейс и победить страх чистого листа...
17 04 2026 6:27:20
Как сократить время на создание собственных отчетов, если вы работаете с большими рекламными аккаунтами...
16 04 2026 21:55:55
Как использовать игровые механики для вовлечения аудитории....
15 04 2026 6:15:16
Всё что нужно знать про SMM...
14 04 2026 12:57:32
Самые популярные блоги Рунета по интернет-маркетингу — все RSS-фиды в одном месте...
13 04 2026 4:20:33
Как Bigl.ua внедрили AMP и остались очень довольны результатом....
12 04 2026 20:41:16
Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::
