Мониторинг ключевых слов: ловите страницу с ошибкой, которая отдаёт 200

Страницы, которые лгут кодом 200

Код ответа показывает, что решил веб-сервер, а не то, что видит посетитель. Многие сломанные состояния всё равно отвечают 200: CMS, которая выводит ошибку базы данных прямо в шаблон; фатальная ошибка PHP при включённом display_errors; плагин обслуживания, отдающий свою заставку со «счастливым» кодом; CDN, закешировавший тело ошибки; просроченный хостинг-аккаунт, на котором видна страница-заглушка провайдера; тестовый баннер, случайно попавший в продакшн. У каждого такого случая есть узнаваемая фраза, и монитор ключевых слов превращает её в сигнал тревоги.

Типичные фразы, которых быть не должно: «Fatal error», «Error establishing a database connection», «Briefly unavailable for scheduled maintenance», «Service Unavailable» и «This domain is for sale». Типичные фразы, которые должны быть: название компании в футере, «Add to cart» на странице товара или текст кнопки входа.

Должно быть, не должно быть или оба условия

У монитора ключевых слов два необязательных поля: фраза, которая должна быть на странице, и фраза, которой там быть не должно. На важных страницах заполняйте оба. Обязательная фраза защищает от пустых страниц и неожиданных редиректов, запрещённая — от текста ошибки рядом с обычным содержимым. Если заполнены оба поля, должны выполняться оба условия, а в описании сбоя названо то, что нарушено, например Keyword "Add to cart" missing или Forbidden keyword "Fatal error" present.

Если оставить оба поля пустыми, монитор превратится в обычную проверку статуса с пометкой в деталях, а это редко нужно. Для такой задачи возьмите обычный монитор сайта.

Как выбрать фразу, которая переживёт редизайн

Лучшие фразы — скучные. Юридический текст в футере, зарегистрированное название компании, строка об авторских правах или подпись поля формы меняются гораздо реже, чем заголовки и рекламные тексты, и не вызывают оповещение каждый раз, когда маркетинг запускает тест. Избегайте текста, который зависит от посетителя (приветствия, цены в местной валюте, «3 товара в корзине»), текста из A/B-экспериментов и всего, что находится в баннере о cookie. Фраза должна быть достаточно короткой, чтобы пережить переносы строк и мелкие правки, и достаточно длинной, чтобы быть уникальной: «Add to cart» лучше, чем «cart».

Если хотите различать пропажу шапки и футера, поставьте на одну страницу два монитора с разными фразами. Это ещё один монитор, зато сообщение о сбое становится понятным без пояснений.

Как на самом деле работает сопоставление

Ответ загружается так же, как в любой HTTP-проверке. Затем из него удаляются скрипты, блоки стилей, комментарии и теги, декодируется несколько распространённых HTML-сущностей, а пробелы схлопываются. Фраза ищется в полученном тексте как обычная подстрока без учёта регистра. Что стоит помнить:

• Регулярных выражений нет. Шаблон вроде order #[0-9]+ задать нельзя; возьмите вместо него соседнюю фиксированную фразу.
• Учитывается только текст. Слово в атрибуте alt, в мета-теге description или внутри JavaScript сопоставление не видит, а текст в скрытых элементах — видит.
• Поиск идёт только в HTML, который отдал сервер, примерно до 1 МБ. Текст, который фреймворк вставляет после загрузки, невидим, поэтому одностраничные приложения проверяйте по серверному HTML или по API, которое за ними стоит.
• Все условия работают на одной загрузке, поэтому ожидаемый диапазон статусов, редиректы, basic auth и таймаут действуют в мониторах ключевых слов так же, как в мониторах сайта.

Тарифы и связь с другими мониторами

Проверки ключевых слов доступны на каждом тарифе, включая Free. Проверки JSON начинаются с тарифа Starter ($7 в месяц). Монитор ключевых слов создаёт такие же инциденты, оповещения и данные для страницы статуса, как и любой другой, а когда вы планируете менять страницу, его можно поставить в окно обслуживания. Если сайт стоит за фильтром ботов, страница проверки будет записана как инцидент «заблокировано», а не как отсутствие ключевого слова, поэтому смена правила Cloudflare не будет выглядеть проблемой с содержимым.