Исключение из индекса Bing: анализ ошибок SEO

В прошлый четверг, 28 августа 2025 года, сайт в третий раз был исключён из индекса поисковой системы Bing. Запишу всё по порядку. Причина, вероятно, всё та же — я не осознавал, что небольшие изменения с моей точки зрения могут восприниматься поисковыми системами как глобальные изменения всего сайта. Ниже — пример того, как делать не надо.

Накануне (27 августа) я проверил свой рейтинг в Ahrefs и обнаружил множество ошибок несоответствия языка на HTML-страницах (см. рисунок), примерно с 24 августа. Я начал постепенно внедрять мультиязычную поддержку, но не обратил внимания на то, что язык HTML-страниц должен определяться в зависимости от языка пользователя. В результате, с точки зрения Bing, все языки сайта сводились к языку по умолчанию (fallback), то есть даже на китайских статьях метка языка HTML была «en». В течение нескольких дней я несколько раз менял язык: с «zh» на «en», потом снова на «zh», затем опять на «en» — постоянно переключался.

Примерно 26 августа я провёл глобальную замену контента статей: удалил некоторые, по моему мнению, ненужные уведомления и не использовал функцию принудительной отправки контента в поисковые системы.

27 августа я полностью переписал страницы навигации, чтобы лучше поддерживать разные языки. При этом обнаружил, что описания (meta: description) на английских страницах оказались полностью на китайском языке. Решил, что просто забыл их изменить, и удалил все английские описания, планируя добавить их позже.

Вечером 27 августа я выпил стакан молочного чая, а утром 28-го проснулся около пяти часов. Подумал, что раз уж рано встал, можно сразу исправить проблему с языком HTML. Опубликовал новости, обновил загрузки, начал настраивать кэширование базы данных, планировал как можно скорее разделить API для нескольких сайтов, чтобы yinyuee.com мог получить независимые функции входа и загрузки.

К трем часам дня почти всё было готово. Проверяю телефон — с двух часов дня никто больше не подписывается на официальный аккаунт в WeChat. Подумал, не упал ли сервер сайта или сервер перенаправления? Быстро проверил — всё в порядке. Сам попробовал войти и скачать — всё работает нормально. Тогда я заглянул в статистику Baidu...

Хм. Проверил поиск — сайт не находится. Уже многие ключевые слова занимали первую страницу, ежедневные клики приближались к тысяче, количество подписчиков в WeChat росло каждый день — и вдруг всё остановилось. Как видно на рисунке ниже, большая часть показов приходится на браузер 360 и 360 Safe Browser, но по этим ключевым словам фактических кликов нет.

Конечно, это лишь основные, на мой взгляд, проблемы. На самом деле их больше, ниже кратко перечислю.

1. Ошибка в файле robots.txt
   Я считаю, что сам по себе robots.txt — не самая серьёзная проблема. Но дело в том, что Bing и Yandex частично делятся технологиями и данными, поэтому при блокировке они блокируют сайт одновременно.
   Я зарегистрировался и прошёл верификацию в Yandex 24 августа, а 28 августа в 14:12 получил письмо от Yandex:

   

2. Некорректная карта сайта (sitemap)
   При отправке карта сайта была сформирована с ошибкой в переменных окружения: в ней указан домен changjiu365.cn, который был заблокирован ещё несколько месяцев назад. Ранее я уже замечал эту проблему, но не придавал ей значения.

   

3. Частые глобальные изменения сайта
   В конце июля я провёл масштабные изменения, после чего Google Search Console перестал проверять URL и обновлять индекс. Только сегодня (4 сентября) ситуация восстановилась — видимо, Google наблюдал за сайтом целый месяц.

   

   

Все эти проблемы я постепенно исправил за последние несколько дней. Что ж, начнём всё сначала!