Деіндексація — це видалення сторінок сайту з індексу пошукової системи, після якого вони перестають показуватися у видачі. Деіндексація буває навмисною (власник сам закриває сторінку через noindex чи robots) і небажаною — коли сторінки випадають через технічні помилки або санкції.
Простими словами: індекс — це «бібліотечний каталог» пошуковика. Деіндексація — це коли картку сторінки з каталогу прибрали. Книга ще існує, але знайти її через пошук уже не вийде.
Що таке деіндексація і навіщо вона буває
Не весь контент має бути в пошуку. Технічні сторінки, дублі, кошик, сторінки фільтрів, службові розділи — їх свідомо закривають від індексації, щоб не «розмивати» сайт сміттєвими URL і не витрачати краулінговий бюджет. Це нормальна гігієна. Але та сама деіндексація може статися й проти вашої волі — і тоді це вже проблема, яку треба терміново діагностувати.
Коли деіндексація навмисна, а коли — біда
- Навмисно й корисно: дублі, службові й технічні сторінки, тестові розділи, застарілі акції.
- Помилково: випадково залишений
noindexна важливих сторінках після переносу з тестового сервера. - Санкція: Google прибирає сторінки чи весь сайт за грубі порушення (спам, клоакінг, чорні методи).
Як навмисно деіндексувати сторінку
Найнадійніший спосіб — мета-тег robots із директивою noindex у <head> сторінки:
<meta name="robots" content="noindex, follow">
Або той самий сигнал через HTTP-заголовок X-Robots-Tag. Важливо: сторінку з noindex не можна одночасно закривати в robots.txt — інакше робот просто не побачить директиву і не зможе її виконати.
Приклад
Після переносу сайту з тестового домену на робочий забули прибрати noindex, що стояв на всьому тесті «щоб не потрапило в пошук». Через кілька днів трафік провалюється: важливі сторінки тихо випали з індексу. Класична, дуже болюча помилка — і саме тому після будь-якої міграції перевіряють індексацію в першу чергу.
Часто плутають з…
- Заборона сканування в robots.txt — це не деіндексація: сторінка може лишитися в індексі без опису. Щоб прибрати з індексу — потрібен саме noindex.
- Видалення сторінки (404/410) — тут сторінки фізично немає; при деіндексації через noindex вона існує, але прихована від пошуку.
Питання та відповіді
Чим деіндексація відрізняється від заборони в robots.txt?
robots.txt забороняє сканування, але не гарантує зникнення з індексу. Деіндексація через noindex прямо каже пошуковику прибрати сторінку з видачі.
Чому важливі сторінки раптом випали з пошуку?
Найчастіші причини: випадковий noindex після міграції, помилки в robots, технічні збої або санкція. Починають діагностику з перевірки індексації та директив.
Як швидко сторінка зникає після noindex?
Не миттєво — потрібно, щоб робот повторно обійшов сторінку й побачив директиву. Це від кількох днів; прискорити можна повторним обходом через інструменти для вебмайстрів.
Сторінки зникли з пошуку без причини? Знайдемо джерело й повернемо індексацію — SEO-аудит та виправлення помилок на сайті.
Схожі терміни: noindex, Індексація, robots.txt, Краулінговий бюджет, Фільтр.
