Пошуковий індекс

Пошуковий індекс — це величезна база даних пошукової системи, у якій зберігаються оброблені й проаналізовані сторінки з усього інтернету. Саме з індексу, а не з «живого» вебу, пошуковик добирає результати під запит. Якщо сторінки немає в індексі — у видачі вона не з’явиться в принципі.

Простими словами: це гігантський каталог бібліотеки. Google не бігає щоразу по всіх полицях — він шукає у своєму каталозі, куди заздалегідь занесли всі «книжки».

Що таке пошуковий індекс і навіщо в нього потрапляти

Потрапляння в індекс — обов’язкова умова ранжування. Спершу краулер знаходить сторінку, потім система її аналізує й вирішує, чи додавати в індекс і в якому вигляді. Тільки після цього сторінка бере участь у видачі. Тому «мене немає в Google» майже завжди означає одну з двох речей: сторінку не просканували або не проіндексували (наприклад, через noindex, дублі чи низьку якість).

Як формується індекс

Сканування — краулер обходить сторінку й завантажує її вміст.
Обробка — система розбирає текст, посилання, розмітку, рендерить сторінку.
Індексація — сторінка (якщо пройшла фільтри якості) додається в базу.
Оновлення — при повторних обходах дані в індексі перезаписуються.

Як перевірити, чи сторінка в індексі

Оператор site:адреса-сторінки в пошуку Google.
Звіт «Індексування сторінок» у Google Search Console — найточніший спосіб.

Приклад

Ви опублікували 100 сторінок, а в Search Console бачите, що в індекс потрапило лише 60. Решта — «просканована, але не проіндексована»: часто це дублі, тонкі або технічні сторінки, які система вирішила не зберігати. Це сигнал попрацювати над їхньою якістю або закрити від індексації свідомо.

Часто плутають з…

Індексація — це процес додавання сторінки в індекс; сам індекс — це база-результат цього процесу.
Сканування (crawling) — це обхід сторінки роботом; він передує індексації, але не гарантує її.

Питання та відповіді