Що таке індексованість?
Індексованість - це здатність веб-сторінки бути проіндексованою пошуковими системами. Лише проіндексовані сторінки можуть з'являтися в результатах пошуку.
Щоб проіндексувати веб-сторінку, пошукові системи, такі як Google, повинні її проіндексувати:
- Дізнайтеся URL-адресу сторінки
- Перегляньте його (завантажте його вміст)
- Обробити його (зрозуміти та витягти ключову інформацію зі сканованих сторінок)
Тільки після цього сторінка може з'явитися в результатах пошуку.
Якщо пошукові роботи не можуть виконати свою роботу і просканувати сторінку вашого сайту, то ця сторінка не може бути проіндексована належним чином. А без індексації сторінка вашого сайту не зможе залучити пошуковий трафік, тому що вона залишиться невидимою для пошукових систем.
Чому індексованість важлива?
Індексація дозволяє пошуковим системам відображати сторінки вашого сайту в результатах пошуку. Без індексації ви не зможете залучити органічний пошуковий трафік на свій сайт.
Іноді є сенс зробити певні сторінки неіндексованими. Наприклад, неіндексовані сторінки краще робити для цільових сторінок, низькоякісних сторінок або сторінок "Дякуємо за підписку". Зрештою, ви не хочете, щоб ці сторінки з'являлися в пошуковій видачі.
Якщо ви хочете, щоб URL-адреси ранжувалися, ви повинні переконатися, що ці сторінки доступні для сканування та індексування.
Що робить сторінку індексованою?
Щоб сторінка вважалася "індексованою", вона повинна відповідати наступним критеріям:
1. Сторінка повинна бути доступною для перегляду
Для того, щоб веб-сторінка була проіндексована, пошукові роботи повинні мати доступ до її вмісту і спочатку переглянути його. Файл robots.txt безпосередньо впливає на "доступність" веб-сторінки для пошукових роботів.
Файл robots.txt - це невеликий файл, розташований у кореневому каталозі вашого сайту. Його роль полягає в тому, щоб надати інструкції пошуковим роботам і вказати їм, які сторінки вашого сайту не повинні скануватися. В іншому випадку боти будуть сканувати будь-яку сторінку, яку вони зможуть знайти на сайті; вони роблять це за замовчуванням.
Є випадки, коли встановлення таких "обмежень" має сенс. Проте, важливо переконатися, що ви не блокуєте неусвідомлено сторінки, які хочете, щоб їх проіндексували.
2. На сторінці не повинно бути тегу "Noindex"
Тег noindex - це директива на сторінці, яка вказує пошуковій системі не індексувати певну сторінку. По суті, це запобігає появі сторінки у пошуковій видачі.
Іноді доцільно "не індексувати" певні сторінки - такі як цільові сторінки, сторінки входу, тонкі або низькоякісні сторінки, сторінки подяки - і залишити їх "приватними".
Однак, якщо ви зловживаєте або, скажімо, забуваєте видалити цю директиву зі сторінки, яку хочете проіндексувати, ви втратите органічний пошуковий трафік.
Ви можете сканувати свій сайт за допомогою інструменту Ranktracker "Аудит сайту ", щоб переконатися, що жодна зі сторінок, які ви хочете проіндексувати, не має тегу "noindex".
3. Сторінка повинна бути канонічною
Канонічний тег (rel="canonical") в коді сторінки визначає основну версію для дублікатів, майже дублікатів і подібних сторінок. Це означає, що тільки канонічні сторінки можуть бути проіндексовані, в той час як їх неканонічні версії будуть виключені.
Якщо ви не додасте канонічний тег на сторінку, Google буде покладатися на такі сигнали, як внутрішні і зовнішні зворотні посилання, XML-карта сайту і перенаправлення, щоб вирішити, яка URL-адреса буде "представляти" цей кластер у своєму індексі.
Це означає, що якщо ви хочете, щоб ваша сторінка відображалася в результатах пошуку, вона не повинна оголошувати будь-яку іншу сторінку своєю канонічною версією. Хороша SEO-практика полягає в тому, щоб для сторінок, які індексуються, використовувати канонічні теги, що самопосилаються.
Як допомогти Google індексувати вашу сторінку
Ось що ви можете зробити, щоб допомогти Google індексувати сторінки вашого сайту:
1. Надсилайте карти сайту до Google
Карта сайту - це, по суті, список (зазвичай у форматі XML), що містить усі сторінки вашого сайту.
Роль карти сайту полягає в тому, щоб повідомити Google про сторінки, які ви хочете, щоб були проіндексовані на вашому сайті.
Перш ніж надсилати карту сайту, перевірте, чи відображає вона поточний стан вашого сайту, і виправте всі помилки - наприклад, непрацюючі посилання, порожні сторінки тощо.
Ви можете надіслати свої карти сайту в Google за допомогою Google Search Console.
2. Надсилайте окремі сторінки за допомогою Інструменту перевірки URL-адрес
Якщо ви хочете подати запит на індексацію або переіндексацію лише кількох окремих URL-адрес, ви можете скористатися Інструментом перевірки URL-адрес у Пошуковій консолі Google.
Інструмент перевірки URL-адрес - це діагностичний інструмент, який знаходиться в Пошуковій консолі Google, що надає вам інформацію про індексовану Google версію вашої веб-сторінки, а також дозволяє перевіряти URL-адреси в реальному часі і переглядати відображену версію сторінки, серед іншого.
Він також дозволяє надсилати окремі сторінки до Google.
Якщо ви хочете запросити індексацію нової URL-адреси - або повторне сканування і повторну індексацію оновлених URL-адрес - ви можете повідомити Google про це, натиснувши кнопку "Запросити індексацію". Якщо у вашій актуальній URL-адресі немає помилок, Google додасть вашу сторінку до черги сканування.
Зверніть увагу, що існує обмеження на кількість URL-адрес, які ви можете запитувати для індексації в день.
3. Додайте внутрішні посилання для кращої/швидшої відкриваності
Ще один спосіб заохотити сканування і, в свою чергу, прискорити індексацію сайту - використовувати внутрішню перелінковку.
Скануючи Інтернет, пошукові роботи Google йдуть шляхом, утвореним посиланнями. Отже, коли одна сторінка вашого сайту посилається на іншу, ці роботи йтимуть існуючим шляхом - і відкриватимуть новий вміст.
Сторінки без внутрішніх посилань називаються "сирітськими".
Ось чому вкрай важливо переконатися, що ви забезпечили внутрішні посилання, які ведуть на найважливіші сторінки та з них. Звичайно, це відбувається природно, коли ви створюєте добре організований сайт.
Однак не завадить перевірити, чи немає на вашому сайті "сирітських" сторінок, тобто сторінок, на які не ведуть внутрішні посилання. Ви можете зробити це за допомогою інстр ументу "Аудит сайту" від Ranktracker.
До речі, вам слід переконатися, що ці внутрішні посилання, які вказують на сторінки, що індексуються, не мають тегу "nofollow", оскільки Google не сканує посилання nofollow.
Поширені запитання
Яка роль файлу Robots.txt в індексації?
Файл robots.txt містить інструкції для пошукових роботів, які сторінки або розділи вашого сайту не повинні скануватися, що впливає на доступність для пошуку і, як наслідок, на індексацію ваших сторінок.
Як перевірити, чи проіндексовані мої сторінки?
Ви можете перевірити, чи проіндексовані ваші сторінки, за допомогою Пошукової консолі Google. Цей інструмент дає уявлення про стан індексації ваших URL-адрес.
Як впливають порожні сторінки на індексацію?
Порожні сторінки, які не мають внутрішніх посилань, що вказують на них, з меншою ймовірністю будуть виявлені та проіндексовані пошуковими системами. Забезпечення всіх важливих сторінок сайту хорошими посиланнями покращує їхню індексацію.
Переконавшись, що ваші сторінки доступні для сканування, не містять тегів "noindex" і н алежним чином канонізовані, ви можете підвищити їхні шанси бути проіндексованими і з'явитися в результатах пошукової видачі. Регулярний аудит і стратегічна внутрішня перелінковка можуть додатково сприяти досягненню цієї мети.
