Що таке повзучість?
Доступність - це здатність пошукових роботів, таких як Googlebot, отримувати доступ до сторінок і ресурсів веб-сайту. Проблеми з доступністю можуть негативно вплинути на органічну пошукову видачу сайту. Важливо відрізняти доступність від індексованості. Остання відноситься до здатності пошукової системи аналізувати сторінку і додавати її до свого індексу. Тільки сторінки, які можна переглядати та індексувати, можуть бути знайдені та проіндексовані Google, тобто з'являтися в результат ах пошукової видачі.
Чому важлива повзучість?
Для будь-якого сайту, який має намір отримувати органічний пошуковий трафік, дуже важливою є доступність для перегляду. Вона дозволяє пошуковим системам сканувати сторінки, читати і аналізувати їхній вміст, щоб додати його до пошукового індексу. Сторінка не може бути правильно проіндексована без сканування. Хоча Google іноді може проіндексувати URL-адресу без сканування на основі тексту URL-адреси і тексту анкорів зворотних посилань, заголовок і опис сторінки не будуть відображатися в результатах пошуку.
Доступність для сканування важлива не тільки для Google. З різних причин сторінки сайту повинні сканувати й інші пошукові роботи. Наприклад, бот Site Audit від Ranktracker сканує сторінки сайту, щоб перевірити стан SEO і повідомити про будь-які проблеми з SEO.
Що впливає на пошукову оптимізацію сайту?
1. Відкриваність сторінки
Перш ніж сканувати веб-сторінку, пошуковий робот повинен її знайти. Сторінки, яких немає в карті сайту або які не мають внутрішніх посилань (так звані "сирітські сторінки"), не можуть бути знайдені пошуковим роботом, а отже, н е можуть бути проскановані або проіндексовані. Якщо ви хочете, щоб сторінка була проіндексована, вона повинна бути включена в карту сайту і мати внутрішні посилання (в ідеалі - і те, і інше).
2. Посилання Nofollow
Googlebot не переходить за посиланнями з атрибутом "rel=nofollow". Якщо на сторінці є, наприклад, лише одне посилання nofollow, то з точки зору сканування це дорівнює відсутності посилань взагалі.
3. Файл Robots.txt
Файл robots.txt вказує пошуковим роботам, до яких частин вашого сайту вони можуть отримати доступ, а до яких ні. Якщо ви хочете, щоб сторінка була доступна для сканування, вона не повинна бути заборонена в robot.txt.
4. Обмеження доступу
Веб-сторінки можуть мати певні обмеження, які не дозволяють сканерам дістатися до них, наприклад
- Якась система входу в систему
- Чорний список користувачів-агентів
- Чорний список IP-адрес
Як виявити проблеми з пошуковою оптимізацією вашого сайту
Найпростіший спосіб виявити проблеми з пошуковою оптимізацією сайту - скористатися SEO-інструментом, таким як Ranktracker's Site Audit або безкоштовни ми інструментами для веб-майстрів Ranktracker.
Ranktracker Webmaster Tools може сканувати весь сайт, відстежуючи нові або повторювані проблеми з плином часу. Крім того, він розбиває проблеми на різні категорії, допомагаючи вам краще зрозуміти загальну ефективність SEO вашого сайту і причини, чому ваш сайт не може бути просканований.
Поширені запитання
У чому різниця між індексованістю та індексуванням?
Пошукова доступність - це здатність пошукової системи отримати доступ до веб-сторінки та переглянути її вміст. Індексованість - це здатність пошукової системи аналізувати вміст, який вона сканує, щоб додати його до свого індексу. Сторінка може бути доступною для сканування, але не індексованою.
Чи може веб-сторінка бути проіндексована в Google без сканування?
Дивно, але Google може індексувати URL-адресу без сканування, дозволяючи їй з'являтися в результатах пошуку. Однак це трапляється рідко. Коли це трапляється, Google використовує текст якоря і текст URL-адреси, щоб визначити мету і тематику сторінки. Зверніть увагу, що в цьому випадку Google не показує заголовок сторінки. Це явище коротко пояснюється в Google's Introduction to robots.txt.
Щоб дізнатися більше про те, як покращити SEO вашого сайту та забезпечити належну пошукову оптимізацію, відвідайте Блог Ranktracker і вивчіть наш всеосяжний SEO-довідник. Крім того, ознайомтеся з ключовими термінами і поняттями SEO в нашому SEO-словнику.
