Що таке деіндексація?
Деіндексація - це практика видалення веб-сторінки або веб-сайту зі сторінок результатів пошукової видачі (SERP). Цей процес може бути ініційований як власником веб-сайту, так і пошуковою системою.
Причини деіндексації
-
Ініційований блогерами:
- Блогери або власники веб-сайтів можуть деіндексувати контент, який вони не хочуть бачити на сторінках результатів пошуку, наприклад, низькоякісні або приватні сторінки, такі як сторінки подяки, ціль ові сторінки, авторські сторінки та сторінки для входу в систему.
-
Ініційовані пошуковими системами:
- Пошукові системи зазвичай деіндексують контент, який порушує їхні правила. Google, наприклад, деіндексує сайти, які порушують його політику щодо спаму, після того, як ручна перевірка підтверджує порушення.
Чому Google деіндексує мій сайт?
Google деіндексує ваш сайт, якщо ви вдаєтеся до дій, що суперечать його політиці щодо спаму. Ці правила - це рекомендації, яких повинні дотримуватися власники сайтів, щоб їхній контент з'являвся на сторінках результатів пошуку Google.
Як деіндексувати вміст зі сторінок результатів пошуку
Використання метатега Noindex
Мета-тег noindex запобігає появі веб-сторінок у результатах пошуку. Щоб деіндексувати сторінку, додайте наступний мета-тег noindex до тегу head HTML-коду сторінки:
<meta name="robots" content="noindex"> </meta name="robots" content="noindex">
Так виглядає код, доданий до тегу head HTML-коду сайту:
<!DOCTYPE html> <html> <head> <meta name="robots" content="noindex"> (...) </head> <body> (...) </body> </html> </html>
Ви також можете вказати певним пошуковим роботам не індексувати веб-сторінку, замінивши robots
на ім'я бота пошукової системи:
<meta name="googlebot" content="noindex"> </meta name="googlebot" content="noindex">
Використання тегу X-Robots-Meta
Тег X-Robots-Meta корисний для блокування веб-сторінок і не-HTML-елементів, таких як зображення, відео та PDF-файли, від показу в результатах пошуку. Ви можете заблокувати появу веб-сторінки або ресурсу в результатах пошуку за допомогою наступного тега X-Robots-Meta:
X-Robots-Tag: noindex
Цей тег налаштовується на стороні сервера або через файли конфігурації сервера, або за допомогою серверної скриптової мови, наприклад, PHP:
<?php header('X-Robots-Tag: noindex'); ?> </p> <?php header('X-Robots-Tag: noindex'); ?>
Деіндексація в WordPress
WordPress дозволяє заборонити пошуковим системам індексувати ваш сайт. Для цього перейдіть до Панелі управління WordPress → Налаштування → Читання
, увімкніть Заборонити пошуковим системам індексувати цей сайт
і натисніть Зберегти зміни
.
Щоб попрос ити Google повторно просканувати і деіндексувати ваш сайт, перейдіть до Пошукової консолі Google, введіть URL-адресу сайту в поле "Перевірка URL" і натисніть ЗАПРОСИТИ ІНДЕКСУВАННЯ
.
Поширені запитання
-
Чи можу я додати мета-тег Noindex до файлу robots.txt?
- Файл robots.txt не підтримує мета-тег noindex. Замість цього використовуйте мета-тег noindex в тезі head HTML-коду.
-
Чи потрібно блокувати веб-сторінку у файлі robots.txt?
- Не блокуйте веб-сторінку у файлі robots.txt. Google повинен мати доступ до сторінки і сканувати її, щоб правильно обробити директиву noindex.
-
Що станеться, якщо я додам правило Noindex на веб-сторінці протягом тривалого періоду?
- Google припинить сканувати будь-яку веб-сторінку, яка була оголошена неіндексованою протягом тривалого періоду часу, навіть якщо до неї буде додано атрибут follow.
-
Чи можна деіндексувати дублікати сторінок?
- Не деіндексуйте сторінки-дублікати. Замість цього використовуйте елемент посилання
rel="canonical
", щоб вказати оригінальну версію сторінки.
- Не деіндексуйте сторінки-дублікати. Замість цього використовуйте елемент посилання
Висновок
Деіндек сація є цінною практикою для управління видимістю ваших веб-сторінок у результатах пошуку. Розуміючи причини і методи деіндексації, ви можете гарантувати, що тільки найбільш релевантний і якісний контент вашого сайту буде проіндексований і відображений пошуковими системами.