Як видалити сайт з пошукача

Існує безліч способів видалення сайту з пошукових систем.

Перший і найпростіший із способів видалення результатів запитів з ПС - видалення сторінки з самого сайту або повне видалення CMS сайту через FTP-з`єднання. Через кілька днів пошукова система зробить апдейт бази і видалить посилання на ваш ресурс з результатів пошуку.

Найпопулярніший серед веб-майстрів спосіб захистити від індексації сайт, окремі його розділи або сторінки, і тим самим викинути посилання з результатів пошуку - це редагування файлу robots.txt.

Закрити окрему сторінку від індексації можна, скориставшись кодом:

User-Agent: *
Disallow: /page.html (закриття сторінки page.html)

В інтернеті існує безліч авторських інструкцій із застосування кодів для файлу robots.txt.

Третій спосіб видалити сторінки сайту з пошукових систем - використовувати мета-тег robots в його сторінках. Тег прописується в HTML-коді приховуваних сторінок між тегами.

Таким чином, після переиндексации сайту ПС, сторінки з даними мета-тегом випадуть з пошуку. Недолік даного методу в тому, що багато сучасних сайти використовують tpl-шаблони, а це значить, що доведеться змінювати код вручну сотням, а може і тисячам сторінок.

Четвертий спосіб видалення сайтів з пошукових систем - використання заголовків X-Robots-Tag. Суть цього заголовка схожа на використання попереднього мета-тега, проте запис повинна бути розташована в http-заголовки:

X-Robots-Tag: noindex, nofollow

Найефективніший спосіб видалення сайту (цілком) з пошукових систем - це його видалення з панелі вебмастера. Після апдейта (3-7 днів) сайт буде недоступний для пошукової системи. Панель вебмастера доступна для пошукових систем Яндекс (https://webmaster.yandex.ru/delurl.xml) і Google (https://webmaster.yandex.ru/delurl.xml).