Издөө тутумдарынан айрым баракчаларды же толугу менен сайтты алып салуу милдети веб-мастерде, маалыматты өзгөрткөндө, доменди өзгөрткөндө, бир нече ресурстарды бириктиргенде жана башка бир катар себептерде кездешет. Каалаган натыйжага жараша маселени чечүүнүн бир нече жолу бар.
Нускамалар
1 кадам
Индекстелбей турган баракты жок кылыңыз, ошондо сервер тандалган HTTP / 1.1 веб баракчасына өтүүгө аракет кылганда ката жөнүндө кабар берет 404 Табылган жок. Тандалган өзгөртүүлөрдү колдонуу үчүн, роботтун талап кылынган баракчага кайрадан кирүүсүн күтүшүңүз керек.
2-кадам
Издөө тутумун индекстөөдөн тандалган бөлүмдөрдү же баракчаларды алып салуу үчүн роботтун түпкү robots.txt файлын колдонуңуз. Издөө тутумунда администратор панелинин көрсөтүлүшүн алдын алуу үчүн, буйрукту колдонуңуз: User-Agent: * Diaallow: / admin / Же, тандалган баракты индекстөөдөн чыгаруу үчүн, маанисин киргизиңиз: User-Agent: * Уруксат: / selected_page.html # Өзгөртүүлөрдү колдонуу үчүн, робот кайрадан тандалган баракчага өтүшү керек.
3-кадам
HTML кодунда көрсөтүлгөн эрежени бардык керектүү беттерге кошуу үчүн мета-тегдөө ыкмасын колдонуңуз: Бул керексиз баракчаларды издөө тутумунан алып салуу үчүн керек.
4-кадам
Баракчанын кодунда көрсөтүлбөгөн http-аталышка буйруктарды киргизүү үчүн X-Robots-Tag түзүү ыкмасын тандаңыз: X-Robots-Tag: noindex, nofollow Бул ыкма тандалган барактарды же бөлүмдөрдү индекстөөдөн чыгаруу үчүн эң пайдалуу. чет элдик издөө каражаттары.
5-кадам
Yandex: https://webmaster.yandex.ru/deluri.xml же Google: https://www.google.com/webmasters/tools веб-мастерлеринин көзөмөлдөөчү атайын барагын колдонуңуз. Бул каалаган нерсени көрсөтүүгө тыюу салуу үчүн жасалды. тандалган издөө тутумундагы баракча, бөлүм же толугу менен сайт.