Дээрлик ар бир веб-мастер өз сайтындагы баракчаларды мүмкүн болушунча көп индекстелген элементтерди алгандай кылып оптималдаштырууга аракет кылат. Бирок кээ бир учурларда, тескерисинче, айрым баракчаларды жашырышыңыз керек, мисалы, каттоо маалыматтарын киргизүү формасы, паролдорду калыбына келтирүү ж.б.
Ал зарыл
Robots.txt файлын түзөтүү
Нускамалар
1 кадам
Бир нече бөлүмдүн же белгилүү бир сайттын индекстелишин жабуунун эң оңой жолу - robots.txt файлына тиешелүү жазууларды киргизүү. Ал издөө тутумдары үчүн колдонмо катары колдонулат. Сайттын баракчаларына киргенде издөө роботу бул файлга шилтеме берет, эгер ал жок болсо, анда ал сайттын бардыгын индекстейт, болбосо бул файлда көрсөтүлгөн сунуштарды аткарат.
2-кадам
Эгерде сиз өзүңүздүн сайтыңызды түзгөн болсоңуз жана сизде тыюу салынган тексттик документ түрүндө мындай тиркеме жок болсо, анда аны өзүңүз түзүү оңой. Жаңы текст документин ачыңыз, мисалы Блокнот программасын колдонуп. Документтин негизги бөлүгүнө төмөнкү саптарды жайгаштырыңыз: User-agent: * Уруксат бербөө: /file.htmlDisallow: / directory /
3-кадам
Эми издөө тутумун тапшырма катары эмне сураганыңызды аныктайлы. Колдонуучу-агенттин маңдайындагы "*" белгиси бул көрсөтмөнү бардык файлдык тутумдар аткарышы керектигин билдирет. Мисалы, "*" ордуна "Yandex" деп жазсаңыз, анда бул кайрылууну Yandex издөө тутумунун роботу гана окуйт. Билдирүүлөргө тыюу салуу, белгилүү бир бөлүктү (каталогду) же файлды (.html файлы) индекстөөгө тыюу салат.
4-кадам
Robots.txt файлын түзгөндөн кийин, түз эле сайттын баракчаларындагы тексттерге өтсөңүз болот. Белгилүү болгондой, издөө тутумдарында сиздин баракчаларыңызда 3төн ашык тышкы активдүү шилтемелердин болушу жакпайт. Мурунуздан кан кетүү керек болсо, бирок 5 же андан көп шилтемелерди жайгаштырсаңыз кандай болот. Бул учурларда атрибутту же тегди колдонсоңуз болот.
5-кадам
Google издөө тутуму тарабынан индекстелген шилтемелерди жабуу үчүн, шилтемени төмөнкү формага келтиришиңиз керек: анкердик шилтемелер. Атрибуттун тулку бөлүгү шилтеменин каалаган бөлүгүнө киргизилиши керек, аны боштук менен ажыратууну унутпоо керек, б.а. атрибут "a" менен "href" ортосунда же шилтеме менен анын казыктарынын ортосунда жайгаштырылышы мүмкүн.
6-кадам
Yandex издөө тутуму тарабынан индекстелүүчү шилтемелерди жабуу үчүн, шилтемени төмөнкү формага келтиришиңиз керек: анкердик шилтеме. Теги шилтеменин башында жана аягында жайгаштырылат. Бул тег жупташтырылгандыгын унутпаңыз: экинчи бөлүгү, биринчи бөлүгүнөн айырмаланып, "/" белгиси менен келет.
