Qanday Google indeksi bir sayt yoki uning parchalarini olib tashlash uchun

Google tomonidan qabul qilingan katalog yaratish konsepsiyasiga ko'ra, to'liqligi uchun ma'lumot va natijalarini berish qidirish so'rovi, uning muvofiqlik xolisligini tashkil qildi. indeks spam uchun noqonuniy kontent yoki manba veb-sayt tushsa, bu sayt sahifalar umumiy ma'lumotlar bazasi qidiruvi, belgilangan qilinmaydi. Biz uchun bu o'rganish muhim ahamiyatga ega bo'lgan sayt olib tashlash uchun qanday qidiruv serveri natijalari berish dan.

nol indeksleme Google variantlari

Yangi resurslar haqida ma'lumot to'plash uchun bir dastur - - Qidiruv robot marta sahifasi tomonidan sayt sahifasini ko'zdan kechiradi, keyin, ajralish uchun Google siyosati talablariga ostida, u tizzasiga bo'ladi. indeks va ayni vaqtda bekatida qidiruv - Lekin biz ham qanday qilib bir robots.txt orqali qidiruv motorlar uchun vebsaytiga yoki parchalarini olib tashlash uchun sizga ko'rsataman.

sayt joylashgan qaysi server ildiz papkasida, bir muayyan matn maydoni hosil qiladi, bir butun sifatida resurs berish dışlanacak - robots.txt dedi. Bu hudud o'qib ko'rsatmalarga ko'ra izlash motorlar bilan muomala va harakat qilinadi.

Agar foydalanuvchi kirish ega bo'lsa ham, Google qidiruvi katalog sahifa, man ko'rish uchun, u yodda tuting. brauzer 401 yoki 403 bilan javob qachon "Access bekor", aksincha, uni bu uchun to'plab dasturlari ko'ra, faqat mehmonlar uchun amal qiladi qidiruv tizimi.

tushunish uchun olib tashlash uchun qanday qidiruvi, endekslemesini sayt, bir matn ko'rsatkich quyidagi qatorlarni kirishingiz zarur:

User-agent: Googlebot

Disallow: /

Bu indeks uchun brauzer uchun sayt barcha kontent harom ko'rsatadi. Bu erda gap bir sayt olib tashlash uchun qanday aniqlangan ikkinchi ro'yxatda resurs keshlash olmaydi, shunday qilib, Google.

turli protokollar uchun skanerlash qoidalarning

Agar gipermatnli uchun alohida-alohida, masalan, Google indekslarini uchun maxsus qoidalar tatbiq kerakli qaysi individual aloqa standartlari, ro'yxatlash uchun kerak bo'lsa, protokollar HTTP / HTTPS, quyidagi tarzda (misol) ham robots.txt ro'yxatdan uchun ham zarur bo'ladi.

(Http://yourserver.com/robots.txt) - saytingiz domen nomi (har qanday)

User-agent: * - har qanday qidiruvi

/ - To'liq endeksleme imkon: ruxsat berish

masala butunlay https protokoli uchun saytga olib tashlash uchun qanday

(Https://yourserver.com/robots.txt):

User-agent: *

Disallow: indeksleme haqida / to'liq man

Google SERPs dan tezlashtirilgan ko'chirish URL- resurs manzillari

Agar qayta indeksatsiya kutish istamayman, va sayt siz kabi yashirish bo'lsangiz, men iloji boricha qisqa vaqt ichida xizmat http://services.google.com/urlconsole/controller foydalanish uchun tavsiya etiladi. Pre robots.txt sayt o'zak katalogda joylashtirilgan bo'lishi kerak. Bu tegishli ko'rsatmalar belgilangan bo'lishi kerak.

negadir ko'rsatkich ildiz katalogga ajratish mumkin bo'lmasa, qidirish motorlar yashirishni istagan qaysi maqsadlar bilan papkasida etarli uni yaratish. avtomatik ravishda gipermatnli manzillar olishdan xizmatiga Buning va murojaat so'ng, Google robots.txt bir qusur amalga yozilganligiga papkalarni ko'rish bo'lmaydi.

Bu ko'zga ko'rinmas davri 3 oy davomida o'rnatiladi. Bu davrda so'ng, masala yechib katalog, yana Google server tomonidan amalga oshiriladi.

H ow qisman tekshirish uchun saytga olib tashlash uchun

a izlash bot robots.txt mazmunini o'qish bo'lsa, ayrim qarorlari o'z mazmuni asosida amalga oshiriladi. Siz anatom deb nomlangan butun katalogini ko'rsatib kelgan istisno istayman aytaylik. Bunday qoidalarning buyurish kifoya:

User-agent: Googlebot

Disallow: / anatom

Yoki, masalan, barcha tasvir turlari .gif emas indeksi istayman. Buning uchun quyidagi ro'yxatni qo'shish:

User-agent: Googlebot

Disallow: /*.gif$

Bu erda yana bir misol. indeks kirish turiga qo'shib esa, ularni, dinamik ravishda hosil sahifalar haqida ma'lumot ajratishda o'chirib bo'lsin:

User-agent: Googlebot

Disallow: / *?

Bu haqida, va qidirish motorlar uchun qoidalar tashqariga Kuf. Yana bir narsa, u faqat bu metan kirish foydalanish ancha qulay hisoblanadi. Va rahbarlari tez-tez qidirish mexanizmlarini ishlashini tartibga soluvchi faqat bunday standarti foydalaning. Lekin, biz kelajakda maqolalarida bu muhokama olaman.