Saytni indekslash qidiruv tizimlari har bir webmaster uchun muhim. Axir, loyihani yuqori sifatli targ'ib qilish uchun siz uning indekslanishini kuzatishingiz kerak. Yandex-da indekslashni tekshirish jarayonini tasvirlab beraman.

Yandex-da indekslash

Yandex roboti "mazali" narsani izlash uchun saytlarni kundan-kunga skanerlaydi. Uning fikricha, eng munosib saytlar va sahifalarni yuqori natijalarga to'playdi. Xo'sh, yoki Yandex shunchaki shunday qilishni xohladi, kim biladi :)

Biz, haqiqiy veb-ustalar sifatida, sayt qanchalik yaxshi tuzilgan bo'lsa, uning mavqei shunchalik yuqori bo'ladi va trafik shunchalik ko'p bo'ladi, degan nazariyaga amal qilamiz.

Yandex-da saytlarni indekslashni tekshirishning bir necha yo'li mavjud:

• Yandex Webmaster-dan foydalanish;
• qidiruv tizimi operatorlaridan foydalanish;
• kengaytmalar va plaginlardan foydalanish;
• onlayn xizmatlardan foydalanish.

Yandex Webmaster-da veb-sayt sahifalarini indekslash

Qidiruv tizimi bizning saytimizda nimani qazib olganini tushunish uchun siz "Indekslash" bo'limida bizning sevimli Yandex Webmaster-ga o'tishingiz kerak.

Yandex Webmaster-da statistikani chetlab o'tish

Birinchidan, "Bypass Statistika" bandiga o'tamiz. Ushbu bo'lim sizga robot saytingizning qaysi sahifalarini skanerlashini aniqlash imkonini beradi. Sayt joylashgan server mavjud emasligi yoki sahifalar tarkibidagi xatolar tufayli robot yuklay olmagan manzillarni aniqlashingiz mumkin.

Bo'limda sahifalar haqida ma'lumotlar mavjud:

• yangi - yaqinda saytda paydo bo'lgan sahifalar yoki robot ularni hozirgina o'rganib chiqdi;
• o'zgartirilgan - Yandex qidiruv tizimi ilgari ko'rgan sahifalar, lekin ular o'zgargan;
• skanerlash tarixi - serverning javob kodini (200, 301, 404 va boshqalar) hisobga olgan holda Yandex skanerlagan sahifalar soni.

Grafikda yangi (yashil) va o'zgartirilgan (ko'k) sahifalar ko'rsatilgan.

Va bu skanerlash tarixining grafigi.

Ushbu element Yandex tomonidan topilgan sahifalarni ko'rsatadi.

Yo'q - URL robotga ma'lum emas, ya'ni. robot uni ilgari hech qachon uchratmagan.

Skrinshotdan qanday xulosalar chiqarish mumkin:

1. Yandex /xenforo/xenforostyles/ manzilini topa olmadi, bu aslida mantiqiy, chunki bu sahifa endi mavjud emas.
2. Yandex /bystrye-ssylki-v-yandex-webmaster/ manzilini topdi, bu ham juda mantiqiy, chunki yangi sahifa.

Shunday qilib, mening vaziyatimda Yandex Webmaster men ko'rishni kutgan narsalarni aks ettiradi: nima kerak emas, Yandex olib tashlandi va nima kerak, Yandex qo'shdi. Bu shuni anglatadiki, bypass bilan hamma narsa yaxshi, hech qanday to'siqlar yo'q.

Qidiruvdagi sahifalar

Qidiruv natijalari doimiy ravishda o'zgarib turadi - yangi saytlar qo'shiladi, eskilari o'chiriladi, qidiruv natijalaridagi pozitsiyalar o'rnatiladi va hokazo.

Siz "Qidiruvdagi sahifalar" bo'limidagi ma'lumotlardan foydalanishingiz mumkin:

• Yandex-dagi sahifalar sonidagi o'zgarishlarni kuzatish;
• qo'shilgan va chiqarib tashlangan sahifalarni kuzatish;
• saytni qidiruv natijalaridan chiqarib tashlash sabablarini aniqlash;
• qidiruv tizimi saytga tashrif buyurgan sana haqida ma'lumot olish;
• qidiruv natijalaridagi o'zgarishlar haqida ma'lumot olish.

Ushbu bo'lim sahifalarni indekslashni tekshirish uchun kerak. Bu yerda Yandex Webmaster qidiruv natijalariga qo'shilgan sahifalarni ko'rsatadi. Agar sizning barcha sahifalaringiz bo'limga qo'shilsa (yangisi bir hafta ichida qo'shiladi), unda hamma narsa sahifalar bilan tartibda.

Operatorlar yordamida Yandex indeksidagi sahifalar sonini tekshirish

Yandex Webmaster-ga qo'shimcha ravishda siz to'g'ridan-to'g'ri qidiruvning o'zida operatorlar yordamida sahifaning indekslanishini tekshirishingiz mumkin.

Biz ikkita operatordan foydalanamiz:

• "sayt" - ko'rsatilgan saytning barcha subdomenlari va sahifalarida qidirish;
• "xost" - ma'lum bir xostda joylashtirilgan sahifalarni qidiring.

Keling, "sayt" operatoridan foydalanamiz. Operator va sayt o'rtasida bo'sh joy yo'qligini unutmang. Yandex qidiruvida 18 sahifa mavjud.

Keling, "host" operatoridan foydalanamiz. Yandex tomonidan indekslangan 19 sahifa.

Plaginlar va kengaytmalar yordamida indekslashni tekshirish

Xizmatlar yordamida saytni indekslashni tekshiring

Bunday xizmatlar juda ko'p. Men sizga ikkitasini ko'rsataman.

Serphunt

Serphunt - bu veb-saytlarni tahlil qilish uchun onlayn xizmat. Ular sahifani indekslashni tekshirish uchun foydali vositaga ega.

Bir vaqtning o'zida ikkita qidiruv tizimi - Yandex va Google yordamida 100 tagacha veb-sayt sahifalarini tekshirishingiz mumkin.

Sahifaning indekslanishini tekshirish uchun uni ro'yxatga qo'shing:

"Skanerlashni boshlash" tugmasini bosing va bir necha soniyadan so'ng biz natijaga erishamiz:

Bir qator SEO tahliliy vazifalari uchun qidiruv tizimi qaysi vaqtdan boshlab mavjudligi to'g'risida "bilish" ni aniqlash kerak. maxsus sahifa. Yandex-da hujjatning yoshini aniqlashning keng tarqalgan usullaridan biri modtime parametrini olish uchun Yandex.Xml yordamida urlni qidirishdir. "&how=tm" parametrining buzilishi tufayli usul yanada mashhurlikka erishdi.

Bu qulay va tez bo'lib chiqdi, xayriyatki, https://xml.yandex.ru/test/ saytida vizual interfeys mavjud. Lekin men katta shubha bilan Men bu usul bilan bog'lanaman.

Modtime bilan nima xato?

Birinchidan, xizmat ko'rsatish hujjatlarida faqat quyidagilar ko'rsatilgan:

Shunday qilib, teg birinchi indekslash sanasini ko'rsatadi degan fikr butunlay SEO odamlariga tegishli.

Ikkinchidan, Yandex.Xml foydalanuvchilari, yumshoq qilib aytganda, qidiruv tizimi uchun eng muhim mijozlar emas. Kirish bepul, u erda hech qanday reklama yo'q. Nima uchun Yandex MChJ xml parametrlarining aniqligi, dolzarbligi va ishonchliligi haqida qayg'uradi? Garchi siz hali ham bunga ishonishingiz mumkin - yaxshi, yaxshi dasturchilar hamma narsani yaxshi qilishadi. Lekin nima uchun taqdim eting hujjatsiz xususiyatlar- bu mutlaqo tushunarsiz.

Biroq, bularning barchasi qo'shiq matni va mening taxminlarim. Keling, faktlarga to‘xtalib o‘tamiz.

"Yandex nuqtai nazaridan hujjat yoshi" nima?

Mantiq va Google menga aytganidek, bu birinchi indekslashdan beri o'tgan vaqt. Ko'pincha biz aynan shu narsaga qiziqamiz - sahifa qaysi kundan boshlab trafikni jalb qila boshlagan, yosh to'plangan va hokazo.

Aslida u farq qiladi. Misol uchun uzoqdan izlash shart emas.

Keling, smmup.ru eski sevimli mashg'ulotim loyihasining bir nechta sahifalari uchun modtimeni tekshirib ko'raylik.

Manzil	Modtimedan olingan sana
/	20140916T170528	2014-09-16
/activity.php	20150422T103533	2015-04-22
/target.php	20150208T173922	2015-02-08
/kogda.php	20141112T210047	2014-11-12

Men allaqachon maqolada resurs tarixi haqida yozganman Uzoq vaqt davomida u Yandex tomonidan to'g'ri indekslanmagan. Men Platon bilan 2015 yil 20 apreldagi yozishmalarni saqlab qoldim. Ayni paytda qidiruvda faqat bitta sahifa bor edi - asosiysi.

Ya'ni, kamida ikkita url uchun modtime indeksda paydo bo'lish sanasi bo'lmagan. /kogda.php uchun ushbu parametrdan olingan qiymat va yakuniy indekslash vaqti o'rtasidagi farq deyarli olti oy! Hujjat indeksda yo'q - lekin modtime allaqachon tajribaga ega (askar uxlayapti - xizmat davom etmoqda).

Bu nimani anglatadi? Biroz mubolag'a qilish uchun: biz so'rov bo'yicha raqobatchilarni tahlil qildik, u erda bir nechta eski sahifalarni ko'rdik, qo'rqib ketdik va bu borada oldinga siljimadik. Va raqobatchilarning yarmi aslida uzoq vaqt davomida qattiq filtrlar ostida bo'lgan va ularni engish unchalik qiyin emas.

Vaziyat nazariy, oddiygina tasvirlangan aniq misol, nima uchun modtimega tayanish juda ehtiyotkorlik bilan amalga oshirilishi kerak.

Ammo bu hali ham gullar.

Modtime haqiqiy indekslashdan KECHroq sanani o'z ichiga olishi mumkin

smmup.ru holatida biz kamida modtimeni robotning birinchi tashrifi vaqti deb talqin qilishimiz mumkin. Sanalar saytdagi sahifalarning haqiqiy ko'rinishi bilan yaxshi bog'liq.

Mana yana bir misol. Bu erda men hamma narsa qaerdan kelib chiqqanligi haqida faraz aytishga jur'at etolmayman.

• Mening blogimda indekslash bilan bog'liq muammolar yo'q (ayniqsa, bu maqola bir nechta mashhur guruhlarda qayta nashr etilganidan beri).
• Qayta yo'naltirish, manzillarni o'zgartirish yoki shunga o'xshash narsalar yo'q edi.

Oxirgi shubhalarni yo'q qilish uchun:

Ya'ni: modtime sahifaning yoshini sezilarli darajada kam baholadi.

Ushbu misol roppa-rosa 2 daqiqada topildi (men shunchaki blog sahifalari parametrini qo'shimcha fokuslarsiz ko'rib chiqdim), bu bunday natijalarning yuqori darajada tarqalishini ko'rsatadi. Bundan tashqari, men tekshirgan saytlarda shunga o'xshash ko'plab holatlarni ko'rdim (aniq sabablarga ko'ra ularni ko'rsatmayman), ba'zida xatolik yillar edi.

Natijalar

1. Modtime har doim ham to'g'ri indeksatsiya sanasini ko'rsatmaydi (aslida Yandex-dan hech kim buni va'da qilmagan).
2. Sahifalarning yoshini aniqlashda faqat ushbu parametrga tayaning bu taqiqlangan. Natijalar ishonchsiz.
3. Shuning uchun uni raqobatchilarning veb-saytlarini tahlil qilish uchun ishlatish katta savol. Siz o'zingizning loyihalaringiz bilan ishlashda foydalanishingiz mumkin - nazorat qilish uchun boshqa ma'lumotlar mavjudligi tufayli. Biroq, bu yo'l bilan hal qilinishi mumkin bo'lgan muammolar doirasi ancha tor.

Qo'shimcha talqinlar va qiziqarli misollarni olishdan xursand bo'laman!

p.s. FBda ushbu mavzu bo'yicha uzoq va unchalik samarali bo'lmagan munozara bo'ldi. Ehtimol, men maqolaning xabarini etarlicha shakllantira olmadim. Gap modtime bilan bog'liq ba'zi nosozliklar mavjudligida emas. Yandex bir sababga ko'ra sahifaning "yoshi" ni tiklashi mumkinligi aniq. Asosiysi, bu misollar quyidagilarni ko'rsatadi: a) siz birinchi indekslash sanasi sifatida modtimega tayanolmaysiz b) modtime bo'yicha yoshni "qayta o'rnatish" sahifani to'plangan omillardan to'liq tozalashni anglatishiga ishonch yo'q. yoki bilvosita yoshga bog'liq.

Sahifaning birinchi indekslangan sanasini olishning ikkita usuli ishlamay qoldi:

• sana operatori to'g'ri ishlamayapti;
• so'rovlar qatoriga &how=tm parametrini qo'shish endi indekslash sanalarini ko'rsatmaydi.

Ammo bu ma'lumotni Yandex XML orqali olish mumkin. Buni amalga oshirish uchun siz https://xml.yandex.ru/test/ havolasiga o'tishingiz kerak va "&so'rov" maydoniga url:%page% kabi so'rovni kiriting, bu erda %page% sahifa manzili. Keyin, "Topish" tugmasini bosing va natijada biz sahifa birinchi marta indekslangan sanani ko'rsatadigan tegni qidiramiz.

Qidiruv roboti tomonidan skanerlash sanasi va qidiruv ma'lumotlar bazasidagi holat

Sahifani oxirgi marta skanerlash sanasi va qidiruv natijalarini yaratishda qaysi versiya joylashganligi haqida ma'lumot olish uchun Yandex.Webmaster xizmatida "Indekslash" bo'limida "URL holatini tekshirish" ni tanlashingiz kerak. Keyin kerakli manzilni ko'rsating va ma'lumotlarni oling. Bu usul faqat tasdiqlangan sayt uchun ishlaydi.

Saqlangan nusxaning yaratilgan sanasi

Saqlangan nusxaning yaratilgan sanasini bilish uchun qidiruv natijalarida (sahifa manzili nomining yonida) ochiladigan menyuni bosishingiz kerak.

Bing va Mail qidiruv tizimlarida saqlangan nusxalarni ko'rish sahifalarning eski versiyalarini ko'rsatadi, chunki ular Yandex va Google qidiruv robotlariga qaraganda sekinroq qayta indekslanadi.

Xulosa

1. Yuqoridagi misolda ko'rsatilganidek, sahifaning saqlangan nusxasi har doim ham indeks bazasini yaratish uchun ishlatilmaydi. Ammo, ko'pincha, bu haqiqat.
2. Bundan tashqari, agar siz sahifaga biron bir o'zgartirish kiritgan bo'lsangiz va ushbu o'zgarishlar qayta indekslanishini kutayotgan bo'lsangiz, qidiruv roboti tomonidan so'nggi skanerlash sanasi asosida o'zgarishlar hisobga olingan degan xulosaga kelmasligingiz kerak.

Sahifaning birinchi indekslangan sanasini olishning ikkita usuli ishlamay qoldi:

• sana operatori to'g'ri ishlamayapti;
• so'rovlar qatoriga &how=tm parametrini qo'shish endi indekslash sanalarini ko'rsatmaydi.

Ammo bu ma'lumotni Yandex XML orqali olish mumkin. Buni amalga oshirish uchun siz https://xml.yandex.ru/test/ havolasiga o'tishingiz kerak va "&so'rov" maydoniga url:%page% kabi so'rovni kiriting, bu erda %page% sahifa manzili. Keyin, "Topish" tugmasini bosing va natijada biz sahifa birinchi marta indekslangan sanani ko'rsatadigan tegni qidiramiz.

Qidiruv roboti tomonidan skanerlash sanasi va qidiruv ma'lumotlar bazasidagi holat

Sahifani oxirgi marta skanerlash sanasi va qidiruv natijalarini yaratishda qaysi versiya joylashganligi haqida ma'lumot olish uchun Yandex.Webmaster xizmatida "Indekslash" bo'limida "URL holatini tekshirish" ni tanlashingiz kerak. Keyin kerakli manzilni ko'rsating va ma'lumotlarni oling. Bu usul faqat tasdiqlangan sayt uchun ishlaydi.

Saqlangan nusxaning yaratilgan sanasi

Saqlangan nusxaning yaratilgan sanasini bilish uchun qidiruv natijalarida (sahifa manzili nomining yonida) ochiladigan menyuni bosishingiz kerak.

Bing va Mail qidiruv tizimlarida saqlangan nusxalarni ko'rish sahifalarning eski versiyalarini ko'rsatadi, chunki ular Yandex va Google qidiruv robotlariga qaraganda sekinroq qayta indekslanadi.

Xulosa

1. Yuqoridagi misolda ko'rsatilganidek, sahifaning saqlangan nusxasi har doim ham indeks bazasini yaratish uchun ishlatilmaydi. Ammo, ko'pincha, bu haqiqat.
2. Bundan tashqari, agar siz sahifaga biron bir o'zgartirish kiritgan bo'lsangiz va ushbu o'zgarishlar qayta indekslanishini kutayotgan bo'lsangiz, qidiruv roboti tomonidan so'nggi skanerlash sanasi asosida o'zgarishlar hisobga olingan degan xulosaga kelmasligingiz kerak.