Indeksiranje spletnega mesta v Iskalniki pomembna za vsakega spletnega skrbnika. Navsezadnje bi morali za kakovostno promocijo projekta spremljati njegovo indeksiranje. Opisal bom postopek preverjanja indeksiranja v Yandexu.

Indeksiranje v Yandex

Robot Yandex dan za dnem pregleduje spletna mesta in išče nekaj »okusnega«. V top rezultatih zbira tista mesta in strani, ki si po njegovem mnenju to najbolj zaslužijo. No, ali pa je Yandex samo želel tako, kdo ve :)

Kot pravi spletni mojstri se bomo držali teorije, da bolje kot je stran narejena, višja je njena pozicija in več obiska.

Obstaja več načinov za preverjanje indeksiranja spletnega mesta v Yandexu:

• z uporabo Yandex Webmaster;
• uporaba operaterjev iskalnikov;
• uporaba razširitev in vtičnikov;
• uporabo spletnih storitev.

Indeksiranje spletnih strani v Yandex Webmaster

Če želite razumeti, kaj je iskalnik izkopal na našem spletnem mestu, morate iti k našemu ljubljenemu spletnemu skrbniku Yandex v razdelku »Indeksiranje«.

Obhod statistike v Yandex Webmaster

Najprej pojdimo na postavko »Obhodna statistika«. Ta razdelek vam omogoča, da ugotovite, katere strani vašega spletnega mesta robot preiskuje. Prepoznate lahko naslove, ki jih robot ni mogel naložiti zaradi nedosegljivosti strežnika, na katerem je stran, ali zaradi napak v vsebini samih strani.

Razdelek vsebuje informacije o straneh:

• novo - strani, ki so se nedavno pojavile na spletnem mestu ali pa jih je robot pravkar pregledal;
• spremenjeno - strani, ki jih je iskalnik Yandex prej videl, vendar so se spremenile;
• zgodovina pajkanja - število strani, ki jih je pajkal Yandex, ob upoštevanju odzivne kode strežnika (200, 301, 404 in druge).

Graf prikazuje nove (zelene) in spremenjene (modre) strani.

In to je graf zgodovine pajkanja.

Ta element prikazuje strani, ki jih je našel Yandex.

N/a — URL robotu ni znan, tj. robot je še nikoli ni srečal.

Katere zaključke je mogoče potegniti iz posnetka zaslona:

1. Yandex ni našel naslova /xenforo/xenforostyles/, kar je pravzaprav logično, saj ta stran ne obstaja več.
2. Yandex je našel naslov /bystrye-ssylki-v-yandex-webmaster/, kar je tudi povsem logično, saj nova stran.

Torej v mojem primeru Yandex Webmaster odraža tisto, kar sem pričakoval: kar ni potrebno, je Yandex odstranil, kar je potrebno, je Yandex dodal. To pomeni, da je z bypassom vse v redu, ni nobenih blokad.

Strani v iskanju

Rezultati iskanja se nenehno spreminjajo - dodajajo se nova spletna mesta, brišejo se stara, prilagajajo se pozicije v rezultatih iskanja itd.

Uporabite lahko informacije v razdelku »Strani v iskanju«:

• za sledenje spremembam števila strani v Yandexu;
• za sledenje dodanim in izključenim stranem;
• ugotoviti razloge za izključitev strani iz rezultatov iskanja;
• za pridobitev informacij o datumu, ko je iskalnik obiskal spletno mesto;
• za prejemanje informacij o spremembah rezultatov iskanja.

Ta razdelek je potreben za preverjanje indeksiranja strani. Tukaj Yandex Webmaster prikazuje strani, dodane v rezultate iskanja. Če so vse vaše strani dodane v razdelek (nova bo dodana v enem tednu), potem je s stranmi vse v redu.

Preverjanje števila strani v indeksu Yandex z uporabo operatorjev

Poleg Yandex Webmaster lahko preverite indeksiranje strani z uporabo operatorjev neposredno v samem iskanju.

Uporabili bomo dva operaterja:

• “site” - iskanje po vseh poddomenah in straneh navedenega mesta;
• “gostitelj” - iskanje strani, ki gostujejo na določenem gostitelju.

Uporabimo operator "site". Upoštevajte, da med operaterjem in spletnim mestom ni prostora. 18 strani je v iskalniku Yandex.

Uporabimo operater "gostitelj". 19 strani, ki jih indeksira Yandex.

Preverjanje indeksiranja z uporabo vtičnikov in razširitev

Preverite indeksiranje spletnega mesta s pomočjo storitev

Takih storitev je veliko. Pokazal ti bom dva.

Serphunt

Serphunt je spletna storitev za analizo spletnih strani. Imajo uporabno orodje za preverjanje indeksiranja strani.

S pomočjo dveh iskalnikov - Yandex in Google lahko hkrati preverite do 100 spletnih strani.

Če želite preveriti indeksiranje strani, jo dodajte na seznam:

Kliknite »Začni skeniranje« in po nekaj sekundah dobimo rezultat:

Za številne naloge SEO analitike je treba ugotoviti, od kdaj iskalnik »ve« za obstoj določeno stran. Eden od običajnih načinov, kako ugotoviti starost dokumenta v Yandexu, je iskanje URL-ja z Yandex.Xml, da pridobite parameter modtime. Zaradi razčlenitve parametra “&how=tm” je metoda pridobila še večjo popularnost.

Izkazalo se je priročno in hitro, na srečo obstaja vizualni vmesnik na https://xml.yandex.ru/test/. Ampak jaz z velikim dvomom Povezujem se s to metodo.

Kaj je narobe z modtime?

Prvič, v servisni dokumentaciji piše le tole:

Tako ideja, da oznaka prikazuje datum prvega indeksiranja, v celoti pripada SEO ljudem.

Drugič, uporabniki Yandex.Xml, milo rečeno, niso najpomembnejše stranke za iskalnik. Dostop je brezplačen, tam ni oglasov. Zakaj bi bil Yandex LLC posebej zaskrbljen zaradi točnosti, ustreznosti in zanesljivosti parametrov xml? Čeprav temu še vedno lahko verjamete – dobro, dobri programerji naredijo vse dobro. Toda zakaj zagotavljati nedokumentirane funkcije- popolnoma nejasno.

Vendar so vse to besedila in moja ugibanja. Pojdimo k dejstvom.

Kaj je "starost dokumenta z vidika Yandexa"?

Kot mi pravi logika in Google, je to čas, ki je pretekel od prvega indeksiranja. Najpogosteje nas zanima točno to - od katerega datuma je stran začela privabljati promet, kopičiti starost itd.

V resnici se spreminja. Za primer vam ni treba iskati daleč.

Preverimo modtime za nekaj strani mojega starega hobi projekta smmup.ru.

Naslov	Datum iz modtime
/	20140916T170528	2014-09-16
/activity.php	20150422T103533	2015-04-22
/target.php	20150208T173922	2015-02-08
/kogda.php	20141112T210047	2014-11-12

O zgodovini vira sem že pisal v članku Yandex ga dolgo časa ni pravilno indeksiral. Ohranjena mi je korespondenca s Platonom, z dne 20. aprila 2015. V tem trenutku je bila v iskanju samo ena stran - glavna.

To pomeni, da se je modtime za vsaj dva url-ja izkazalo, da sploh ni datum pojava v indeksu. Za /kogda.php je razlika med vrednostjo tega parametra in končnim časom indeksiranja skoraj šest mesecev! Dokumenta ni v indeksu - modtime pa je že z izkušnjami (vojak spi - servis je v teku).

Kaj to pomeni? Če malo pretiravam: analizirali smo konkurente za zahtevo, tam videli kup starih strani, se prestrašili in se nismo premaknili naprej. In polovica tekmovalcev je dejansko že dolgo pod strogimi filtri in jih ni tako težko premagati.

Situacija je teoretična, opisana preprosto kot jasen primer, zakaj je treba pri zanašanju na modtime biti zelo previden.

Ampak to so še vedno rožice.

Modtime lahko vsebuje datum POZNEJŠI od dejanskega indeksiranja

V primeru smmup.ru smo vsaj modtime si lahko razlagamo kot čas prvega obiska robota. Datumi se dobro ujemajo z dejanskim videzom strani na spletnem mestu.

Tukaj je še en primer. Tukaj si preprosto ne upam postaviti hipoteze, od kod vse izvira.

• Moj blog nima težav z indeksiranjem (še posebej, ker je bil ta članek ponovno objavljen v več priljubljenih skupinah).
• Preusmeritev, sprememb naslovov in podobno ni bilo.

Da razblinim še zadnje dvome:

To je: modtime je znatno podcenil starost strani.

Ta primer je bil najden v natanko 2 minutah (gledal sem samo parameter za blog strani, brez dodatnih trikov), kar kaže na visoko razširjenost takšnih rezultatov. Poleg tega sem videl veliko podobnih primerov na spletnih mestih, ki sem jih revidiral (iz očitnih razlogov jih ne pokažem), včasih je bila napaka leta.

Rezultati

1. Modtime ne prikaže vedno pravilnega datuma indeksiranja (pravzaprav nihče iz Yandexa tega ni obljubil).
2. Pri določanju starosti strani se zanašajte samo na ta parameter je prepovedano. Rezultati so nezanesljivi.
3. Zato je njegova uporaba za analizo spletnih strani konkurentov veliko vprašanje. Uporabljate ga lahko pri delu z lastnimi projekti - zahvaljujoč razpoložljivosti drugih podatkov za nadzor. Vendar pa je obseg problemov, ki jih je mogoče rešiti na ta način, precej ozek.

Vesela bom dodatnih interpretacij in zanimivih primerov!

p.s. Na FB je bila dolga in ne posebno produktivna razprava na to temo. Morda mi ni uspelo dovolj dobro oblikovati sporočila članka. Bistvo ni v tem, da je z modtime nekaj napak. Jasno je, da lahko Yandex iz enega ali drugega razloga ponastavi "starost" strani. Glavna stvar je, da ti primeri ponazarjajo: a) ne morete se zanesti na modtime kot datum prvega indeksiranja b) ni gotovosti, da "ponastavitev" starosti glede na modtime pomeni popolno čiščenje strani od nakopičenih dejavnikov, ki so neposredno ali posredno povezana s starostjo .

Dva načina za pridobitev datuma, ko je bila stran prvič indeksirana, prenehata delovati:

• datumski operater ne deluje pravilno;
• dodajanje parametra &how=tm nizu poizvedbe ne prikazuje več datumov indeksiranja.

Toda te informacije je še vedno mogoče pridobiti prek Yandex XML. Če želite to narediti, morate slediti povezavi https://xml.yandex.ru/test/ in v polje »&query« vnesti poizvedbo, kot je url:%page%, kjer je %page% naslov strani. Nato kliknite »Najdi« in v dobljenem rezultatu poiščemo oznako, ki bo označevala datum, ko je bila stran prvič indeksirana.

Datum iskanja po iskalnem robotu in status v iskalni bazi

Če želite izvedeti datum zadnjega indeksiranja strani in informacije o tem, katera različica se nahaja pri ustvarjanju rezultatov iskanja, morate v storitvi Yandex.Webmaster v razdelku »Indeksiranje« izbrati »Preveri stanje URL-ja«. Nato navedite zahtevani naslov in prejmite podatke. Ta metoda deluje samo za preverjeno spletno mesto.

Datum izdelave shranjene kopije

Če želite izvedeti datum nastanka shranjene kopije, morate klikniti spustni meni v rezultatih iskanja (poleg imena naslova strani).

Ogled shranjenih kopij v iskalnikih Bing in Mail bo prikazal starejše različice strani, saj jih ponovno indeksirajo počasneje kot iskalni roboti Yandex in Google.

Zaključek

1. Kot je prikazano v zgornjem primeru, se shranjena kopija strani ne uporablja vedno za izdelavo baze indeksa. Toda pogosto je to res.
2. Poleg tega, če ste naredili kakršne koli spremembe na strani in čakate, da se te spremembe ponovno indeksirajo, potem ne smete sklepati, da so bile spremembe upoštevane na podlagi datuma zadnjega indeksiranja s strani iskalnega robota.

Dva načina za pridobitev datuma, ko je bila stran prvič indeksirana, prenehata delovati:

• datumski operater ne deluje pravilno;
• dodajanje parametra &how=tm nizu poizvedbe ne prikazuje več datumov indeksiranja.

Toda te informacije je še vedno mogoče pridobiti prek Yandex XML. Če želite to narediti, morate slediti povezavi https://xml.yandex.ru/test/ in v polje »&query« vnesti poizvedbo, kot je url:%page%, kjer je %page% naslov strani. Nato kliknite »Najdi« in v dobljenem rezultatu poiščemo oznako, ki bo označevala datum, ko je bila stran prvič indeksirana.

Datum iskanja po iskalnem robotu in status v iskalni bazi

Če želite izvedeti datum zadnjega indeksiranja strani in informacije o tem, katera različica se nahaja pri ustvarjanju rezultatov iskanja, morate v storitvi Yandex.Webmaster v razdelku »Indeksiranje« izbrati »Preveri stanje URL-ja«. Nato navedite zahtevani naslov in prejmite podatke. Ta metoda deluje samo za preverjeno spletno mesto.

Datum izdelave shranjene kopije

Če želite izvedeti datum nastanka shranjene kopije, morate klikniti spustni meni v rezultatih iskanja (poleg imena naslova strani).

Ogled shranjenih kopij v iskalnikih Bing in Mail bo prikazal starejše različice strani, saj jih ponovno indeksirajo počasneje kot iskalni roboti Yandex in Google.

Zaključek

1. Kot je prikazano v zgornjem primeru, se shranjena kopija strani ne uporablja vedno za izdelavo baze indeksa. Toda pogosto je to res.
2. Poleg tega, če ste naredili kakršne koli spremembe na strani in čakate, da se te spremembe ponovno indeksirajo, potem ne smete sklepati, da so bile spremembe upoštevane na podlagi datuma zadnjega indeksiranja s strani iskalnega robota.