نمایه سازی سایت در موتورهای جستجوبرای هر وب مستر مهم است. پس از همه، برای ارتقاء با کیفیت بالا یک پروژه، شما باید نمایه سازی آن را نظارت کنید. من روند بررسی نمایه سازی در Yandex را شرح خواهم داد.

نمایه سازی در Yandex

ربات Yandex روز به روز سایت ها را در جستجوی چیزی "خوشمزه" اسکن می کند. سایت ها و صفحاتی را که به نظر او سزاوارترند، در نتایج برتر جمع آوری می کند. خوب، یا Yandex فقط آن را می خواست، چه کسی می داند :)

ما به عنوان وب مستر واقعی به این تئوری پایبند خواهیم بود که هر چه سایت بهتر ساخته شود، موقعیت آن بالاتر می رود و ترافیک بیشتری دارد.

چندین روش برای بررسی نمایه سازی سایت در Yandex وجود دارد:

• با استفاده از Yandex Webmaster؛
• استفاده از اپراتورهای موتور جستجو؛
• استفاده از افزونه ها و افزونه ها؛
• با استفاده از خدمات آنلاین

نمایه سازی صفحات وب سایت در Yandex Webmaster

برای درک آنچه که موتور جستجو در سایت ما کشف کرده است، باید به وب مستر محبوب Yandex ما در بخش "نمایه گذاری" بروید.

دور زدن آمار در Yandex Webmaster

ابتدا، اجازه دهید به آیتم "Bypass Statistics" برویم. این بخش به شما امکان می دهد بفهمید ربات در کدام صفحات سایت شما می خزد. می‌توانید آدرس‌هایی را شناسایی کنید که ربات به دلیل در دسترس نبودن سروری که سایت در آن قرار دارد یا به دلیل خطا در محتوای خود صفحات، قادر به بارگیری آنها نبود.

این بخش حاوی اطلاعاتی در مورد صفحات است:

• جدید - صفحاتی که اخیراً در سایت ظاهر شده اند یا ربات به تازگی آنها را خزیده است.
• تغییر - صفحاتی که موتور جستجوی Yandex قبلا دیده بود، اما آنها تغییر کرده اند.
• تاریخچه خزیدن - تعداد صفحاتی که Yandex با در نظر گرفتن کد پاسخ سرور (200، 301، 404 و دیگران) خزیده است.

نمودار صفحات جدید (سبز) و تغییر یافته (آبی) را نشان می دهد.

و این یک نمودار از تاریخچه خزیدن است.

این مورد صفحاتی را که Yandex پیدا کرده است نمایش می دهد.

N/a - URL برای ربات شناخته شده نیست، یعنی. ربات قبلاً او را ملاقات نکرده بود.

از اسکرین شات چه نتایجی می توان گرفت:

1. Yandex آدرس /xenforo/xenforostyles/ را پیدا نکرد، که در واقع منطقی است، زیرا این صفحه دیگر وجود ندارد
2. Yandex آدرس /bystrye-ssylki-v-yandex-webmaster/ را پیدا کرد که این نیز کاملاً منطقی است، زیرا صفحه جدید است

بنابراین، در مورد من، Yandex Webmaster منعکس کننده چیزی است که انتظار داشتم ببینم: آنچه لازم نیست، Yandex حذف کرده است، و آنچه مورد نیاز است، Yandex اضافه کرده است. این بدان معنی است که همه چیز با بای پس خوب است، هیچ انسدادی وجود ندارد.

صفحات در جستجو

نتایج جستجو دائما در حال تغییر هستند - سایت های جدید اضافه می شوند، سایت های قدیمی حذف می شوند، موقعیت ها در نتایج جستجو تنظیم می شوند و غیره.

می توانید از اطلاعات موجود در بخش "صفحات در جستجو" استفاده کنید:

• برای پیگیری تغییرات تعداد صفحات در Yandex؛
• برای ردیابی صفحات اضافه شده و حذف شده؛
• برای یافتن دلایل حذف یک سایت از نتایج جستجو؛
• برای به دست آوردن اطلاعات در مورد تاریخ بازدید موتور جستجو از سایت؛
• برای دریافت اطلاعات در مورد تغییرات در نتایج جستجو.

این بخش برای بررسی نمایه سازی صفحات مورد نیاز است. در اینجا Yandex Webmaster صفحات اضافه شده به نتایج جستجو را نشان می دهد. اگر همه صفحات شما به بخش اضافه شوند (یک صفحه جدید در عرض یک هفته اضافه خواهد شد)، پس همه چیز با صفحات مرتب است.

بررسی تعداد صفحات در نمایه Yandex با استفاده از اپراتورها

علاوه بر Yandex Webmaster، می توانید نمایه سازی یک صفحه را با استفاده از اپراتورها به طور مستقیم در خود جستجو بررسی کنید.

ما از دو عملگر استفاده خواهیم کرد:

• "سایت" - در تمام زیر دامنه ها و صفحات سایت مشخص شده جستجو کنید.
• "میزبان" - صفحات میزبانی شده در یک میزبان معین را جستجو کنید.

بیایید از عملگر "سایت" استفاده کنیم. توجه داشته باشید که هیچ فاصله ای بین اپراتور و سایت وجود ندارد. 18 صفحه در جستجوی Yandex هستند.

بیایید از عملگر "میزبان" استفاده کنیم. 19 صفحه نمایه شده توسط Yandex.

بررسی نمایه سازی با استفاده از افزونه ها و افزونه ها

نمایه سازی سایت را با استفاده از خدمات بررسی کنید

از این قبیل خدمات زیاد است. من دو تا رو بهت نشون میدم

سرفونت

Serphunt یک سرویس آنلاین برای تجزیه و تحلیل وب سایت است. آنها ابزار مفیدی برای بررسی فهرست بندی صفحات دارند.

شما می توانید همزمان تا 100 صفحه وب سایت را با استفاده از دو موتور جستجو - Yandex و Google بررسی کنید.

برای بررسی نمایه سازی یک صفحه، آن را به لیست اضافه کنید:

روی "شروع اسکن" کلیک کنید و پس از چند ثانیه نتیجه را دریافت می کنیم:

برای تعدادی از وظایف تجزیه و تحلیل SEO، لازم است مشخص شود که موتور جستجو از چه زمانی از وجود صفحه خاص. یکی از روش‌های رایج برای یافتن سن سند در Yandex، جستجوی url با استفاده از Yandex.Xml برای به دست آوردن پارامتر modtime است. با توجه به تجزیه پارامتر "&how=tm"، این روش محبوبیت بیشتری پیدا کرد.

راحت و سریع به نظر می رسد، خوشبختانه یک رابط بصری در https://xml.yandex.ru/test/ وجود دارد. اما من با شک زیادمن با این روش ارتباط دارم.

Modtime چه اشکالی دارد؟

اولا، اسناد سرویس فقط این را بیان می کند:

بنابراین، این ایده که برچسب تاریخ اولین نمایه‌سازی را نمایش می‌دهد، کاملاً متعلق به افراد سئو است.

ثانیاً، کاربران Yandex.Xml، به بیان ملایم، مهمترین مشتریان موتور جستجو نیستند. دسترسی رایگان داده می شود، هیچ تبلیغاتی در آنجا وجود ندارد. چرا Yandex LLC به ویژه در مورد دقت، ارتباط و قابلیت اطمینان پارامترهای xml نگران است؟ اگرچه هنوز هم می توانید این را باور کنید - خوب، برنامه نویسان خوب همه چیز را به خوبی انجام می دهند. اما چرا ارائه ویژگی های غیر مستند- کاملاً نامشخص است.

با این حال، همه اینها اشعار و حدس و گمان من است. بیایید به واقعیت ها بپردازیم.

"سن سند از دیدگاه Yandex" چیست؟

همانطور که منطق و گوگل به من می گویند، این زمانی است که از اولین نمایه سازی گذشته است. بیشتر اوقات ، ما دقیقاً به این علاقه مندیم - از چه تاریخی صفحه شروع به جذب ترافیک ، انباشت سن و غیره کرد.

در واقعیت متفاوت است. برای مثال لازم نیست دور از دسترس باشید.

بیایید modtime را برای چندین صفحه از پروژه سرگرمی قدیمی من smmup.ru بررسی کنیم.

نشانی	تاریخ از modtime
/	20140916T170528	2014-09-16
/activity.php	20150422T103533	2015-04-22
/target.php	20150208T173922	2015-02-08
/kogda.php	20141112T210047	2014-11-12

قبلاً در مورد تاریخچه منبع در مقاله نوشتم برای مدت طولانی توسط Yandex به درستی ایندکس نشده بود. من مکاتباتی را با افلاطون به تاریخ 20 آوریل 2015 حفظ کرده ام. در این لحظه، تنها یک صفحه در جستجو وجود داشت - صفحه اصلی.

به این معنی که مدت زمان حداقل برای دو آدرس اینترنتی به هیچ وجه تاریخ ظاهر شدن در فهرست نیست. برای kogda.php/، تفاوت بین مقدار این پارامتر و زمان نمایه سازی نهایی است تقریبا شش ماه! این سند در فهرست نیست - اما modtime در حال حاضر با تجربه است (سرباز خواب است - خدمات در حال انجام است).

این یعنی چی؟ برای اغراق کمی: ما رقبا را برای درخواست تجزیه و تحلیل کردیم، یک دسته از صفحات قدیمی را در آنجا دیدیم، ترسیدیم و روی آن حرکت نکردیم. و نیمی از رقبا در واقع مدت زیادی است که تحت فیلترهای سختگیرانه قرار دارند و غلبه بر آنها چندان دشوار نیست.

وضعیت تئوری است و به سادگی به شرح زیر است مثال روشن، چرا تکیه بر modtime باید با احتیاط زیادی انجام شود.

اما اینها هنوز گل هستند.

Modtime ممکن است حاوی تاریخی دیرتر از نمایه سازی واقعی باشد

در مورد smmup.ru ما حداقلما می توانیم modtime را به عنوان زمان اولین بازدید ربات تفسیر کنیم. تاریخ ها به خوبی با ظاهر واقعی صفحات در سایت ارتباط دارند.

در اینجا یک مثال دیگر است. در اینجا من به سادگی جرأت نمی کنم فرضیه ای در مورد اینکه همه چیز از کجا می آید مطرح کنم.

• وبلاگ من با نمایه سازی مشکلی ندارد (مخصوصاً که آن مقاله در چندین گروه محبوب بازنشر شده است).
• هیچ تغییر مسیر، تغییر آدرس یا موارد مشابه وجود نداشت.

برای رفع آخرین شک:

یعنی: modtime به طور قابل توجهی سن صفحه را دست کم گرفت.

این مثال دقیقاً در 2 دقیقه پیدا شد (من فقط به پارامتر صفحات وبلاگ نگاه کردم، بدون ترفندهای اضافی)، که نشان دهنده شیوع بالای چنین نتایجی است. علاوه بر این، موارد مشابه زیادی را در سایت هایی که حسابرسی کردم دیدم (به دلایل واضح آنها را نشان نمی دهم)، گاهی اوقات خطا سال ها بود.

نتایج

1. Modtime همیشه تاریخ فهرست بندی صحیح را نشان نمی دهد (در واقع هیچ کس از Yandex این قول را نداده است).
2. در تعیین سن صفحات فقط به این پارامتر تکیه کنید ممنوع است. نتایج غیر قابل اعتماد هستند.
3. بنابراین، استفاده از آن برای تجزیه و تحلیل وب سایت های رقبا یک سوال بزرگ است. به لطف در دسترس بودن سایر داده ها برای کنترل، می توانید از آن هنگام کار با پروژه های خود استفاده کنید. با این حال، دامنه مشکلاتی که می توان از این طریق حل کرد، بسیار محدود است.

من خوشحال خواهم شد که تفسیرهای اضافی و نمونه های جالب دریافت کنم!

p.s. یک بحث طولانی و نه چندان سازنده در مورد این موضوع در FB وجود داشت. شاید من نتوانستم پیام مقاله را به خوبی فرموله کنم. نکته این نیست که اشکالاتی در modtime وجود دارد. واضح است که Yandex به دلایلی می تواند "سن" یک صفحه را بازنشانی کند. نکته اصلی این است که این مثال‌ها نشان می‌دهند: الف) نمی‌توانید به modtime به‌عنوان تاریخ اولین نمایه‌سازی تکیه کنید ب) هیچ اطمینانی وجود ندارد که "بازنشانی" سن مطابق با modtime به معنای پاک کردن کامل صفحه از عوامل انباشته شده است که مستقیماً مرتبط هستند. یا به طور غیرمستقیم مربوط به سن است.

دو روش برای به دست آوردن تاریخی که صفحه برای اولین بار ایندکس شد از کار افتاد:

• اپراتور تاریخ به درستی کار نمی کند.
• افزودن پارامتر &how=tm به رشته پرس و جو دیگر تاریخ نمایه سازی را نشان نمی دهد.

اما هنوز هم می توان این اطلاعات را از طریق Yandex XML به دست آورد. برای انجام این کار، باید پیوند https://xml.yandex.ru/test/ را دنبال کنید و در قسمت "&query" عبارتی مانند url:%page% را وارد کنید، جایی که %page% آدرس صفحه است. در مرحله بعد، روی "یافتن" کلیک کنید و در نتیجه به دنبال برچسبی می گردیم که تاریخ اولین بار ایندکس شدن صفحه را نشان می دهد.

تاریخ خزیدن توسط ربات جستجو و وضعیت در پایگاه داده جستجو

برای اطلاع از تاریخ آخرین خزیدن صفحه و اطلاعات مربوط به نسخه ای که هنگام ساختن نتایج جستجو قرار دارد، باید در بخش «نمایه سازی» در سرویس Yandex.Webmaster، «بررسی وضعیت URL» را انتخاب کنید. سپس آدرس مورد نیاز را مشخص کنید و داده ها را دریافت کنید. این روش فقط برای یک سایت تایید شده کار می کند.

تاریخ ایجاد کپی ذخیره شده

برای اطلاع از تاریخ ایجاد کپی ذخیره شده، باید روی منوی کشویی در نتایج جستجو (در کنار نام آدرس صفحه) کلیک کنید.

مشاهده کپی‌های ذخیره‌شده در موتورهای جستجوی Bing و Mail، نسخه‌های قدیمی‌تر صفحات را نشان می‌دهد، زیرا این صفحات آهسته‌تر از Yandex و ربات‌های جستجوی Google دوباره فهرست می‌شوند.

نتیجه

1. همانطور که در مثال بالا نشان داده شده است، کپی ذخیره شده صفحه همیشه برای ساخت پایه فهرست استفاده نمی شود. اما، اغلب، این درست است.
2. علاوه بر این، اگر تغییراتی در صفحه ایجاد کرده اید و منتظر ایندکس شدن مجدد این تغییرات هستید، نباید نتیجه بگیرید که تغییرات بر اساس تاریخ آخرین خزیدن توسط ربات جستجوگر در نظر گرفته شده است.

دو روش برای به دست آوردن تاریخی که صفحه برای اولین بار ایندکس شد از کار افتاد:

• اپراتور تاریخ به درستی کار نمی کند.
• افزودن پارامتر &how=tm به رشته پرس و جو دیگر تاریخ نمایه سازی را نشان نمی دهد.

اما هنوز هم می توان این اطلاعات را از طریق Yandex XML به دست آورد. برای انجام این کار، باید پیوند https://xml.yandex.ru/test/ را دنبال کنید و در قسمت "&query" عبارتی مانند url:%page% را وارد کنید، جایی که %page% آدرس صفحه است. در مرحله بعد، روی "یافتن" کلیک کنید و در نتیجه به دنبال برچسبی می گردیم که تاریخ اولین بار ایندکس شدن صفحه را نشان می دهد.

تاریخ خزیدن توسط ربات جستجو و وضعیت در پایگاه داده جستجو

برای اطلاع از تاریخ آخرین خزیدن صفحه و اطلاعات مربوط به نسخه ای که هنگام ساختن نتایج جستجو قرار دارد، باید در بخش «نمایه سازی» در سرویس Yandex.Webmaster، «بررسی وضعیت URL» را انتخاب کنید. سپس آدرس مورد نیاز را مشخص کنید و داده ها را دریافت کنید. این روش فقط برای یک سایت تایید شده کار می کند.

تاریخ ایجاد کپی ذخیره شده

برای اطلاع از تاریخ ایجاد کپی ذخیره شده، باید روی منوی کشویی در نتایج جستجو (در کنار نام آدرس صفحه) کلیک کنید.

مشاهده کپی‌های ذخیره‌شده در موتورهای جستجوی Bing و Mail، نسخه‌های قدیمی‌تر صفحات را نشان می‌دهد، زیرا این صفحات آهسته‌تر از Yandex و ربات‌های جستجوی Google دوباره فهرست می‌شوند.

نتیجه

1. همانطور که در مثال بالا نشان داده شده است، کپی ذخیره شده صفحه همیشه برای ساخت پایه فهرست استفاده نمی شود. اما، اغلب، این درست است.
2. علاوه بر این، اگر تغییراتی در صفحه ایجاد کرده اید و منتظر ایندکس شدن مجدد این تغییرات هستید، نباید نتیجه بگیرید که تغییرات بر اساس تاریخ آخرین خزیدن توسط ربات جستجوگر در نظر گرفته شده است.