بررسی علت عدم دسترسي گوگل به سايت

[Saberian 1,792]

ممکن است برای شما هم پیش آمده باشد که بصورت اتفاقی و با انجام تنظیمات نادرست دسترسی روبات گوگل به صفحات سایت را محدود کرده باشید. همچنین بسیار پیش آمده که بدلیل ایجاد مشکلاتی در سرور و یا اختلالات در تنظیمات DNS دامنه با پیامی مبنی بر عدم دسترسی روبات گوگل به سایت در پنل مدیریت وبمستر تولز خود مواجه شوید. این قبیل اتفاقات بطور حتم بر ایندکس صفحات سایت و رتبه شما در نتایج گوگل تاثیرگذار خواهد بود. ولی آیا با رفع مشکلات و برگشتن به حالت قبلی گوگل همچنان دید بدی نسبت به سایت شما خواهد داشت؟

 

جان مولر بعنوان یکی از کارمندان شناخته شده گوگل میگوید:

نگران نباشید، این قبیل اتفاقات ممکن است در مدت کوتاهی بر سئو سایت شما تاثیر گذار باشد ولی در دراز مدت به جایگاه قبلی خود باز خواهید گشت. زمانیکه دسترسی روبات های گوگل به صفحات سایت شما ممکن شده و به بازخوانی مجدد و ایندکس آنها بپردازند دوباره جایگاه خود را در نتایج گوگل کسب خواهید کرد. ولی این امر نیازمند گذشت زمان خواهد بود. البته توجه داشته باشید که برگشت به جایگاه قبلی در صورتی رخ خواهد داد که تغییری اساسی در الگوریتم های گوگل در این زمان ایجاد نشده باشد.

 

تاثیر دسترسی روبات بر سئو

 

از صحبت های مولر میتوان نتیجه گرفت که قطع شدن ناگهانی و چند روزه سرور شما به معنی هدر رفتن تمامی زحمات نخواهد بود و یا اگر سایت شما در ابتدا به هردلیلدسترسی روبات گوگل به صفحات را محدود کرده باشد با رفع این محدودیت مطالب قدیمی تر هنوز شانس حضور در نتایج گوگل و ایندکس شدن را خواهند داشت.

با مراجعه به بخش Crawl Errors در وبمستر تولز خود میتوانید صفحاتی که روبات گوگل امکان دسترسی به آنها را ندارد شناسایی کرده و مشکلات احتمالی را رفع کنید. پس از طی این مرحله با استفاده از بخش fetch as google از دسترسی روبات به این صفحات مطمئن شده و با رعایت اصول توضیح داده شده در مقاله ای با نام “9 روش افزایش سرعت ایندکس” روند ایندکس شدن آنها را سریعتر کنید.

البته توجه داشته باشید که همیشه ایندکس نشدن صفحات سایت شما به معنی عدم دسترسی روبات گوگل نیست و در بسیاری از موارد مشاهده میشود که وبمستران حتی با رعایت نکات سئو از میزان بازدید سایت خود و سرعت ایندکس صفحات شکایت دارند. معمولا بررسی های اولیه نشان دهنده کپی بودن مطالب و استفاده از محتوای تکراری است. الگوریتم پنگوئن گوگل که وظیفه مبارزه با محتوای تکراری بر روی اینترنت را برعهده دارد، در این شرایط از نمایش سایت شما در نتایج گوگل و حتی در بعضی موارد از ایندکس شدن این مطالب جلوگیری میکند.

 

نحوه بررسی

برای یافتن اینکه آیا در تنظیمات DNSتان مشکلی وجود دارد یا خیر، گوگل در سلسلۀ ابزارهای وبمستر (Webmaster/tools...) به شما کمک خواهد کرد. برای پیدا کردن وجود یک مشکل در بخش DNS سایت خود به صفحه وبمسترتولز خود بروید و از مسیر Crawl، می توانید گزارشی از 90 روز قبل تا کنون را توسط این ابزار و این بخش مشاهده کنید.

 

 

 

 

این سخنان بدان معناست که سرور هر سایتی ممکن است حتا با توجه به آپتایم 99 درصدی، در مواقعی (حتی دقایقی) با قطعی مواجه شود و یا با تنظیمات اشتباه و دسترسی‏ها و محدودیت‏ها با استفاده از فایل robots.txt، موجب بروز خسارتی چون عدم ایندکس شدن صفحات سایت توسط ربات گوگل گردد که با استفاده از یکی دیگر از امکانات وبمسترتولز یعنی بخش Crawl Errors نیز تا حد قابل توجهی حل شدنیست.

برای رفع این موضوع به بخش Crawl و زیرمنوی Crawl Errors بروید و لیست صفحاتی که به دلیل عدم وجودشان، خطا گرفته و ایندکس نشده اند را در دو نسخۀ وب و گوشی هوشمند، مشاهده نمایید. در 95 درصد از مواقع، این صفحات، صفحاتی هستند که دیگر وجود ندارند و همان خطای معروف 404 را با خود به یدک می کشند.

 

 

 

2 راه برای رفع این مساله وجود دارد:

1- نشانی های مورد نظر را محتوادار نموده و سپس Mark as fixed کنیم.

2- و یا از طریق حذف لینک ها به 3 روش از وجود لینک های اضافی در سایت خود جلوگیری کنیم.

 

سپس می توانید از طریق گزینۀ Fetch as Google تا 500 دفعه، دستور دوباره ایندکس شدن صفحۀ اصلی و یا تمام صفحات سایت را وارد کنید تا مجددا گوگل، سایت شما را بازبینی و ایندکس نماید.