امروز مشکلی در آنالیز وب مستر یکی از مشتریان دیدم که لازم دونستم پاسخ اون را بصورت عمومی اعلام کنم

در وب مستر این دوستمون گوگل به 9274 صفحه نتوانسته بود دسترسی پیدا کند و لیست آنها را در صفحات Unreachable  اعلام کرده بود

این تعداد خطا غیر معمول است (تا حدود 500 یا حتی 1000 ان را می توان طبیعی دانست)

اول به این بپردازیم که اصلا این خطا چیست و در چه مواردی پیش میاید

مفهوم این خطا یعنی عدم دسترسی به صفحه  به یکی از دلایل زیر

1- مدت زمان پاسخ دهی به درخواست داده شده برای صفحه بیش از حد معمول است

2-درخواست پذیرفته شده اما سرعت دالود و بارگذاری صفحه بیش از حد کند است

3- سرور میزبان (هاست) دسترسی گوگل خزنده را محدود کرده است

4- ایراد نرم افزار یا پلاگینهای نصب شده که سرور را مشغول می کند

5- مشکل در تنظیمات DNS

اگر جواب را در هیچ کدام از موارد بالا پیدا نکردید (البته از تسهای مطمئن برای این کار استفاده کرده باشید) تنها دلیل را در تنظیمات دی ان اس بدانید مخصوصا اگر ساب دومین های زیادی بر روی دامنه خود تعریف کرده اید یا اینکه CNAME در دی ان اس های خود ست کرده اید

موارد یک و دو به سرعت اینترنت مربوط میشوند و اگر سرور ایرانی باشد(یعنی مکانیت هاست در ایران باشد) 500 تا 1000 قابل قبول است و اگر سرور خارجی باشد 250 تا 500

وچون در اینجا رقم بسیار بسیار بالاست مورد 3 و 4 را باید بررسی کرد

برای اینکه مطمئن شویم کدام یک از حالتهای 3 یا 4 رخ داده است از ftech as google در بخش وب مستر استفاده نمایید

برای اینکار چند تا از لینکهایی که خطا در آنا گزارش شده است را در ساعتهای مختلف روز امتحان نمایید(
معمولا برخی هاستها شیطنت می کنند و برای پایین نگهداشتن کار cpu و پایین آوردن ترافیک آی پی گوگل بات  را در برخی ساعات محدود می کنند

از شگردهایی برای تایم اوت دادن  گوگل استفاده می کنند)

اگر نتوانستید مچ هاستینگ خودتان را بگیرید پس مطمئن شوید که پلاگین مشکل دار ندارید

برای حل مشکل خود می توانید از سایتهای زیر هم کمک بگیرید

http://web-sniffer.net که می توانید تعداد درخواستهای googlebot را در آن تنظیم کنید

http://www.intodns.com که می تواند گزارش خوبی از تمام مسائل پیرامون هاست تان به شما بدهد

خطای 500 داخلی سرور  را چک کنید "گرفتن همه" خطاهای تولید شده توسط وب سرور کمک بزرگی به شما خواهد کرد.