خزنده های گوگل، وب سایتها را به عنوان یک دستگاه اندرویدی چک می کنند

[labour 106]

گوگل در حال انجام تغییرات زیاد برای الگوریتمهای جستجوی خود است. خزنده هایی وجود دارند که طبق این الگوریتمها صفحات وب را کراول یا بررسی می کنند. بخش عمده‌ای از این تغییرات معطوف به ربات خزنده گوگل است که وظیفه آن جستجو در وب برای ایندکس کردن صفحات است. Googlebot به اصطلاح webcrawler این موتور جستجو نامیده می‌شود تا بتواند تمام اطلاعات موجود منتشر شده در وب را گردآوری کرد. بد نیست بدانید این بات برای اولین بار صفحات وب‌ را به عنوان یک دستگاه اندرویدی مرور می‌کند نه دستگاه آیفون! در ادامه همراه باشید.

برنامه ای که عمل واکشی را انجام می دهد و یا به قول معروف در صفحات وب می خزد بات گوگل (Googlebot) نام دارد وهمچنین با عناوین ربات و یا عنکبوت نیز شناخته می شود. بات گوگل از یک فرایند الگوریتمی استفاده می کند: برنامه های کامپیوتری مشخص می کنند که کدام سایت ها باید خزیده شوند، چگونه خزیده شوند و چه تعداد صفحه از هر سایت می بایست واکشی شوند. فرایند خزیدن گوگل با لیستی از آدرس های صفحات وب که توسط فرایندهای خزیدن قبلی تولید شده اند آغاز می شود، و با داده های sitemap ارائه شده توسط مدیران سایت ها تکمیل می گردد. ربات گوگل تمام وب سایت هایی که لینک آنها را در هر صفحه ای پیدا کند را بازدید می کند و آنها را به لیست صفحات خزیده شده خود اضافه می کند. سایت های جدید به سایت های موجود تغییر می کنند و لینک های مرده مشخص می شوند و در به روز رسانی ایندکس گوگل لحاظ می شوند.

ربات گوگل مدت زیادی user-agent را بر روی آیفون تنظیم کرده بود. iOS 8.3 بر روی این نوع خزنده تا حدود ۱۸ آوریل ادامه داشت تا این که گوگل تصمیم گرفت به صورت ناگهانی به سراغ user-agent دستگاه Nexus 5X با اندروید ۶٫۰٫۱ برود. خزیدن فرایندی است که توسط آن ربات های گوگل صفحات جدید و به روز شده را پیدا می کنند تا به ایندکس گوگل اضافه شوند.

 

توضیحی رسمی که گوگل منتشر کرده است، رندر بهتر صفحات و تشخیص بهتر تکنولوژی‌های جدید استقاده شده در طراحی وب را عاملی برای تصمیم گیری گوگل دانسته است. با این حساب می‌توان گفت از دید گوگل رندر کردن HTML5 در اندروید و دستگاه‌نکسوسی بهتر از سافاری آیفون خواهد بود. وب‌سایت NetMarketShare در صحبتی بیان کرد که ترافیک مرورگر‌های اسمارت فون را اگر دو قطبی در نظر بگیریم، ۴۳ درصد متعلق به کروم در بین سیستم‌عامل‌ها بوده و ۳۳ درصد مربوط به سافاری است.

 

اما در هر صورت بنا به گفته گوگل ۹۹ درصد از سایت‌های موجود هیچ فرقی برایشان ندارد و مدیران وب سایت، موردی را متوجه نخواهند شد.

 

 

منبع:

لینک ها تنها برای اعضای سایت قابل نمایش است.