طريقة زحف محرّك بحث Google إلى الصفحات ذات اللغة التكيفية

إذا كان موقعك الإلكتروني يتضمّن صفحات تتكيّف حسب اللغة أو البلد (أي أنّ موقعك الإلكتروني يعرض المحتوى بلغة مختلفة استنادًا إلى البلد الذي يتم كشفه أو اللغة المفضّلة للزائر)، قد لا يزحف محرّك بحث Google إلى كامل المحتوى في مختلف اللغات أو يفهرسه أو يرتّبه. ويعود السبب في ذلك إلى أنّ عناوين IP التلقائية لزاحف Googlebot تُظهِر أنّ مقرّها هو الولايات المتحدة الأمريكية. إضافةً إلى ذلك، يرسل الزاحف طلبات HTTP بدون إعداد Accept-Language في عنوان الطلب.

الزحف الموزَّع حسب المواقع الجغرافية

يزحف Googlebot باستخدام عناوين IP تقع خارج الولايات المتحدة الأمريكية، بالإضافة إلى عناوين IP تقع داخل الولايات المتحدة الأمريكية.

إننا ننصح دائمًا بأن يتم التعامل مع برنامج Googlebot الذي يبدو أنه يأتي من بلد معيّن مثلما يتم التعامل مع أي مستخدم آخر في هذا البلد. وهذا يعني أنه في حال منع المستخدمين المقيمين في الولايات المتحدة الأمريكية من الوصول إلى المحتوى الخاص بك، مع السماح للزائرين من أستراليا بمشاهدته، فإن الخادم سيحظر برنامج Googlebot الذي يبدو صادرًا من الولايات المتحدة الأمريكية وسيسمح بوصول برنامج Googlebot الذي يبدو صادرًا من أستراليا.

اعتبارات أخرى