مترجم لكن غير مرئي بالنسبة للذكاء الاصطناعي؟ فحص تقني لـ SEO من 5 مستويات

تمت ترجمة موقعك. يعرض «جوجل» صفحاتك باللغة الفرنسية، ويبدو عدد الزيارات طبيعيًا، ولا توجد أي مشكلات في «Search Console». ثم يطلب شخص ما في باريس من «ChatGPT» توصية في فئتك، ولا تظهر أنت في الإجابة.

أعمل في مجال تدقيق مواقع متعدد اللغات ، وقد لاحظت تكرار حدوث هذه المشكلة لدرجة أنني قررت قياسها. في سبتمبر 2026، قمت باختبار 97 موقعًا من مواقع متعدد اللغات و174 نسخة لغوية، لمعرفة ما يتلقاه برنامج الزحف التابع لمساعد الذكاء الاصطناعي عندما يطلب صفحة مترجمة.

لقد وجدت مشكلات في 5 مستويات مختلفة. وجاءت بعض أسوأ حالات الفشل في دراستي من مواقع كانت قد اجتازت المستوى الأول.

ما يحصل عليه البوت

عندما تفتح صفحةً ما، يقوم متصفحك بمهمتين: يقوم بتنزيل الصفحة التي يرسلها الخادم، ثم يقوم بتشغيل البرامج النصية التي تكمل عرض ما تراه على الشاشة.

تقول شركات «جوجل» و«بينغ» و«آبل» إن برامج الزحف الخاصة بها تُشغِّل البرامج النصية. أما البقية، بما في ذلك الروبوتات التي تعمل خلف «تشات جي بي» و«كلود» و«بيربلكسيتي»، فلم تذكر شيئًا في هذا الصدد، والدليل العام الرئيسي هو دراسة واحدة صدرت في ديسمبر 2024 ولم تشمل سوى 3 مواقع إلكترونية.

وبالنسبة لبرامج الزحف الأخرى التي تعمل بالذكاء الاصطناعي، لا توجد إجابة رسمية. حتى «بينغ» (Bing)، التي تعمل برامج الزحف الخاصة بها على تشغيل البرامج النصية، تنصح مالكي المواقع بتجنب «إخفاء المحتوى المهم خلف عملية العرض من جانب العميل». وهذه نصيحة جيدة يجب اتباعها إلى أن تشرح شركات الذكاء الاصطناعي الأخرى كيفية عمل برامج الزحف الخاصة بها.

الطبقة 1: هل توجد الترجمة في الصفحة نفسها؟

هناك طريقتان لترجمة موقع ويب. إما أن يرسل الخادم الخاص بك الصفحة باللغة الفرنسية مباشرةً، أو أن يرسل الصفحة باللغة الإنجليزية ثم يقوم برنامج نصي باستبدال الكلمات بمجرد وصول الصفحة إلى المتصفح.

بالنسبة للزائر، يبدو كلاهما متشابهين. لكن بالنسبة لبرنامج الزحف الذي لا يقوم بتشغيل البرامج النصية، فإنه لا يرى سوى الأول فقط.

هذا الاختبار سهل التنفيذ بنفسك؛ فهو لا يتطلب أي أدوات ويستغرق 10 ثوانٍ. افتح صفحتك باللغة الفرنسية، وانقر بزر الماوس الأيمن، ثم اختر «عرض مصدر الصفحة». إذا لم يكن النص الفرنسي موجودًا هناك، فلن يتمكن برنامج الزحف الذي لا يقوم بتشغيل البرامج النصية من رؤيته أيضًا.

لقد فاجأتني هذه البيانات. فالصفحة المتوسطة التي قمت بقياسها تعرض بالفعل 84.6% من نصها دون الحاجة إلى ملفات جافا سكريبت، لذا فإن القول بأن مواقع متعدد اللغات هي مجرد هياكل فارغة لا يصمد أمام الحقائق. بل إن الحالات الشديدة مركزة في مواقع معينة: فهناك حوالي صفحة واحدة من كل 7 صفحات تعرض أقل من 30% من نصها، كما أن أداء مواقع التجارة الإلكترونية ومواقع السفر كان أسوأ بكثير من أداء مواقع البرمجيات أو وسائل الإعلام أو المواقع المؤسسية.

في Weglotإعدادات النطاق الفرعي والدليل الفرعي ووردبريس، تتم الترجمة على الخادم، لذا يتم إدراجها في مصدر الصفحة قبل أن تصل إلى الزائر. في ووردبريس، يعني ذلك أن عناوين URL الخاصة باللغات مثل /fr/about/ تعرض المحتوى المترجم دون إنشاء صفحات إضافية في الواجهة الخلفية.

الاستثناء هو Weglotتكامل JavaScript، الذي يتوفر للإعدادات المخصصة ويأتي مع مقايضة موثقة: تلك الترجمات لا تظهر في مصدر الصفحة. إذا كانت رؤية الذكاء الاصطناعي مهمة بالنسبة لك، فإن النطاق الفرعي أو الدليل الفرعي أو التكامل مع نظام إدارة المحتوى (CMS) هو الخيار الأفضل.

لقد راجعتُ weglotالصفحة الرئيسية باللغة الفرنسية لموقع .com كنقطة مرجعية: كان 97.6% من النص و17 علامة hreflang موجودة قبل تشغيل أي برنامج نصي.

الطبقة الثانية: هل هناك شيء أمام موقعك يمنع الروبوتات من الوصول إليه؟

إذا كان موقعك يعمل عبر شبكة توزيع المحتوى (CDN) أو خدمة أمان، مثل Cloudflare، فإنها تتحقق من كل طلب قبل وصوله إلى خادمك ويمكنها حظر أي زائر تعتبره تهديدًا، بما في ذلك الروبوتات. فهي تتصدى للهجمات وتسرع أداء موقعك، لكنها تقرر أيضًا أي الزوار يجب رفضهم.

في دراستي، قدم 11.6% من المواقع التي اختبرتها صفحة عادية لروبوت الزحف التابع لـ«جوجل»، بينما عرضت على روبوتات الزحف التي تعمل بالذكاء الاصطناعي رسالة خطأ، مع اختلاف اسم الروبوت فقط. وفي 9 حالات من أصل 11، سمح ملف robots.txt الخاص بالموقع — وهو الملف العام الذي تحدد فيه للروبوتات ما يجوز لها قراءته — بمرور برنامج الزحف نفسه الذي كانت خدمة الأمان الخاصة بالموقع ترفضه. وكانت 8 من أصل 11 مؤسسات عامة أو جامعات أو هيئات سياحية، وهي منظمات ترغب عادةً في أن يتم قراءة محتواها.

لن تكتشف أنظمة إدارة المحتوى (CMS) و«Search Console» وأدوات التحليل أيًا من هذه المشكلات، لأن الصفحة تُحمَّل بشكل طبيعي بالنسبة لك ولـ«جوجل».

الطبقة الثالثة: هل تقوم بحظر الروبوت الخطأ؟

تقوم كل شركة متخصصة في الذكاء الاصطناعي بتشغيل عدة روبوتات لأداء مهام مختلفة. وتوثق OpenAI روبوت GPTBot المخصص للتدريب وروبوت OAI-SearchBot المخصص للبحث.

يؤدي حظر GPTBot إلى منع استخدام محتواك في تدريب النماذج مستقبلاً، لكنه لا يزيلك من نتائج بحث ChatGPT. أما حظر OAI-SearchBot فيؤدي إلى ذلك، لذا تحقق أيّ من الاثنين مذكور في ملف robots.txt الخاص بك.

في العينة التي قمت بدراستها، أشار 27.7% من المواقع إلى روبوت ذكاء اصطناعي واحد على الأقل في ملف robots.txt، وحجب 11.7% منها روبوتًا واحدًا على الأقل في صفحات اللغات الخاصة بها، في حين لم يقم أي موقع بحجب Google أو Bing.

الطبقة الرابعة: هل يمكن للروبوت العثور على لغاتك الأخرى؟

قد تكون صفحتك باللغة الفرنسية مثالية، لكنها تظل غير قابلة للوصول، لأن برنامج الزحف يجب أن يعثر عليها أولاً، وهو ما يفعله من خلال تتبع الروابط الموجودة في شفرة مصدر الصفحة.

بالنسبة إلى 42.4% من الإصدارات اللغوية التي قمت بقياسها، كان العنصر «hreflang» هو المسار الوحيد من الصفحة الأصلية إلى الصفحة المترجمة، وهو العنصر الذي يُحدد لمحركات البحث أي صفحة تمثل النسخة الفرنسية من أي صفحة أخرى. ولم يكن هناك أي رابط عادي على الإطلاق، لأن قائمة اللغات عبارة عن برنامج نصي.

تعمل هذه المواقع اليوم لأن علامات hreflang الخاصة بها موجودة في كود مصدر الصفحة. ولكن إذا قمت بنقلها إلى ملف برمجي، كما تفعل بعض أدوات الترجمة عند إضافة قائمة اللغات، فإن تلك الصفحات تفقد المسار الوحيد الذي يمكن للروبوت اتباعه للوصول إليها. وفي العينة التي قمت بها، كان ذلك هو الحال في 4 صفحات مترجمة من أصل 10.

Weglot تقوم بإضافة هذه العلامات إلى صفحاتك تلقائيًّا، دون الحاجة إلى تعديل الكود. وتشرح وثائق تحسين محركات البحث (SEO) الخاصة بها كيفية عمل ذلك لكل نوع من أنواع الإعدادات.

الطبقة 5: هل يتم تقديم اللغة الخاطئة؟

تختار بعض المواقع اللغة بناءً على الإعدادات التي يرسلها المتصفح. وهذا الأمر ينجح، شريطة أن يضيف الموقع أيضًا ملاحظة من سطر واحد تقول: «تتغير هذه الصفحة وفقًا للغة الزائر».

وبدون ذلك، يمكن تقديم نسخة مخزنة لتسريع العرض إلى الزائر التالي بغض النظر عن لغته. وقد قامت 10 مواقع في عينتي بتغيير محتواها وفقًا للغة الزائر، ولم يذكر ذلك صراحةً سوى موقع واحد منها.

الفحص الطبي

قم بتنفيذ هذه الخطوات بالترتيب: لا تعمل كل خطوة إلا بعد اجتياز الخطوة التي تسبقها.

1. اعرض مصدر الصفحة المترجمة. من المفترض أن يظهر النص المترجم هناك. إذا لم يكن موجودًا، فتوقف وقم بإصلاح ذلك أولاً.
2. تحقق من لغة مصدر الصفحة. يجب أن تُشير صفحة /fr/ إلى اللغة الفرنسية في مصدرها، وليس إلى اللغة الإنجليزية.
3. اطلب عرض الصفحة نفسها باستخدام روبوتات مختلفة. أي أداة تتيح لك تعيين اسم لروبوت الزحف ستفي بالغرض. يجب أن يحصل كل من روبوت الزحف الخاص بـ Google وروبوتات الزحف التي تعمل بالذكاء الاصطناعي على نفس الصفحة، بحجم متماثل تقريبًا.
4. اقرأ ملف robots.txt الخاص بك حسب مسار اللغة. تأكد من أن الروبوت الذي تسمح له بالدخول هو الذي تقصده بالفعل، وتحقق من مجلدات اللغات، وليس الصفحة الرئيسية فقط.
5. افتح صفحتك الرئيسية في نافذة خاصة بدون ملفات تعريف الارتباط. يجب أن تكون اللغات الأخرى متاحة كروابط عادية، وليس فقط من خلال قائمة تتطلب استخدام البرامج النصية.
6. قارن خريطة موقعك بالواقع. فعناوين URL باللغة المذكورة في خريطة الموقع لا تثبت شيئًا إذا كانت تلك الصفحات تظهر باللغة الإنجليزية.
7. تحقق من سجلات الزيارات الخاصة بخادمك (سجلاته) بحثًا عن برامج الزحف التي تعمل بالذكاء الاصطناعي. ركز على الرد الذي حصل عليه كل منها، أكثر من التركيز على عدد مرات زيارته.

تُظهر ميزة «فحص عناوين URL» في «Search Console» العرض الذي تعرضه «جوجل»، حيث تقوم «جوجل» بتشغيل البرامج النصية؛ لذا تبدو الصفحة التي تُترجم بواسطة البرامج النصية مترجمة بشكل مثالي في هذه الميزة. ولا يمكن لهذه الميزة أن تُظهر لك هذه المشكلة، ولهذا السبب تم إنشاء «الفحص 1».

كيف قمت بقياس ذلك

قمت بمراجعة 97 موقعًا من مواقع متعدد اللغات و174 نسخة لغوية، شملت مواقع في مجالات البرمجيات، والسفر، والتجارة الإلكترونية، والإعلام، والتعليم، والمؤسسات، والمنظمات غير الربحية.

بالنسبة لكل موقع، قمت بطلب كل صفحة مرتين: مرة كمتصفح يقوم بتنفيذ البرامج النصية، ومرة أخرى كروبوت لا يقوم بذلك. ثم أرسلت الطلب نفسه تحت 6 أسماء مختلفة لبرامج الزحف، وتحققت من قواعد ملف robots.txt لكل موقع للتأكد من مسارات اللغات الخاصة به. ولتجنب التحيز، قمت بتدوين طريقة تصنيفي لكل موقع وتوقيتها قبل اختبار أي موقع لم أكن على دراية به مسبقًا.

تتسم هذه الدراسة بحدودتين. فقد جاءت طلباتي من اتصال عادي وليس من خوادم شركات الذكاء الاصطناعي نفسها، لذا قمت بقياس ما يتلقاه «بوت» يُطلق على نفسه اسم GPTBot، وهو ما قد يختلف عما يحصل عليه GPTBot الحقيقي. كما قمت بقياس ما تتلقاه برامج الزحف، وليس مدى تكرار استشهاد المساعدين الرقميين بهذه المواقع. وهذا الأمر يستحق دراسة مستقلة بحد ذاته.

من أين نبدأ

إذا كان هناك شيء واحد فقط عليك القيام به هذا الأسبوع، فاطلع على شفرة المصدر لصفحتك المترجمة الأكثر أهمية. إذا لم يكن النص المترجم موجودًا هناك، فهذا يعني أنك قد وجدت الإجابة، والحل هو عرض ترجماتك من الخادم بدلاً من المتصفح.

إذا كان موجودًا، فانتقل إلى الطبقة 2، لأنني وجدت هناك الأخطاء التي تفوتها الفحوصات القياسية.

أن يكون النص مترجماً وأن يكون سهل القراءة ليسا الأمر نفسه، لكن يمكنك قياس الفارق بينهما في غضون فترة ما بعد الظهر.

تأكد من أن برامج الزحف التي تعمل بالذكاء الاصطناعي قادرة على قراءة كل لغة تنشرها. في دراستي، وجدت أن حوالي 1 من كل 7 صفحات مترجمة لم تقدم سوى أقل من 30% من نصها لبرامج الزحف التي لا تشغل البرامج النصية. مع Weglotإعدادات النطاق الفرعي والدليل الفرعي وووردبريس الخاصة بـ [الاسم]، يتم تقديم ترجماتك من الخادم وتُضاف علامات hreflang تلقائيًا، بحيث تكون كل لغة موجودة في مصدر الصفحة منذ الطلب الأول. ابدأ تجربتك المجانية لمدة 14 يومًا، ثم قم بإجراء الفحص رقم 1 على صفحاتك المترجمة بنفسك.