هل بذلت كل جهدك في حل مشكلة عدم فهرسة المقالات من خلال إنشاء محتوى عالي الجودة، ثم اكتشفت أن صفحات الويب الخاصة بك لا تظهر حتى في نتائج محركات البحث (SERPs)؟ وربما تساءلت بأعلى صوتك: لماذا لا تتم فهرسة مقالاتي؟
والجواب: بغض النظر عن مدى تحسينك للسيو (SEO)، قد يظل المحتوى الخاص بك غير مرئي. محبط، أليس كذلك؟ غالبًا ما تكون مشاكل فهرسة الموقع هي السبب الرئيسي لعدم ظهور صفحاتك في فهرس جوجل.
في هذا المقال، سنستعرض معًا أبرز المشكلات التي تؤدي إلى عدم فهرسة مقالات وصفحات موقعك، ونقدم لك حلولًا عملية تساعدك على حل مشكلة عدم فهرسة المقالات، وذلك لضمان ظهور موقعك الخاص في نتائج البحث.
النقاط الرئيسية
تمنع مشكلات فهرسة الصفحات محركات البحث من العثور على محتوى موقعك وتضمينه في فهرس البحث الخاص بها. وبالتالي، لا يمكن أن تظهر هذه الصفحات أو المقالات أو يتم ترتيبها في نتائج محركات البحث.
ومع ذلك، هناك أنواع من الصفحات لا ينبغي فهرستها. وتشمل هذه الصفحات المكررة أو البديلة للمحتوى، والصفحات الخاصة (مثل صفحات تسجيل الدخول، الحسابات، أو تلك التي تحتوي على معلومات سرية)، بالإضافة إلى صفحات الفرز أو التصفية، وما إلى ذلك.
فيما يلي بعض الأسباب المحتملة لحل مشكلة عدم فهرسة المقالات:- جودة المحتوى الرديئة (محتوى ضعيف أو مكرر).
- مشاكل فنية (حظر ملف robots.txt، أو علامات أساسية غير صحيحة، أو مشاكل في رمز حالة HTTP مثل 404).
- هيكل الموقع وسرعته (ربط داخلي ضعيف، أو تحميل بطيء للموقع، أو حظر الموارد الأساسية مثل JavaScript و CSS والصور).
- العقوبات (يمكن للعقوبات اليدوية من جوجل أن تمنع الفهرسة تمامًا).
- عوامل أخرى (رمز مشبوه، تجاوز ميزانية الزحف، الموقع الاكتروني الجديد، أو مشاكل فهرسة من جانب جوجل).
- أخطاء الخادم (5xx)
- أخطاء إعادة التوجيه
- الصفحات المخفية (عنوان URL مُعلم بـ "noindex"؛ عنوان URL محظور بواسطة robots.txt)
- المحتوى المفقود أو إذن الوصول (Soft 404؛ محظور بسبب طلب غير مصرح به (401)؛ غير موجود (404)؛ محظور بسبب الوصول المحظور (403)؛ عنوان URL محظور بسبب مشاكل أخرى من فئة 4xx؛ أخطاء الخادم (5xx)).
- إشارات الفهرسة المتضاربة (مكررة بدون أساسي محدد من قبل المستخدم؛ مكررة، اختارت جوجل أساسيًا مختلفًا عن المستخدم؛ صفحة مع إعادة توجيه؛ مفهرسة، على الرغم من حظرها بواسطة robots.txt؛ صفحة مفهرسة بدون محتوى).
فهم حل مشكلة عدم فهرسة المقالات في الموقع
الفهرسة هي كيف تكتشف محركات البحث المعلومات حول محتوى الموقع الالكتروني وتحللها وتخزنها.
في الواقع، إذا كان موقعك الخاص يعاني من مشكلة في الفهرسة ولم يتم حل مشكلة عدم فهرسة المقالات، فإنه يصبح غير مرئي لمحركات البحث. نتيجة لذلك، هذا يعني أن الزوار المحتملين لن يتمكنوا من العثور على الموقع الخاص بك من خلال عمليات البحث المجانية.
في الأساس، عند اتخاذ قرار بشأن ما إذا كان سيتم فهرسة صفحة ما، تحلل خوارزميات جوجل كل صفحة ويب بحثًا عن الصلة والجودة. بالاضافة الي ذلك، تراقب جوجل مجموعة واسعة من العوامل، ومنها هدف المحتوى، ونضارته، ووضوحه، وتوافقه مع معايير E-E-A-T، بالإضافة إلى الربط الداخلي، وسرعة التحميل، والعلامات الأساسية، وعلامة robots meta، وعلامة X-Robots-Tag.
بدون شك، تعتبر جودة المحتوى عاملاً رئيسيا في مجال التدوين. كتوضيح، يتم تجاهل المحتوى منخفض الجودة لأنه لايقدم قيمة للزائر او المستخدم. تتضمن بعض الأمثلة على ذلك، المحتوى الذي يتم إنشاؤه فقط للتلاعب بالترتيب، أو المحتوى الذي يفتقر إلى الأصالة أو المصداقية أو الوضوح. من ناحية أخرى، يمكنك تحسين الفهرسة لموقعك وتحسين ترتيبة من خلال إنشاء محتوى عالي الجودة يتوافق مع معايير E-E-A-T ومرتبط بروابط خلفية من مواقع الويب ذات الصلة.
بوضع هذا بعين الاعتبار، غالبا ما تتسبب مشكلات تحسين محركات البحث التقنية أيضا في حدوث مشكلة عدم فهرسة الصفحات أو المقالات في جوجل. حيث يمكن لملفات الروبوتات التي تحظر الصفحات المهمة وخرائط المواقع التي تم تكوينها بشكل غير صحيح (أو عدم وجود خريطة الموقع على الإطلاق). لذلك، تأكد من وجود خريطة الموقع لكي يتمكن محرك البحث من الزحف إلى موقعك وفهرسته. من جهة أخرى، من المحتمل أن تؤدي ممارسات تحسين السيو غير الأخلاقية مثل حشو وتكرار الكلمات الرئيسية إلى معاقبة موقعك وإزالته من نتائج محركات البحث تماما.
لماذا لا ينبغي فهرسة بعض الصفحات أو المقالات؟
الآن بعد أن ناقشنا وفهمنا أن مشاكل فهرسة جوجل تضر بالحضور العام للموقع وظهوره وترتيبه في نتائج البحث. دعونا نفكر أيضا، لماذا يتم أحيانا منع الزحف الى بعض الصفحات أو المقالات؟ بالطبع، لا يلزم فهرسة جميع الصفحات أو المقالات بواسطة أنظمة البحث. لأنه ستستفيد بعض الصفحات أو المقالات بشكل أكبر إذا تم إخفاؤها عمدا عن محركات البحث لتجنب مشاكل عدم الفهرسة.فيما يلي بعض أنواع الصفحات التي يمكنك استبعادها من فهرسة محرك البحث دون الإضرار بتحسين محركات البحث (SEO):
فكر في عربة التسوق عبر الإنترنت أو صفحة حسابك. هذه الصفحات مخصصة لعينيك فقط؛ لا يحق لمحركات البحث الزحف إليها. غالبا ما تكون مخفية خلف تسجيل الدخول وكلمة المرور، مما يؤدي إلى تلقي جوجل رمز حالة الاستجابة "401 غير مصرح به" وتجاهل محتوى الصفحة.
2. الصفحات المكررة أو البديلة.تحتوي بعض مواقع الويب على إصدارات متعددة من نفس المحتوى الناتج عن عوامل التصفية أو خيارات الفرز. تفضل محركات البحث المحتوى الفريد، لذلك قد تفهرس إصدارًا واحدًا فقط (عنوان URL الأساسي) وتترك الباقي. هذا سلوك طبيعي تماما، والتحذير الذي تراه في GSC لصفحة ما يؤكد أن جوجل قد وجدت الصفحة الصحيحة.
3. صفحات البحث داخل الموقع.
عادةً ما تنشئ مواقع الويب صفحات بحث ديناميكيا من عمليات بحث المستخدم. بشكل عام، لا تستحق صفحات البحث التي ينشئها المستخدمون الفهرسة، لأنها تعمل بشكل أشبه بالخريطة وتساعد المستخدمين في العثور على محتوى معين داخل مدونتك. استخدم علامة "noindex" لمنع فهرستها من روبوتات البحث. يساعد هذا في تركيز نتائج البحث على المحتوى الفريد والقيم الخاص بك.4. الصفحات الإدارية.
الواجهة الخلفية لموقعك مخصصة لإدارة المحتوى والإعدادات، وليس للعرض العام. غالبا ما يتم حظر الصفحات الإدارية بواسطة ملفات توجيهات الروبوتات، والتي تخبر أنظمة البحث بعدم الزحف إليها. لا داعي للقلق بشأن هذه التحذيرات.يمكنك القول، إذا تم حظر صفحة أو مقالا عمدا من أنظمة البحث لسبب وجيه، فإن تحذيرات Search Console هي علامة جيدة. وهذه اشارة تؤكد أن أنظمة البحث تحترم تعليماتك وتركز على أجزاء موقعك الالكتروني الذي يستحق أن يظهر في نتائج البحث.
الأسباب المحتملة لـ حل مشكلة عدم فهرسة المقالات
بدون أدنى شك، هناك بعض العوامل أو بالأحرى عوامل عديدة تمنع أليات البحث من فهرسة صفحاتك. في هذا القسم، سوف نوضح هذه الأسباب:المحتوى المكرر
هنا يأتي دورك كمدون، حيث يؤدي وجود محتوى متطابق أو مشابه على مقالات متعددة إلى انخفاض في تصنيف موقعك ونقص في عدد زيارات المدونة. يحدث هذا لأن جوجل لا تستطيع تحديد صفحات المقالات الأكثر صلة وقيمة لعملية بحث معينة. إنها لا تعرف أي منها يجب أن تعطيه الأولوية. والأسوأ من ذلك، إذا اعتقدت جوجل أنك تنتج محتوى مكررا للتلاعب بنتائج البحث، فقد تزيل صفحاتك تمامًا من فهرس البحث الخاص بها.محتوى منخفض الجودة
محظور بواسطة robots.txt
محظورة بواسطة علامة أو رأس noindex
في هذه الحالة، يمكنك توجيه خوارزميات البحث لفهرسة صفحة معينة باستخدام علامة robots meta وعنوان (HTTP X-Robots-Tag). على الجانب الإيجابي، هذا مفيد لبعض الصفحات التي تحتوي على معلومات خاصة ومناطق المسؤول ومحتوى مكرر وصفحات أخرى منخفضة القيمة. بالرغم من ذلك كن حذرا. إذا أضفت هذه الوسوم أو العلامات إلى صفحات مهمة، فستختفي من نتائج محرك البحث تماما.علامات أساسية غير صحيحة
في هذه المناسبة، تستخدم العلامات الأساسية (rel="canonical") عادةً لإخبار محركات البحث بالصفحة التي (من بين تلك التي تحتوي على محتوى مشابه أو متطابق) يجب تحديد أولوياتها من أجل الفهرسة. سوف تتخذ جوجل القرار من تلقاء نفسها إذا لم تحدد عنوان الرابط الذي يجب تحديده كأولوية. مع الانتباه إلى ذلك، قد يؤدي إهماله أحيانًا إلى حدوث مشكلة خطيرة في العلامات الأساسية. على سبيل المثال، قد يفهرس الإصدار الخاطئ من صفحة الويب.مشاكل رمز حالة HTTP
للتوضيح، عادةً ما تعني رموز حالة HTTP في الفئتين 4xx و 5xx وجود مشاكل في الوصول إلى المحتوى. عندما تواجه جوجل خطأ 4xx، فإنها تتجاهل محتوى تلك الصفحة. يتضمن ذلك أي محتوى على عناوين URL المفهرسة بالفعل والتي تعرض الآن أخطاء 4xx. قد تؤدي أخطاء 5xx (مشاكل الخادم) إلى إبطاء زحف جوجل مؤقتا. ولكن من المؤكد، إذا استمرت هذه المشكلات، فقد تزيل جوجل الصفحات التي تمت فهرستها مسبقا من نتائج البحث الخاصة بها.مشاكل الربط الداخلي
لذا، اذا كان هيكل الموقع الالكتروني متين مع الربط الداخلي الجيد فانه يحسن تجربة المستخدم، وكذلك يساعد جوجل في الزحف إلى صفحات الموقع وفهرستها. غالبا ما يتم التغاضي عن مشاكل السيو الداخلي مثل الروابط المعطلة أو الصفحات اليتيمة (أي الصفحات التي لا تشير إليها أي روابط داخلية)، إلا أنها من الوارد أن تتسبب في إرباك محركات البحث، مما يصعب عليها اكتشاف المحتوى وفهمه.صفحات بطيئة التحميل تؤثر على حل مشكلة عدم فهرسة المقالات
نظرًا لأن جوجل تهدف باستمرار إلى توفير تجربة مستخدم إيجابية، فليس من المستغرب أن تؤدي الصفحات بطيئة التحميل إلى حدوث مشكلة في الفهرسة وعدم فهرسة المقالات. تؤدي أوقات التحميل البطيئة إلى إحباط المستخدمين، مما يزيد من فرصة مغادرتهم قبل اتخاذ إجراء مهم لعملك. تشير معدلات الارتداد المرتفعة إلى جوجل أن المحتوى الخاص بك يفتقر إلى القيمة أو الصلة. اذا كان تحميل الموقع الإلكتروني بطيئا فانه يؤثر على نتائج Core Web Vitals الخاصة بك، ويؤثر بشكل مباشر على ترتيب موقعك في نتائج البحث. للتحقق من سرعة الموقع الخاص بك، يمكنك استخدام PageSpeed Insights أو اختبار سرعة موقعك الخاص بـ SE Ranking.حظر ملفات JavaScript و CSS والصورة
توفر ملفات JavaScript و CSS والصورة معلومات حاسمة حول التصميم المرئي والميزات التفاعلية وحتى المحتوى نفسه (مثل الصور). يرجح أن تجعل الموارد المحظورة صفحة الويب تبدو معطلة لمحركات البحث. هذا يمنع جوجل من عرض الصفحة بالكامل. من المحتمل أن يؤدي ذلك إلى فهرسة غير دقيقة وترتيب أقل في البحث.تجاوز ميزانية الزحف
دعني أوضح لك هذه النقطة، لكل موقع ويب ميزانية زحف مخصصة (عدد الصفحات التي يمكن لروبوتات الزحف إليها خلال إطار زمني محدد). قد ينتج من تجاوز ميزانية الزحف إلى منع الزحف إلى بعض صفحاتك وفهرستها. من المرجح أن تواجه مواقع الويب الكبيرة (10000 صفحة أو أكثر) هذه المشكلة.
للبقاء تحت الحد، قم بإدارة مخزون عناوين URL الخاص بك عن طريق دمج المحتوى المكرر، ووضع علامة على الصفحات التي تمت إزالتها برمز حالة 404 أو 410، والحفاظ على تحديث خرائط المواقع الخاصة بك، وتجنب سلاسل إعادة التوجيه الطويلة. يجب عليك أيضا تحسين سرعة الموقع الخاص بك، ومراقبة الزحف إليه باستمرار بحثًا عن مشكلات التوفر، وتحديد أولويات الصفحات الحالية عن طريق تعيين مستويات الأولوية في خريطة الموقع XML.
موقع ويب جديد تماما
كما يمكن أن يرى، حتى إذا انتهيت من إعداد موقعك الإلكتروني الجديد، فقد لا تزال جوجل بحاجة إلى وقت للزحف إليه وفهرسته. نظرًا لأن جوجل لديها سجل متراكم واسع وتزحف إلى مواقع الويب بسرعات مختلفة، فقد يستغرق الأمر من ساعات إلى أسابيع حتى يعثر محرك البحث على موقعك الإلكتروني الجديد. ناهيك عن احتمال دخول موقعك في صندوق جوجل ساندبوكس.
في غضون ذلك، ركز على ثلاث استراتيجيات رئيسية. أولًا، استمر في إضافة محتوى ذي صلة إلى موقعك. ثانيًا، اتبع أفضل ممارسات تحسين محركات البحث (SEO) في جميع عمليات التحسين. وأخيرًا، تتمثل الاستراتيجية الأخيرة في إنشاء روابط خلفية عالية الجودة من مواقع ويب موثوقة وذات سلطة عالية؛ إذ يمكن أن تشير هذه الروابط إلى أهمية موقعك لجوجل، الأمر الذي قد يؤدي إلى تسريع عملية الزحف والفهرسة وبالتالي حل مشكلة عدم فهرسة المقالات.
رمز مشبوه
لفهم موضوع موقعك أو مدونتك، يجب أن تكون جوجل قادرة على رؤية كل محتواه، بما في ذلك النص والروابط والتنسيق. لا يمكن لجوجل فهرسته بشكل صحيح بخلاف ذلك. إذا جعلت الأمر صعبا عمدا أو عن غير قصد على روبوتات جوجل للوصول إلى ملفاتك (على سبيل المثال، من خلال التمويه العدواني)، فقد يثبط هذا جوجل عن فهرسة موقعك بشكل فعال. تصبح المشكلة أكثر خطورة إذا عبث المتسللون برمز الموقع الخاص بك، مثل حقن البرامج الضارة أو إضافة روابط مخفية.
قم دائمًا بإعطاء الأولوية لأمان موقعك الخاص والحفاظ على رمزك نظيفا وسهل القراءة. يمكن أن يؤدي إهمال ذلك إلى الإضرار بترتيب البحث الخاص بك أو حتى إسقاط صفحاتك من فهرس البحث.عقوبة الإجراء اليدوي
في حين أن عقوبات جوجل لا تزيل موقعك مباشرة من نتائج محركات البحث، إلا أن الإجراءات اليدوية الشديدة (مثل تلك المتعلقة بالبريد العشوائي أو الممارسات الخادعة) ليس مستبعدًا أن تتسبب في إلغاء الفهرسة مؤقتًا أو دائمًا. وذلك لأن جوجل تعطي الأولوية لتجربة المستخدم وتهدف إلى حماية المستخدمين من المحتوى الذي يحتمل أن يكون ضارًا. بالإضافة إلى ذلك، يسمح تقييد الفهرسة أثناء المراجعة لجوجل بجمع الأدلة ومنع التلاعب بنتائج البحث من قبل مالك الموقع.مشاكل فهرس جوجل
يُحتمل أن تؤدي الأعطال الفنية من جانب جوجل إلى تأخير الفهرسة. هذا يزيد من الوقت الذي يستغرقه ظهور المحتوى الخاص بك في نتائج محركات البحث. ضع في اعتبارك أن GSC يحصل على بياناته من فهرس جوجل. لذلك، أثناء مشكلة الفهرسة، قد يعرض GSC معلومات غير كاملة أو غير دقيقة. عندما يحدث هذا، ابق على اطلاع عن طريق التحقق من إشعارات جوجل حول المشكلة.كيفية اكتشاف حل مشكلة عدم فهرسة المقالات للموقع
هناك عدة طرق يمكنك استخدامها للتحقق من وجود مشاكل في الفهرسة (Indexing Issues) على مدونتك. تتضمن الطرق الأكثر فعالية استخدام GSC أو نظام أساسي موثوق لتحسين محركات البحث. دعنا نستكشف كل طريقة بالتفصيل.Google Search Console
قد يوفر GSC معلومات SEO ثاقبة حول حالة فهرسة مدونتك. يساعدك تقرير تغطية الفهرس (فهرسة الصفحات) على تتبع عناوين URL لموقع الويب الخاص بك التي زحفت إليها جوجل وفهرستها بنجاح. كما يحدد قائمة (غير مفهرسة) بالمشكلات التي قد تمنع فهرسة صفحات أخرى.دقق على عناوين URL التي في خانة "غير مفهرسة" عند استكشاف هذا التقرير. قم بالتمرير لأسفل لرؤية قسم "الأسباب المؤدّية إلى عدم فهرسة الصفحات". سيعطيك هذا فهمًا لسبب قرار جوجل بعدم فهرسة عناوين URL معينة.
الأسباب التالية هي الأكثر شيوعًا في GSC:
1. نقص في إجمالي الصفحات المفهرسة بدون أخطاء مقابلة
إذا لاحظت أن موقعك أو مدونتك يحتوي على عدد أقل من الصفحات المفهرسة من المعتاد دون ظهور رسالة خطأ جديدة، فقد تكون قد منعت جوجل من الوصول إلى بعض المحتوى الحالي عن طريق الخطأ.
جرب هذه الخدعة: ابحث عن زيادة أو قفزة في عناوين URL غير مفهرسة والتي تتزامن مع الانخفاض في الصفحات المفهرسة. قد تكون هذه الزيادة علامة على أن شيئًا ما يمنع جوجل من رؤية المحتوى الخاص بك.
2. عدد الصفحات غير المفهرسة أكثر من عدد الصفحات المفهرسة
قد تصادف بعض الحالات التي لا تظهر فيها صفحات أكثر في نتائج البحث (غير مفهرسة) من الصفحات التي تظهر في بحث جوجل. يحدث هذا عادة لسببين. الأول هو أن موقعك لديه قاعدة تحظر عن طريق الخطأ محركات البحث من الزحف إلى أقسام مهمة. والثاني هو أن موقعك يحتوي على محتوى مكرر (على سبيل المثال، من خيارات التصفية أو الفرز) التي تعتبرها محركات البحث أقل قيمة.3. ارتفاع الأخطاء
قد تواجه أحيانًا ارتفاع مفاجئ في الأخطاء. ينتج هذا عن الحالتين التاليتين:- إذا قمت مؤخرًا بتحديث تصميم موقعك الالكتروني، فقد تكون هناك مشكلة في القالب الجديد تتسبب في حدوث هذه الأخطاء.
- إذا قمت مؤخرًا بإرسال خريطة موقع، فقد تحتوي على صفحات لا يمكن لجوجل الوصول إليها (نظرًا لأنها محظورة بواسطة robots.txt أو مخفية بعلامة "noindex" أو تتطلب تسجيل الدخول، وما إلى ذلك).
4. أخطاء الخادم
عند الحديث عن أخطاء الخادم، تحتاج روبوتات البحث إلى تفاعل سلس مع الخادم الخاص بك لفهرسة موقعك الالكتروني بكفاءة. في حالة حدوث أخطاء في الخادم، قد تراها برامج الزحف كعلامة على وجود موقع منخفض الجودة أو غير مستقر. يمكن أن يؤدي هذا إلى خفض أولوية فهرسة موقع الويب الخاص بك أو حتى إسقاطه بالكامل من فهرس البحث.
على الرغم من أن أداة فحص عنوان الرابط يمكن أن تساعدك في تشخيص أخطاء الخادم التي تم الإبلاغ عنها في تقرير فهرسة الصفحة، إلا أن هذه الأخطاء قد تكون مؤقتة. هذا يعني أن اختبارك لديه فرصة للنجاح حتى لو واجهت برامج زحف جوجل مشكلات في الخادم في وقت سابق، ولكن من المهم متابعتها باستمرار ضمن خطوات حل مشكلة عدم فهرسة المقالات لضمان عدم تكرارها وتأثيرها على ظهور صفحاتك في نتائج البحث.
5. أخطاء 404
قد يواجه Googlebot صعوبة في الوصول إلى صفحة الويب الخاصة بك. يحدث هذا عادةً بعد إزالة الصفحة من موقعك أو عندما يصبح الرابط الداخلي الذي يشير إليها معطلاً (يوجه إلى صفحة غير موجودة). لهذا السبب، لم يتمكن روبوت محرك البحث من معالجة صفحتك واضطر إلى التخلي عن الطلب.6. الصفحات أو المواقع المفقودة
فيما يلي بعض الحالات التي قد تمنع ظهور صفحتك أو مقالاتك في تقرير فهرسة الصفحات:- قد لا تكون Google على علم بالصفحات الجديدة بعد (يستغرق الأمر وقتًا لاكتشافها).
- تحتاج Google إلى العثور على رابط لصفحتك أو تقديم خريطة الموقع لمعرفة وجودها.
- قد لا تتمكن Google من الوصول إلى صفحتك (تسجيل الدخول مطلوب، الوصول محظور، إلخ).
- قد تحتوي الصفحة على علامة "noindex" تخبر Google تحديدًا بعدم فهرستها.
بصرف النظر عن تقرير فهرسة الصفحات، يتحقق متخصصو تحسين محركات البحث (SEO) بانتظام من قسم "الأمان والإجراءات اليدوية". لماذا؟ لأن أي عقوبات يتم العثور عليها هناك، مثل التكتيكات غير المرغوب فيها أو إساءة استخدام سمعة الموقع، يمكن أن تؤدي إلى خفض التصنيفات أو حتى الإزالة من نتائج البحث تمامًا. بالطبع، يمكن أن تؤثر بشكل مباشر على حل مشكلة عدم فهرسة المقالات لموقعك.
يسرد تقرير الإجراءات اليدوية المشكلات التي وجدها المراجعون البشريون في فريق مراجعة محركات البحث، وعادةً ما تكون مرتبطة بمحاولات خداع نظام البحث بدلاً من الإضرار المباشر بالمستخدمين. من ناحية أخرى، يحذر تقرير مشكلات الأمان من القرصنة المحتملة أو المحتوى الضار على موقعك، مثل هجمات التصيد الاحتيالي أو تثبيت البرامج الضارة أو البرامج غير المرغوب فيها على جهاز كمبيوتر المستخدم.
على العموم، قد تتسبب العناصر المذكورة في أي من هذه التقارير في إشكالات كبيرة في فهرسة موقعك في نتائج محركات البحث.أداة SE Ranking
يعد تتبع حالة الفهرسة الخاصة بك باستخدام أدوات مثل جوجل سيرش كونسول أمرًا مفيدًا، ولكن هناك طرق أسرع للعثور على مشكلات الفهرسة وإصلاحها من Googlebot.
على سبيل المثال، تتيح لك أداة تدقيق موقع الويب من SE Ranking إجراء تدقيق SEO عند الطلب وتقديم تقرير فهرسة متعمق في غضون دقائق بفضل الخطة المجانية، مما يسمح لك ببدء إصلاح المشكلات المكتشفة على الفور.
إجراء تدقيق لموقع الويب
قم بفحص موقع الويب الخاص بك في دقيقتين. أدخل عنوان URL لأي موقع ويب للحصول على تقرير مفصل عن المشكلات التقنية والحلول المقترحة.
بمجرد أن يصبح تقرير التدقيق جاهزًا، انتقل إلى قسم النظرة العامة وقم بالتمرير إلى كتلة قابلية فهرسة الصفحة.
سترى لوحة معلومات مع رسم بياني يوضح عدد ونسبة الصفحات الخاصة بك التي يمكن فهرستها مقارنة بتلك التي لا يمكن فهرستها. توفر لوحة المعلومات أيضًا رؤى حول سبب عدم فهرسة الصفحات، مثل حظر robots.txt وعلامات meta noindex وعناوين URL غير الأساسية والمزيد. انقر فوق الرسم البياني لاستكشاف تقرير مفصل للصفحات التي تم الزحف إليها.
يقسم هذا التقرير الصفحات الفردية بمعلمات مثل الصفحات المرجعية وعدد المشكلات المكتشفة ورموز الحالة وتوجيهات robots.txt وعناوين URL الأساسية والمزيد، مما يساعدك بشكل كبير في حل مشكلة عدم فهرسة المقالات على موقعك.
تتيح لك وظيفة SE Ranking تصفية الصفحات المحظورة بواسطة noindex والمحظورة بواسطة X-Robots-Tag بسهولة. نظرًا لأنه لا ينبغي حتى فهرسة هذه الصفحات في المقام الأول، يمكنك إزالتها من قائمة "الإصلاح".
يوفر قسم الزحف في تقرير المشكلات معلومات فهرسة مماثلة. ويمكنك أيضًا استخدام هذا التقرير لفرز الرؤى المحددة حسب الأخطاء ومراجعة قائمة مصنفة للمشاكل التي قد تؤثر على الفهرسة على موقعك، مثل المحتوى المكرر ومشكلات رمز حالة HTTP والمشاكل المتعلقة بإعادة التوجيه وسرعة الموقع و CWV وما إلى ذلك.
للحصول على فحص سريع لحالة الفهرسة عبر محركات البحث المختلفة، استخدم مدقق حالة الفهرسة الخاص بـ SE Ranking.
أخطاء الفهرسة في Google Search Console (+ نصائح إصلاح بسيطة)
الآن بعد أن فهمت كيفية اكتشاف مشكلات فهرسة موقع الويب، دعنا نراجع المشكلات الأكثر شيوعًا التي قد تواجهها ونصائح سريعة لإصلاح كل منها.خطأ في الخادم (5xx)
تحدث أخطاء الخادم عادةً عندما يفشل روبوت محرك البحث في الوصول إلى صفحة ويب. ينتج هذا عن مشكلات مثل الأعطال أو المهلات أو تعطل الخادم.خطأ في إعادة التوجيه
فيما يلي قائمة بأخطاء إعادة التوجيه التي قد يكتشفها جوجل سيرش كونسول على موقعك الإلكتروني:- سلسلة إعادة التوجيه طويلة جدًا
- حلقة إعادة التوجيه
- تجاوز طول عنوان الرابط لإعادة التوجيه
- عنوان رابط مكسور أو غير مكتمل في سلسلة إعادة التوجيه
لاكتشاف مشكلات إعادة التوجيه وإصلاحها، استخدم أدوات مخصصة مثل مدقق إعادة التوجيه المجاني من SE Ranking. (https://seranking.com/free-tools/redirect-checker.html). تتيح لك هذه الأداة رؤية عدد عمليات إعادة التوجيه التي تمتلكها عناوين URL الخاصة بك، وتحديد أنواع إعادة التوجيه، والعثور على سلاسل إعادة التوجيه، واكتشاف إلى أين تؤدي عناوين URL المشفرة القصيرة.
عنوان رابط محظور بواسطة robots.txt
يعني هذا الخطأ أن محركات البحث لا يمكنها الوصول إلى صفحة معينة على موقعك. يحدث هذا عندما تقيد الإرشادات الموجودة داخل ملف robots.txt الخاص بك الوصول إلى الصفحة. يمكن أن يكون هذا إما مقصودًا أو خطأ في الملف نفسه.تأكد من أن الصفحات المقصودة فقط هي المدرجة للحظر. إذا وجدت صفحات تريد فهرستها محظورة، فقم بتعديل القواعد في ملف robots.txt الخاص بك للسماح بالوصول إلى هذه الصفحات. يمكن القيام بذلك عن طريق إزالة أو تعديل أسطر معينة أو إضافة توجيهات السماح.
عنوان رابط مُعلم بـ "noindex"
واجهت Google توجيه "noindex"، لذلك لم تقم بتضمين الصفحة في فهرسها. إذا كان هذا هو ما قصدته، فإن كل شيء يعمل كما هو متوقع. قم بإزالة هذا التوجيه إذا كنت تريد أن تفهرس Google الصفحة.قم بإزالة أي علامات "noindex" للصفحات المهمة التي تريد أن تجدها برامج الزحف وتفهرسها. على العكس من ذلك، بالنسبة للصفحات التي لا تريد أن تكتشفها محركات البحث، اتركها كما هي (مع علامات "noindex").
Soft 404
يحدث خطأ soft 404 عندما يهبط المستخدم على عنوان URL يعرض رسالة تفيد بأن الصفحة مفقودة. في هذا السيناريو، توجد الصفحة تقنيًا وفقًا لرمز النجاح (200) الذي أرسله الخادم. يمكن أن يحدث هذا لأسباب مختلفة، بما في ذلك الملفات المفقودة على الخادم ومشكلات الاتصال وصفحات نتائج البحث الداخلية والمشاكل المتعلقة بملفات JavaScript والمزيد، مما يجعل حل مشكلة عدم فهرسة المقالات أمرًا ضروريًا في هذه الحالات.تحقق مما إذا كانت عناوين URL تفتقد بالفعل إلى المحتوى، وإذا كان الأمر كذلك، فأرجع رمز 404 المناسب. إذا كان المحتوى لا يزال ذا صلة، فتأكد من أن الصفحة تعكس ذلك ولا تضلل كلاً من محركات البحث والمستخدمين.
محظور بسبب طلب غير مصرح به (401)
إذا كنت تريد العثور على هذه الصفحات في SERPs، فإما امنح Googlebot حق الوصول أو اجعل الصفحات متاحة للجمهور.
غير موجود (404)
إذا كانت أي صفحات رئيسية تُرجع هذا الخطأ، فيجب عليك إما استعادة المحتوى الأصلي أو استخدام إعادة توجيه 301 لإرسال عنوان URL إلى صفحة بديل ذات صلة.
محظور بسبب الوصول المحظور (403)
يعني رمز الخطأ هذا أن وكيل المستخدم قدم بيانات اعتماد ولكنه يفتقر إلى إذن الوصول إلى هذا المورد. نظرًا لأن إعدادات الأمان الخاصة بموقع الويب الخاص بك تمنع روبوت محرك البحث عن طريق الخطأ من رؤية المحتوى الخاص بك، فلا يمكن فهرسته أو تضمينه في SERPs (نتائخ محرك البحث).إذا كنت تريد فهرسة هذه الصفحة، فامنح حق الوصول إلى جميع المستخدمين العموميين أو إلى Googlebot فقط (ولكن تحقق جيدًا من هويته).
عنوان URL محظور بسبب مشكلة أخرى من فئة 4xx
يعني هذا الخطأ أن صفحة الويب الخاصة بك تتأثر بأحد رموز استجابة HTTP 4xx بخلاف 401 أو 403 أو 404 أو Soft 404.تم الزحف إليه - لم تتم فهرسته حاليًا
كما يوحي اسم هذا الخطأ، فقد تم الزحف إلى عنوان URL ولكن لم تتم إضافته إلى فهرس بحث Google حتى الآن. تستغرق Google وقتًا لتحديد أولويات الصفحات المراد فهرستها، لذلك قد تنتظر صفحتك ببساطة دورها، وفي حال استمرار المشكلة، يجب العمل على حل مشكلة عدم فهرسة المقالات.ليست هناك حاجة لطلب إعادة الفهرسة. ما عليك سوى الانتظار أثناء عمل Google على فهرسة صفحة الويب الخاصة بك (بافتراض عدم وجود إرشادات حظر تمنعها).
تم اكتشافه - لم تتم فهرسته حاليًا
يشير هذا الخطأ إلى أن Google اكتشفت صفحة الويب الخاصة بك ولكنها لم تزحف إليها أو تفهرسها بعد. يحدث هذا الخطأ عادةً عندما تعيد Google جدولة الزحف، غالبًا لتجنب التحميل الزائد على موقع الويب.صفحة بديلة مع علامة أساسية مناسبة
لا يتم فهرسة عنوان URL الذي يُرجع هذه الرسالة لأنه نسخة مكررة من صفحة أساسية.تشير هذه الصفحة إلى الصفحة الأساسية، لذلك لا يوجد شيء تحتاج إلى القيام به.
مكررة بدون أساسي يختاره المستخدم
عنوان URL هذا هو نسخة مكررة من صفحة ويب أخرى على موقعك. نظرًا لأنك لم تحدد الصفحة الأساسية، فقد اختارت Google إصدارًا آخر لك.إذا كنت لا توافق على اختيار Google لعنوان URL الأساسي، فأخبر محركات البحث بعنوان URL الذي تفضله. تم وصف بعض الطرق الشائعة المستخدمة لتحديد عنوان URL أساسي في وثائق Google. إذا كنت تعتقد أن هذه الصفحة تستحق مساحتها الخاصة في نتائج البحث وليست نسخة من صفحة أخرى اختارتها Google كصفحة أساسية، فأعد كتابة المحتوى على كلتا الصفحتين لجعله فريدًا.
مكرر، اختارت Google أساسيًا مختلفًا عن المستخدم
استخدم أداة فحص عنوان URL للتحقق من عنوان URL الذي تعتبره Google هو الإصدار الرئيسي لصفحة الويب هذه.
صفحة مع إعادة توجيه
هذا عنوان URL غير أساسي يرسل الزائرين إلى صفحة مختلفة قد تكون مدرجة أو غير مدرجة في SERPs. لن تفهرس Google صفحة الويب التي تُرجع هذه الرسالة.لتحديد حالة فهرسة عنوان URL الأساسي المرتبط بصفحة الويب هذه، قم بتحليله باستخدام أداة فحص عنوان URL.
مفهرس، على الرغم من حظره بواسطة robots.txt
على الرغم من أنك حظرت عنوان URL هذا باستخدام ملف robots.txt، إلا أنه لا يزال يظهر في SERPs. في حين أن محركات البحث تتبع عادةً إرشادات ملف توجيهات الروبوتات، إلا أنها لا تزال قادرة على العثور على صفحتك إذا كانت مرتبطة بمواقع ويب أخرى، مما يعني أن الربط الخارجي يمكن أن يساهم أحيانًا في حل مشكلة عدم فهرسة المقالات حتى في حال وجود حظر عبر ملف الروبوتات. قد لا تزحف Google مباشرة إلى الصفحة المحظورة، ولكن يمكنها استخدام معلومات من المواقع التي تربطها لفهم موضوع صفحتك المحظورة وتضمينها في SERPs.
لمنع ظهور هذه الصفحة في SERPs، أضف علامة "noindex" إلى الصفحة بدلاً من robots.txt. لحث Google على فهرسة هذه الصفحة، قم بتحرير ملف الروبوتات الخاص بك للسماح بالوصول إليها.
صفحة مفهرسة بدون محتوى
يعني هذا الخطأ أن عنوان URL قد تم إدراجه في فهرس بحث Google، لكن Google لم تتمكن من العثور على أي معلومات عنه. يمكن أن يحدث هذا الخطأ للأسباب التالية:- التمويه
- محتوى غير كاف
- محتوى حظر العرض، والذي لا يتم تحميله بشكل صحيح
لمعرفة كيف ترى Google عناوين URL الخاصة بك، راجع صفحة الويب يدويًا واستخدم أداة فحص عنوان URL في GSC. قم بإصلاح أي مشكلات مثل المحتوى المفقود أو حظر العرض. بمجرد الإصلاح، اطلب من Google إعادة فهرسة عنوان URL.
كيف تطلب من Google التحقق من صحة مشكلات الفهرسة التي تم إصلاحها
لنفترض أنك قمت بإصلاح مشكلة وتريد إبلاغ Google بأن صفحة الويب الخاصة بك جاهزة لإعادة الفهرسة. إليك كيفية القيام بذلك:- افتح تقرير فهرسة الصفحة وحدد صفحة تفاصيل المشكلة.
- انقر فوق التحقق من صحة الإصلاح لإعلام Google بأنك عالجت المشكلات المدرجة في الصفحات.
قد يستغرق التحقق بعض الوقت (عادةً حوالي أسبوعين، ولكن في بعض الأحيان أطول). ستخطرك Google بمجرد اكتمال العملية. إذا نجح التحقق، تهانينا! يمكن الآن فهرسة عناوين URL المطلوبة الخاصة بك والظهور في SERPs.
إذا فشل التحقق من الصحة، يمكنك معرفة عناوين URL التي يجب إلقاء اللوم عليها. ما عليك سوى النقر فوق الزر عرض التفاصيل في صفحة تفاصيل المشكلة. بعد ذلك، أصلح مشكلات الفهرسة مرة أخرى للتأكد من تطبيق جميع التغييرات على كل عنوان URL مدرج. يمكنك الآن محاولة إعادة تشغيل التحقق من الصحة.
قد يعجبك: انشاء مدونة بلوجر والربح منها في 2025
باختصار
قد يكون محبطا رؤية صفحات الويب الخاصة بك تُرجع أخطاء في الفهرسة، خاصةً لعناوين URL الضرورية لاستراتيجية SEO الخاصة بك. الخبر السار هو أن معظم مشكلات الفهرسة التي تكتشفها GSC هي إصلاح بسيط.
الخلاصة؟ إن فهم الصفحات التي يجب فهرستها والتي لا ينبغي فهرستها هو المفتاح. عندها فقط يجب عليك استخدام علامات robots.txt و "noindex" لتوجيه محركات البحث إلى صفحات الويب المفضلة لديك للفهرسة.
إذا واجهت مشكلات في الفهرسة، فلا داعي للذعر. راجع الأوصاف الموجزة لكل مشكلة واتبع نصائح الإصلاح الموضحة في هذا المقال من أجل حل مشكلة عدم فهرسة المقالات بسرعة وضمان ظهور موقعك في نتائج البحث.
الأسئلة الشائعة حول حل مشكلة عدم فهرسة المقالات في جوجل
لماذا لا تتم فهرسة مقالاتي في جوجل؟في هذه الحالة، قد تكون عناكب بحث جوجل لم تعثر بعد على روابط مقالاتك لفهرستها، أو ربما بسبب أخطاء تقنية مثل حظر الصفحات في ملف robots.txt، أو استخدام وسم noindex، أو بطء الموقع، أو ضعف جودة المحتوى وتكراره، أو عدم إضافة المقالات إلى خريطة الموقع، أو لأن الموقع جديد ولم تكتشفه جوجل بعد.
كيف أُسرّع فهرسة المقالات الجديدة؟لتسريع فهرسة مقالاتك الجديدة، شارك الروابط عبر وسائل التواصل الاجتماعي والمنصات المتخصصة، وابنِ روابط خارجية من مواقع موثوقة تشير إلى مقالاتك. يمكنك أيضًا تحديث الصفحة الرئيسية أو الصفحات ذات الزيارات العالية بإضافة روابط للمقالات الجديدة، وتأكد من تحديث خريطة الموقع وإرسالها إلى أدوات مشرفي المواقع، مع متابعة أداء الفهرسة باستمرار.
كم من الوقت تحتاج جوجل لفهرسة المقالات الجديدة؟قد تستغرق عملية الفهرسة من ساعات إلى أسابيع حتى تكتشفها برامج جوجل بوت، خاصة إذا كان الموقع جديدًا أو لا توجد روابط تشير إليه. استمرار تحسين الموقع وتسويق المقالات يسرّع من عملية الفهرسة.
نعم، إذا كان المحتوى المترجم أو المنشأ بالذكاء الاصطناعي لا يضيف قيمة فريدة أو كان ضعيف الجودة، فقد تتجاهله جوجل ولا تقوم بفهرسته.