الزحف في محركات البحث الزحف كعملية اكتشاف حيث ترسل محركات البحث فريقًا من الروبوتات المعروفة إما بالزواحف أو العناكب للعثور على محتوى جديد ومحدث يمكن أن يختلف المحتوى ويمكن أن يكون صفحة موقع ويب صورة، مقطع فيديو، ملف PDF ولكن بغض النظر عن التنسيق يتم اكتشاف المحتوى ويتم إرسال الروابط مرة أخرى إلى Google لأنه تم جلبها بواسطة روبوتات الزحف هذه وسيقوم Google بفهرسته بعنوان URL للمواقع المختلفة فلنلقِ نظرة على Google Search Console الآن وسأريكم ما نبحث عنه في وحدة تحكم البحث في جوجل Google Search Console لمعرفة ما إذا تم الزحف إلى موقع الويب الخاص بنا مؤخرًا وما نوع المعلومات التي تم تجميعها إذن، ها هي صفحة موقعنا على الإنترنت مرة أخرى، هذا هو موقع حوض استحمام الدوامة وإذا ذهبنا إلى هنا ونظرنا إليه الصفحة عبارة عن إعادة توجيه لأنها HTTP ونعيد توجيهه إلى HTTPS لذا في هذه الحالة، لا أريد الزحف إليها ولكن فيما يخص ما نفعله نحن في الواقع نعيد توجيهه إلى الموقع الآمن لذلك لا أحتاجه حقًا للفهرسة ولكن يتم الزحف إليه، بالشكل المعتاد لذا، دعونا نلقي نظرة على بعض المشكلات التي نواجهها عندما نواجه مشكلات في الزحف أو الفهرسة دعنا نذهب هنا وبالطبع يمكنك دائمًا طلب فهرس هنا في Google عندما تطلب الفهرسة سيكون لديك حوالي 20 فقط في اليوم التي سيسمح لك Google Search Console بالقيام بها بمجرد الانتهاء من ذلك عليك الانتظار لليوم التالي وبعد ذلك، بعد أن تنتهي من 20 يومًا متتاليًا لنفترض أن لديك موقع ويب كبير بمجرد القيام بذلك سيقفل عليك فعلاً لمدة سبعة أيام وعليك الانتظار كما تعلم، حوالي 20 يوميًا إذا حصلت على 60 عنوان URL هناك، فاطلب الفهرسة هذا كثير وهذا كبير ويجب أن تفكر بالفعل في ما هي صفحات الويب الأكثر أهمية خاصة عند إنشاء موقع إذا كان العدد يزيد عن 60 صفحة ما هي الصفحات الأكثر أهمية للحصول على فهرس Google أولاً ثم اطلب تلك الصفحات ويمكنك الانتقال هنا في Google Search Console وإلقاء نظرة على، هل الموقع متاح للفهرسة ويمكنك إلقاء نظرة على النتائج والنظر والاطلاع على متى تم الزحف آخر مرة هل الفهرسة مسموح بها؟ هنا مع الفهرسة إذا كانت تقول في أي وقت أن الفهرسة غير مسموح بها أو أم أنه يُسمح بالزحف إليه سيكون ذلك في ملف bot doc لذلك هنا في Google Search Console يمكننا في الواقع استخدام ما يسمى باختبار bot.TXT وسيسمح لنا بإخراج bot doc ومعرفة ما إذا كانت هناك أية مشكلات هنا ضمن المستند الذي من شأنه أن يحد ما يُسمح لروبوتات الزحف التابعين ل Google برؤيته وما يسمح لهم بفهرسته من المهم ملاحظة أن لدينا ميزانية تتبع ارتباطات مع موقعنا الإلكتروني وجوجل روبوتات ستأتي وتزحف على موقعنا في أي وقت كما ترون هنا آخر مرة تم فيها الزحف إلى الموقع كان الحادي والعشرين لا يتم الزحف إليه كل يوم لا يتم الزحف إليه كل أسبوع إنها واحدة من تلك الأشياء التي ستأتي إليها Google لزيارتها ثم ربما تعود في غضون أسابيع قليلة لذا فهو شيء يجب مراعاته خاصة عند إنشاء المواقع وتحسين محركات البحث في المواقع ثم في بعض الأحيان يستغرق الأمر بعض الوقت من أجل أن تتمكن الفهرسة من اللحاق بالمكان الذي نريد أن نصل له وجزء من ذلك هو أننا نحن بحاجة للذهاب إلى الواجهة الخلفية للموقع وتفريغ ذاكرة التخزين المؤقت والقيام بهذه الأنواع من الأشياء وأخبر Google بشكل أساسي مرحبًا، لقد قمنا بتحديث موقعنا يمكنك القيام بذلك هنا في Google Search Console عن طريق طلب الفهرسة أو عرض الصفحة التي تم الزحف إليها وحتى إجراء اختبار مباشر ثم عرض الصفحة التي تم اختبارها هناك وهذا سوف يمنحك في الأساس زحفًا يدويًا لذلك، على الرغم من أنه لا يشير إلى الزحف إلى موقع الويب الخاص بي إذا أجريت هذا الاختبار المباشر تقوم Google بشكل أساسي بإرسال روبوتات للنظر في موقعك على عنوان URL معين لذلك فهذه طريقة جيدة للالتفاف وتشجيع Google بشكل أساسي على النظر إليه كما ترون هنا لقد زحف Google إلى الهاتف الذكي وتم الزحف إليه اليوم لذلك، سيؤدي هذا إلى تحديث أنه تم الزحف إليه هنا قريبًا ولن نضطر إلى القلق بشأن هذا الموقع كثيرًا لذا دعنا نتطرق إلى، لقد تحدثنا عن bot doc تحدثنا عن كيفية العثور على bot doc وكيفية تحريره لذلك، هنا في Google Search Console يمكنني بالفعل الدخول في هذا الملف وحظر عناوين URL هنا يمكنني وضعها يمكنني وضعها هنا لعدم السماح بعنوان URL معين في هذه الحالة، قمنا بمنع بوابات الإدارة لموقعنا دعنا نذهب ونلقي نظرة على كيفية طلب حظر عناوين URL في Google Search Console لذلك يمكننا عمل حظر لمدة 30 يومًا أو مؤقت في Google Search Console وأخبرها بشكل أساسي ألا تغطي صفحات معينة أو أننا نقوم بإزالة صفحات معينة هنا في Search Console حسنًا، إليك عمليات الإزالة في Search Console وهذا ما سنستخدمه للذهاب والقيام بإزالة مؤقتة لنفترض أننا نقوم بتحديث صفحة أو نريد عدم فهرسته حتى يصبح جاهزًا لنفترض أننا نبني متجرًا لكننا، ما سيحدث أحيانًا ويكون الأمر محرجًا عندما يحدث هو أن الناس في بعض الأحيان سوف يبنون مثل صفحة الخصم الخاصة بالرجال وسوف يقومون بشبه إطلاق تلك الصفحة عن غير قصد لذا من الأفضل أن يكون لديك نوع من إما وضعه في bot doc باعتباره محظورًا مؤقتًا أو ضعه هنا كإزالة مؤقتة ثم قم بإزالته لاحقًا عندما تكون مستعدًا لبدء تشغيل تلك الصفحة يحدث هذا أحيانًا، يزحف محرك بحث Google فعليًا إلى صفحة سيظهر في الواقع كـ 404 لنفترض أن صفحة الخصم الخاصة بعيد الأب وسيتم فهرستها بالفعل في Google قبل أن نكون مستعدين بالفعل لإطلاق تلك الصفحة يحدث ذلك أحيانًا وعندما يحدث إنه نوع نادر الآن لكنها كانت تحدث في كثير من الأحيان وهي واحدة من تلك الأشياء التي يمكننا المرور بها هنا ونطلبها يمكننا أيضًا إرسال صفحات معينة بها محتوى قديم ونقول بشكل أساسي، مرحبًا، لدينا هذا المحتوى القديم لا يزال في جوجل هل يمكنك الزحف إلى هذه الصفحة؟ لذلك هذه هي الطريقة للقيام بذلك وهذه طريقة لعمل مؤقت للذهاب من خلال وإضافة صفحات معينة هنا حسنًا، لقد غطينا الزحف في هذا الفيديو وبعض أدوات الزحف إلى موقع الويب وكيفية إرسال bot doc لذا يمكننا الانتقال إلى Google وفتح برنامج اختبار مستندات الروبوت وإرسال bot doc لخاصية معينة إضافة خاصية، تقديم خاصية هذه هي الطريقة التي نمر بها ونضيف مستندات الروبوت إلى الخصائص للانتقال إلى Google ثم تذهب إلى Search Console حسنًا، في مقطع فيديو قادم سنغطي الكلمات الرئيسية وتخطيط الكلمات الرئيسية بالإضافة إلى بعض الأشياء الأخرى حول تصميم مواقع الويب حسنًا، سنراك في الفيديو التالي
