هل تتساءل عن كيفية تعديل ملف robots.txt في ووردبريس بفعالية؟ هذا الملف الصغير ذو الأهمية الكبيرة بمثابة خريطة طريق زحف محركات البحث ، حيث يرشدها إلى الأجزاء التي يجب أو لا يجب عليها استكشافها في موقعك. من خلال التحكم فيه، يمكنك مساعدة محركات البحث على التركيز على أهم صفحاتك، مما يُحسّن سرعة موقعك وترتيبه في نتائج البحث.
مع أن ووردبريس يُنشئ تلقائيًا ملف robots.txt لموقعك، إلا أنه قد لا يُلبي احتياجاتك دائمًا. في بعض الأحيان، ستحتاج إلى تعديله لضمان أن ترى محركات البحث ما تُريده فقط.
إذا كانت فكرة تعديل ملف robots.txt تبدو معقدة، فلا تقلق، فأنت في المكان الصحيح! في هذا الدليل، سنشرح وظيفة ملف robots.txt، وأهميته، وأسهل الطرق لتعديله على موقعك الإلكتروني على ووردبريس . هيا بنا نبدأ.
فهم ملف Robots.txt في ووردبريس
لنتحدث عن ملف robots.txt في ووردبريس - الأمر أبسط مما يبدو! يوجد هذا الملف النصي في المجلد الرئيسي لموقعك الإلكتروني، وهو يُعطي برامج الزحف (البوتات) مجموعة من التعليمات. باختصار، يُخبرهم هذا الملف أي أجزاء من موقعك يجب عليهم استكشافها وفهرستها وأيها لا يجب عليهم ذلك.
فكّر في الأمر كأنك تُزوّد محركات البحث بمجموعة من الإرشادات. على سبيل المثال، تقوم برامج زحف جوجل (المسماة Googlebot ) بفحص مواقع الويب بشكل دوري لتحديث فهرس البحث الخاص بها. وعندما تزور موقعك، فإنها تنظر إلى ملف robots.txt للحصول على التعليمات اللازمة.
الهدف الرئيسي من هذا الملف هو مساعدتك، بصفتك مالك موقع ويب، على التحكم في المعلومات التي يمكن لمحركات البحث الوصول إليها. يمكنك استخدامه لمنع برامج الزحف من فهرسة صفحات أو مجلدات محددة على موقعك. ولكن انتبه: ليس كل برامج الزحف تلتزم بالقواعد. فبينما تتبع البرامج الموثوقة مثل جوجل الإرشادات، قد تتجاهلها بعض البرامج الضارة.
استكشف: قائمة برامج الزحف - استكشاف أفضل برامج زحف الويب لتحسين محركات البحث
لماذا تحتاج إلى تعديل ملف Robots.txt في ووردبريس؟
لماذا عليك تعديل ملف robots.txt على موقع ووردبريس الخاص بك؟ اتضح أن هناك عدة أسباب وجيهة للقيام بذلك. دعونا نستعرضها بالتفصيل:
حسّن سرعة موقعك
ليس من الضروري أن تزحف برامج زحف محركات البحث إلى جميع صفحات موقعك الإلكتروني. من خلال توجيه هذه البرامج لتجاهل الصفحات غير الضرورية، يمكنك توفير موارد وتحسين سرعة تحميل موقعك . المواقع الأسرع لا تُسعد الزوار فحسب، بل تُحسّن أيضًا ترتيبها في نتائج البحث !
تحسين أداء الخادم
قد تتسبب برامج الروبوت التي لا تُساهم في نجاح موقعك الإلكتروني في استهلاك موارد الخادم بشكل مفرط وإغراق سجلات النظام بأخطاء 404. يُساعدك تعديل ملف robots.txt على حظر هذه البرامج غير المرغوب فيها، مما يُحافظ على كفاءة تشغيل خادمك ويضمن أداءً أفضل.
حماية المعلومات الحساسة
بعض أجزاء موقعك الإلكتروني، مثل صفحات الإدارة والمستندات الخاصة والمحتوى السري، يجب ألا تُفهرسها محركات البحث. باستخدام ملف robots.txt، يمكنك توجيه برامج الروبوت لتجنب هذه الأجزاء، مما يساعد في حماية خصوصيتك وأمانك.
تعرّف على كيفية إصلاح مشكلة "السبب الجديد الذي يمنع فهرسة صفحاتك" في Search Console
توجيه الروبوتات إلى المحتوى المناسب
هل ترغب في أن تركز محركات البحث على صفحات أو منشورات محددة؟ يتيح لك ملف robots.txt توجيه برامج الزحف إلى أهم محتواك . يساعدك هذا على تحديد أولويات المحتوى الذي تتم فهرسته، مما يزيد من فرص ظهور موقعك في مراتب متقدمة في نتائج البحث.
تجنب مشاكل المحتوى المكرر
قد يؤدي المحتوى المكرر، مثل صفحات التصنيفات أو الوسوم، إلى إرباك محركات البحث والإضرار بترتيب موقعك في نتائج البحث. باستخدام ملف robots.txt مُحسَّن جيدًا، يمكنك منع برامج الزحف من فهرسة هذه الصفحات، مما يحافظ على محتوى موقعك نظيفًا ومتوافقًا مع محركات البحث.
موضوع ذو صلة: كيفية إصلاح عناوين الصفحات المكررة في ووردبريس لتحسين محركات البحث
تعديل ملف Robots.txt في ووردبريس: 3 طرق
والآن بعد أن فهمت وظيفة ملف Robots.txt في ووردبريس، دعنا نرى كيف يمكنك تعديله بثلاث طرق سهلة.
- استخدام عميل FTP
- استخدام لوحة التحكم cPanel
- باستخدام إضافة AIOSEO
سنشرح لك كل طريقة خطوة بخطوة. ولكن قبل البدء، تذكر أنه إذا كنت تستخدم برنامج FTP أو لوحة تحكم cPanel، فستحتاج إلى إنشاء ملف robots.txt يدويًا أولًا. هيا بنا نبدأ!
تحرير ملف Robots.txt باستخدام عميل FTP
لتحرير ملف robots.txt في ووردبريس باستخدام برنامج FTP، ستحتاج إلى إعداد برنامج FTP وربطه بموقعك الإلكتروني. تُعدّ برامج مثل FileZilla و Cyberduck وفعّالة، ولكننا سنستخدم FileZilla في هذا الدليل.
الخطوة 1: قم بتوصيل موقع ووردبريس الخاص بك ببروتوكول نقل الملفات (FTP).
- أولاً، قم بتثبيت برنامج FileZilla على جهاز الكمبيوتر الخاص بك. بمجرد التثبيت، افتح التطبيق وانتقل إلى ملف > مدير المواقع (أو اضغط على Ctrl+S للحصول على اختصار).
- بعد ذلك، انقر فوق " موقع جديد " وقم بتسميته ضمن "مواقعي".
- الآن، انتقل إلى "عام" وأدخل بيانات اعتماد موقعك. عادةً ما يمكنك العثور على هذه البيانات في لوحة تحكم مزود خدمة الاستضافة.
- بمجرد إدخال بيانات الاعتماد، انقر فوق "اتصال".
الآن، أنت جاهز! سترى مجلد ملفات موقعك على برنامج FTP. لننتقل الآن إلى تحميل ملف robots.txt.
الخطوة الثانية: ارفع ملف Robots.txt إلى ووردبريس
- انتقل إلى المجلد الرئيسي لموقعك الإلكتروني، والذي يُسمى عادةً public_html. يجب أن يكون ملف robots.txt موجودًا في هذا المجلد.
- إذا كان ملف robots.txt موجودًا بالفعل، يمكنك استبداله بالملف الجديد. وإلا، فما عليك سوى تحميل الملف الذي أنشأته سابقًا.
وهكذا انتهى الأمر! تم الآن إنشاء ملف robots.txt. للتأكد من أن كل شيء يعمل بشكل صحيح، انتقل إلى متصفحك وأضف /robots.txt في نهاية اسم نطاقك. على سبيل المثال، example.com/robots.txt.
تعرّف على: كيفية إعداد حساب FTP لـ WordPress؟
تعديل ملف Robots.txt باستخدام لوحة التحكم cPanel
تتشابه عملية استخدام لوحة تحكم cPanel إلى حد كبير مع طريقة استخدام برنامج FTP. إليك الخطوات:
الخطوة 1: تسجيل الدخول إلى لوحة التحكم cPanel
ابدأ بتسجيل الدخول إلى لوحة تحكم موقعك الإلكتروني (cPanel). مزود خدمة الاستضافة قد زودك بالفعل ببيانات تسجيل الدخول.
بمجرد دخولك، انتقل إلى الملفات وانقر على مدير الملفات.
الخطوة الثانية: تحميل ملف Robots.txt
في مدير الملفات، انتقل إلى public_html . هذا هو المجلد الرئيسي الذي يجب وضع ملف robots.txt فيه.
إذا كان ملف robots.txt موجودًا بالفعل هنا، فاستبدله بالنسخة الجديدة. وإذا لم يكن موجودًا، فقم بتحميل الملف الذي أنشأته حديثًا.
الخطوة 3: اختبار ملف Robots.txt
لضمان تحميل الملف بشكل صحيح، اكتب نطاقك متبوعًا بـ /robots.txt في متصفحك (على سبيل المثال، example.com/robots.txt).
وهكذا انتهى الأمر! سواء استخدمت بروتوكول نقل الملفات (FTP) أو لوحة التحكم (cPanel)، فقد تم تحديث ملف robots.txt الخاص بك الآن وهو جاهز لتوجيه محركات البحث حول كيفية التفاعل مع موقعك.
استكشف: أفضل منصة استضافة بديلة لـ cPanel لـ WordPress
قم بتحرير ملف Robots.txt باستخدام AIOSEO
إحدى أسهل الطرق لتعديل ملف robots.txt هي استخدام All in One SEO (AIOSEO ) ، وهي من أفضل إضافات تحسين محركات البحث لـ WordPress . تأتي هذه الإضافة مزودة بمحرر متقدم لملف robots.txt ، مما يُسهّل عليك تجاوز ملف robots.txt الافتراضي في WordPress وتحديد قواعدك الخاصة لكيفية فهرسة محركات البحث لموقعك.
لنبدأ بتعديل ملف robots.txt باستخدام AIOSEO!
الخطوة 1: تفعيل ملف Robots.txt المخصص
أولاً، انتقل إلى "التحسين الشامل لمحركات البحث" في لوحة تحكم ووردبريس الخاصة بك، ثم انقر على " الأدوات ". ومن هناك، حدد "محرر ملف Robots.txt ".
سيقوم برنامج AIOSEO تلقائيًا بإنشاء ملف robots.txt ديناميكي. يتم تخزين هذا الملف في قاعدة بيانات ووردبريس الخاصة بك، ويمكنك عرضه في متصفحك (سنوضح لك كيفية القيام بذلك لاحقًا).
عند استخدام محرر ملف Robots.txt، أول ما عليك فعله هو تفعيل ملف Robots.txt المخصص . ما عليك سوى النقر على الزر حتى يتحول لونه إلى الأزرق، وستتمكن من تخصيص ملفك.
ستظهر لك بعد ذلك معاينة للقواعد الافتراضية أسفل الشاشة. تُخبر هذه الإعدادات الافتراضية برامج الزحف بعدم فهرسة بعض ملفات ووردبريس الأساسية، مثل صفحات الإدارة. يمكنك استبدال هذه القواعد بقواعدك الخاصة!
الخطوة الثانية: إضافة قواعدك الخاصة
حان الآن وقت إضافة قواعدك المخصصة. لديك خياران للقيام بذلك: إما استخدام أداة إنشاء القواعد أو استيراد ملف robots.txt من موقع آخر.
الطريقة الأولى: إضافة القواعد باستخدام أداة إنشاء القواعد
أداة إنشاء القواعد إنشاء قواعدك الخاصة بسهولة لتحديد الصفحات التي يجب فهرستها أو منعها. على سبيل المثال، إذا كنت ترغب في منع جميع برامج الروبوت من الوصول إلى دليل مؤقت، فهذا هو المكان المناسب للقيام بذلك.
إليك كيفية عملها:
- وكيل المستخدم : اكتب اسم الروبوت (مثل "Googlebot") في وكيل المستخدم . إذا كنت ترغب في تطبيق القاعدة على جميع الروبوتات، فاستخدم رمز *.
- التوجيه : اختر من بين التوجيهات المتاحة مثل السماح ، وعدم السماح ، وتنظيف المعلمات ، أو تأخير الزحف .
- القيمة : أدخل مسار الدليل أو اسم الملف حيث يجب تطبيق القاعدة.
بعد إتمام جميع الإعدادات، انقر على "إضافة قاعدة" لإنشاء قاعدة أخرى إذا لزم الأمر. لا تنسَ النقر على " حفظ التغييرات" عند الانتهاء.
ستظهر قواعدك الجديدة في معاينة ملف Robots.txt . لعرض ملفك المُحدَّث، انقر على " فتح ملف Robots.txt" . سينقلك هذا إلى الرابط المباشر لملف robots.txt الخاص بك.
الطريقة الثانية: استيراد القواعد من موقع آخر
إذا رأيت ملف robots.txt من موقع آخر وترغب في استخدامه، يمكنك استيراده بسهولة إلى موقعك باستخدام AIOSEO. إليك الطريقة:
- انتقل إلى الأدوات > Robots.txt > تفعيل ملف Robots.txt المخصص في قائمة AIOSEO.
- انقر على الاستيراد .
- ألصق عنوان الموقع الذي تريد استيراد ملف robots.txt منه، أو انسخ والصق المحتويات مباشرة في المساحة المخصصة لذلك.
- انقر فوق "استيراد" ، وسيقوم برنامج AIOSEO بسحب الملف وإضافته إلى موقعك.
ربما تكون هذه أسرع طريقة للحصول على ملف robots.txt مخصص على موقعك!
تعديل قواعد ملف Robots.txt
بعد تحديد قواعدك، يمكنك تعديلها مرة أخرى باستخدام أداة إنشاء القواعد . يمكنك حتى حذف قاعدة بالنقر على أيقونة سلة المهملات بجانبها.
وإليكم ميزة رائعة: يمكنكم تغيير ترتيب القواعد. ما عليكم سوى النقر مع الاستمرار على النقاط الست بجوار سلة المهملات، ثم سحب القاعدة إلى موضع جديد، ثم إفلاتها. هذا يساعدكم على تحديد أولويات القواعد الأكثر أهمية!
عند الانتهاء من إجراء التغييرات، ما عليك سوى النقر فوق " حفظ التغييرات" لتطبيق كل شيء.
وهكذا انتهى الأمر! لقد نجحت في تعديل ملف robots.txt باستخدام AIOSEO. سهل، أليس كذلك؟
للمزيد من المعلومات: تحسين محركات البحث الأمثل على ووردبريس: دليل شامل
خاتمة
ختامًا، يُعدّ تعديل ملف robots.txt في ووردبريس طريقةً بسيطةً وفعّالةً لإدارة كيفية تفاعل برامج زحف محركات البحث مع موقعك. من خلال إنشاء هذا الملف وتخصيصه، يمكنك منع برامج الزحف من فهرسة المحتوى الحساس أو المكرر، مما يضمن فهرسة الصفحات الأكثر صلةً فقط.
بالإضافة إلى ذلك، يمكنك استخدام ملف robots.txt لتوجيه برامج الزحف إلى المحتوى الذي تفضله، مما يساعد على تحسين ظهور موقعك في محركات البحث وزيادة ظهوره. يُعدّ مراجعة هذا الملف وتحديثه بانتظام خطوة أساسية للحفاظ على التحكم في أداء موقعك في محركات البحث.
