أفضل ملف robots txt ووردبريس

أفضل ملف robots txt ووردبريس

0

أفضل ملف robots txt ووردبريس

ملف robots txt

ملف robots txt هو ملف نصي يسمح لموقع الويب بتقديم إرشادات لروبوتات الزحف على الويب لموقعك.

يحتوي ملف robots.txt على مجموعة من الإرشادات التي تطلب من الروبوت تجاهل ملفات أو أدلة معينة. قد يكون هذا لغرض الخصوصية أو لأن مالك موقع الويب يعتقد أن محتويات تلك الملفات والأدلة لا علاقة لها بتصنيف موقع الويب في محركات البحث.

قد يهمك أيضا هذا المقال :- شرح اطار uikit وكيفية استخدامه

تستخدم محركات البحث مثل جوجل وبينغ برامج زحف الويب هذه ، والتي تسمى أحيانًا روبوتات الويب ، لأرشفة مواقع الويب وتصنيفها. يتم تكوين معظم برامج الروبوت للبحث عن ملف robots.txt على الخادم قبل أن يقرأ أي ملف آخر من موقع الويب. يقوم بذلك لمعرفة ما إذا كان لدى مالك موقع الويب بعض الإرشادات الخاصة حول كيفية الزحف إلى موقعه وفهرسته.

وبالطبع إذا كان موقع الويب يحتوي على أكثر من نطاق فرعي ، فيجب أن يكون لكل نطاق فرعي ملف robots txt خاص به. من المهم ملاحظة أنه لن تحترم جميع برامج الروبوت ملف robots txt . ستقرأ بعض الروبوتات الضارة حتى ملف robots.txt للعثور على الملفات والأدلة التي يجب استهدافها أولاً. أيضًا ، حتى إذا كان ملف robots.txt يوجه برامج الروبوت لتجاهل صفحات معينة على الموقع ، فقد تستمر هذه الصفحات في الظهور في نتائج البحث التي ترتبط بها الصفحات الأخرى التي تم الزحف إليها.

والسؤال الأهم هو

هل يحتاج أصحاب المواقع الي ملف روبوت .لموقع الووردبريس الخاص بك؟

إذا لم يكن لديك ملف robots.txt ، فستستمر محركات البحث في الزحف إلى موقعك على الويب وفهرسته. ومع ذلك ، لن تتمكن من إخبار محركات البحث بالصفحات أو المجلدات التي لا ينبغي عليهم الزحف إليها.

وماهو أفضل ملف robots txt ووردبريس ؟

ملف robots txt

ننصح دائما بالنسبة لأصحاب منصة ووردبريس بأن يبقي ملف الروبوت هكذا :-

 

User-Agent: *
Allow: /wp-content/uploads/
Disallow: /wp-content/plugins/
Disallow: /wp-admin/
Disallow: /readme.html
Disallow: /refer/
 
Sitemap: http://www.yoursite.com/post-sitemap.xml
Sitemap: http://www.yoursite.com/page-sitemap.xml

 

					
User-Agent: * Allow: /wp-content/uploads/ Disallow: /wp-content/plugins/ Disallow: /wp-admin/ Disallow: /readme.html Disallow: /refer/ Sitemap: http://www.yoursite.com/post-sitemap.xml Sitemap: http://www.yoursite.com/page-sitemap.xml

وايضا ينصح بهذا الكود موقع wpbeginner الشهير  ، وللعلم بأن يمكنك التعديل علي هذا الملف من خلال اضافة السيو الخاصة بك وعلي سبيل المثال اضافة رانك ماث بها اداة لتعديل ملف robots txt يمكنك من خلالها التعديل علي ملف الروبوت بدون أي مشاكل .

انتهي مقال اليوم شكرا لمتابعتك للمقال أتمني أن المقال يفيدك ولاتنسي الاشتراك في الأسفل لكي نرسل لك كلمات رئيسية عالية الزيارة وعالية الربح CPC مجانا ! شكرا لزيارتك ويب تايمز قم بمشاركة الموضوع اذا افادك ولا تنسي الاطلاع علي شهاداتي واذا اردت الاستفسار عن أي شي لاتتردد في كتابته في تعليق .

لمتابعي موقع ويب تايمز فقط
سنرسل لك كلمات رئيسية عالية الزيارة وعالية الربح CPC مجانا !
يمكنك إلغاء الاشتراك في أي وقت

اترك رد

لن يتم نشر عنوان بريدك الإلكتروني.

8 − واحد =