🤖 مولد ملف Robots.txt الاحترافي
أنشئ ملف robots.txt مخصص لموقعك - يدعم بلوجر، ووردبريس، وجميع المنصات
📘 إعدادات بلوجر
منع /search و /feeds و /atom.xml
🔷 إعدادات ووردبريس
منع /wp-admin/ و /wp-includes/
📌 تعليمات الاستخدام
- لبلوجر: الإعدادات ← تفضيلات البحث ← ملف robots.txt المخصص
- لووردبريس: استخدم إضافة Rank Math أو Yoast SEO، أو ارفع الملف في مجلد public_html
- للمواقع العادية: ارفع الملف في المجلد الرئيسي (root)
User-agent: * Disallow: /search Disallow: /p Allow: / Sitemap: https://www.techmadar.com/sitemap.xml
💡 نصائح مهمة
- لا تستخدم Disallow: / إلا أثناء صيانة الموقع
- تأكد من إضافة Sitemap لتسريع الفهرسة
- اختبر الملف عبر Google Search Console بعد رفعه
- يمكنك تعديل المسارات الممنوعة حسب احتياج موقعك
📚 شرح الأوامر
- User-agent: * — يشمل جميع محركات البحث
- Allow: / — السماح بزحف الموقع
- Disallow: /path — منع زحف مسار معين
- Sitemap: url — تحديد خريطة الموقع
📌 دليل شامل لملف Robots.txt لبلوجر ووردبريس وجميع المنصات
ملف Robots.txt هو أداة أساسية لتحسين محركات البحث (SEO). يساعد في توجيه محركات البحث إلى الصفحات المهمة ومنع فهرسة الصفحات غير المرغوب فيها مثل صفحات البحث الداخلية ولوحات التحكم. هذا المولد يدعم جميع المنصات بما فيها بلوجر ووردبريس وجوملا ودروبال وأي موقع آخر.
🔧 إعدادات بلوجر الموصى بها
لبلوجر، نوصي بمنع المسارات: /search (صفحات البحث)، /feeds/ (خلاصات RSS)، /atom.xml، /rss.xml، و/p/ (الصفحات الثابتة غير المهمة). هذا يمنع ازدواجية المحتوى ويوجه ميزانية الزحف إلى المحتوى الحقيقي.
🔷 إعدادات ووردبريس الموصى بها
لووردبريس، نوصي بمنع: /wp-admin/ (لوحة التحكم)، /wp-includes/ (ملفات النظام)، /wp-login.php، /trackback/، /xmlrpc.php. هذه المسارات لا تحتاج إلى فهرسة وتحسين أمان موقعك.
🌐 إعدادات عامة لأي موقع
لأي موقع، يفضل منع: /admin/، /cgi-bin/، /tmp/، /logs/، وصفحات النتائج الداخلية مثل /search. مع التأكيد على السماح بزحف المحتوى الرئيسي عبر Allow: /.