RankdarBot، زاحف رانكدار

لا يزور RankdarBot أي موقع إلا عندما يبدأ أحد مستخدمي رانكدار فحص «صحة الموقع» له. يقرأ الزاحف الصفحات العامة كما تفعل محركات البحث، ويعرض على ذلك المستخدم مشكلات السيو التقنية.

كيف تتعرّف عليه

يحمل كل طلب وكيل المستخدم التالي:

RankdarBot/1.0 (+https://rankdar.com/bot)

كيف يعمل

• يلتزم بقواعد robots.txt المكتوبة لـ RankdarBot، أو بالقواعد العامة لجميع الزواحف (*) في حال عدم وجودها.
• يطلب الصفحات العامة فقط عبر HTTP وHTTPS، دون نماذج أو تسجيل دخول أو ملفات تعريف ارتباط.
• يبقى داخل النطاق المفحوص، ولا يتبع الروابط إلى مواقع أخرى.
• يرسل عددًا محدودًا من الطلبات في الوقت نفسه، ويتوقف عند حد الصفحات المحدد للفحص.
• لا يعرض صفحات الموقع ولا يشغّل برامج JavaScript الخاصة بها.

منع RankdarBot

أضف هذه الأسطر إلى ملف robots.txt، وسيتوقف أي فحص لاحق لموقعك قبل طلب أي صفحة.

User-agent: RankdarBot
Disallow: /

السماح لـ RankdarBot

إذا كان ملف robots.txt يسمح لزواحف محددة فقط، أو كان جدار الحماية يمنع الروبوتات غير المعروفة، فأضف هذه الأسطر (واسمح بوكيل المستخدم RankdarBot في جدار الحماية) حتى تعمل عمليات الفحص:

User-agent: RankdarBot
Allow: /