فاحص robots.txt

اجلب ملف robots.txt للموقع وحلّله، واعرض قواعده وخرائط الموقع فيه، واختبر إن كان رابط معيّن مسموحًا لـGooglebot أو Bingbot أو أي زاحف.
cloud

يجري على خوادمنا الطرفية

لا يستطيع المتصفح قراءة استجابة موقع آخر، لذا يجلبها خادم طرفي لدى dotbunker ويعيدها إليك. ولا يُخزَّن شيء.

مصادر البيانات

HTTP · dotbunker edge