Проверка индексируемости

Один вывод о том, можно ли проиндексировать адрес: код статуса, robots.txt, мета-тег robots, заголовок X-Robots-Tag, canonical и перенаправления, с пояснением к каждому.
cloud

Выполняется на наших пограничных серверах

Браузер не может прочитать ответ чужого сайта, поэтому его получает пограничный сервер dotbunker и передаёт результат. Ничего не сохраняется.

Источники данных

HTTP · dotbunker edge