A1 Website Analyzer может сканировать веб-сайты и собирать данные, которые будут использоваться для поиска проблем с сайтом и SEO. Отфильтруйте результаты, чтобы увидеть, какие URL-адреса заблокированы robots.txt: noindex, nofollow, канонические для себя, канонические для других, коды ответов и т. д.