Безкоштовно, без облікового запису
Тестер файлів robots.txt
Вставте текст robots.txt, введіть маркер продукту сканера та протестуйте до 100 URL-адрес. Результати обчислюються на цьому приладі; нічого не витягується і не завантажується.
Як перевірити правило robots.txt?
Вставте вміст файлу, введіть маркер сканера, наприклад Googlebot, додайте по одній повній URL-адресі на рядок і виберіть Правила перевірки. Попередній перегляд показує вибрану групу та відповідне правило, якщо воно є.
Поширені запитання
Як перевірити правило robots.txt?
Вставте вміст файлу, введіть маркер сканера, наприклад Googlebot, додайте по одній повній URL-адресі на рядок і виберіть Правила перевірки. Попередній перегляд показує вибрану групу та відповідне правило, якщо воно є.
Цей тестер отримує мій веб-сайт чи завантажує мої URL-адреси?
Ні. Він читає лише текст і URL-адреси, які ви вводите в цьому браузері. Він не отримує robots.txt, не відвідує URL-адреси та не завантажує ваші дані.
Чи заважає robots.txt людям відкривати сторінку?
Ні. Він дає інструкції сканеру; він не захищає особисті дані. Використовуйте контроль автентифікації або доступу до сервера для приватних сторінок.
Чи має дозволена URL-адреса відображатися в результатах пошуку?
Ні. Дозвіл на сканування не гарантує, що пошукова система скануватиме, індексуватиме чи ранжуватиме URL-адресу.
Чи перевіряє цей інструмент Google, Bing або інший веб-сканер в реальному часі?
Ні. Він переглядає загальні правила для маркера сканера, який ви вводите. Він не зв’язується з жодною пошуковою системою чи веб-сайтом.