UsefulVerse
Lingua · Italiano

Gratis e senza account

Tester robots.txt

Incolla il testo robots.txt, inserisci un token di prodotto crawler e testa fino a 100 URL. I risultati vengono calcolati su questo dispositivo; nulla viene recuperato o caricato.

Incolla le regole qui. Massimo 200 KB, 5.000 righe e 2.000 regole Consenti/Non consenti.

Esempio: Googlebot. Inserisci solo il token, non la stringa completa dell'agente utente del browser.

Inserisci un URL HTTP o HTTPS completo per riga, fino a 100. Questo strumento non li apre.

Questa è un'anteprima locale delle comuni regole Consenti/Non consenti, non un emulatore completo per ogni crawler. Le direttive non supportate vengono segnalate come ignorate. robots.txt non è un controllo di accesso e non garantisce la scansione, l'indicizzazione o il posizionamento.

Come posso testare una regola del file robots.txt?

Incolla il contenuto del file, inserisci un token del crawler come Googlebot, aggiungi un URL completo per riga e scegli Regole di test. L'anteprima mostra il gruppo selezionato e la regola corrispondente, se presente.

Domande frequenti

Come posso testare una regola del file robots.txt?

Incolla il contenuto del file, inserisci un token del crawler come Googlebot, aggiungi un URL completo per riga e scegli Regole di test. L'anteprima mostra il gruppo selezionato e la regola corrispondente, se presente.

Questo tester recupera il mio sito web o carica i miei URL?

No. Legge solo il testo e gli URL che inserisci in questo browser. Non recupera robots.txt, non visita URL né carica i tuoi dati.

robots.txt impedisce alle persone di aprire una pagina?

No. Fornisce istruzioni al crawler; non protegge i dati privati. Utilizza l'autenticazione o i controlli di accesso al server per le pagine private.

Un URL consentito deve apparire nei risultati di ricerca?

No. Consentire una scansione non garantisce che un motore di ricerca effettuerà la scansione, l'indicizzazione o il posizionamento di un URL.

Questo strumento controlla Google, Bing o un altro crawler in tempo reale?

No. Visualizza in anteprima le regole comuni per il token del crawler immesso. Non contatta nessun motore di ricerca o sito web.