Qual è la differenza tra noindex e il disallow del robots.txt, e quando dovrei usare ciascuno?

4 min di lettura22 giugno 2026

  1. Le due direttive risolvono problemi diversi, ed è proprio questa la radice della maggior parte della confusione. Un disallow del robots.txt controlla la scansione, dice ai motori di ricerca quali URL possono recuperare. Secondo la documentazione di Google stessa, il robots.txt esiste soprattutto per evitare di sovraccaricare il tuo sito di richieste, e non è esplicitamente un meccanismo per tenere una pagina fuori da Google. Una regola noindex controlla l'indicizzazione, dice ai motori di ricerca di rimuovere del tutto la pagina dai risultati. Quindi la domanda non è mai semplicemente disallow o noindex, è quale risultato vuoi davvero.

  2. Usa noindex quando vuoi una pagina che gli utenti possono raggiungere ma che non dovrebbe mai comparire nei risultati di ricerca, come pagine di ringraziamento, pagine dei risultati di ricerca interna, conferme di download protetti o combinazioni di filtri con poco contenuto. Noindex si imposta come tag meta robots nell'intestazione della pagina oppure come intestazione di risposta HTTP X-Robots-Tag. Una volta che Googlebot scansiona la pagina e legge la regola, la pagina viene rimossa dai risultati indipendentemente da quanti altri siti la collegano. È questa affidabilità il motivo per cui noindex, e non disallow, è lo strumento giusto per tenere le pagine fuori dalla ricerca.

  3. Usa un disallow del robots.txt quando vuoi impedire del tutto ai crawler di recuperare un URL, di solito per proteggere il crawl budget o per tenere i bot fuori da sezioni che non producono valore di ricerca, come percorsi di amministrazione, URL con parametri a faccette, directory di staging o file multimediali di grandi dimensioni che non vuoi vengano recuperati. Ma sii chiaro sul limite, un URL in disallow può comunque essere indicizzato se altre pagine lo collegano. Google potrebbe mostrare l'URL nudo con uno snippet del tipo una descrizione per questo risultato non è disponibile a causa del file robots.txt di questo sito. Il disallow nasconde il contenuto, non necessariamente la comparsa nell'elenco.

  4. L'errore di gran lunga più dannoso, e uno che vediamo continuamente durante gli audit tecnici, è applicare sia un disallow sia un noindex allo stesso URL. Vanno in conflitto. Perché noindex funzioni, Google deve scansionare la pagina per vedere il tag. Se il robots.txt blocca la scansione, Googlebot non legge mai il noindex, e la pagina può restare nell'indice a tempo indeterminato. Se vuoi che una pagina sparisca dalla ricerca, devi lasciare che Google la scansioni, il che significa non metterla in disallow. Nota inoltre che Google non supporta una direttiva noindex scritta all'interno del robots.txt stesso.

  5. Questo conflitto emerge nella Google Search Console come due report distinti. Indicizzata, anche se bloccata da robots.txt significa che Google ha indicizzato un URL che non è riuscito a scansionare, spesso a causa di link in entrata o di una voce nella sitemap. Esclusa dal tag noindex significa che la regola è stata vista e rispettata, ed è lo stato sano. Per correggere il caso bloccata ma indicizzata quando vuoi davvero togliere la pagina, rimuovi il disallow, aggiungi o conferma il noindex, poi richiedi una nuova indicizzazione. Rimuovere i link interni che puntano all'URL, o aggiungere rel=nofollow come suggerimento, aiuta Google a smettere di riscoprirlo.

  6. L'intestazione HTTP X-Robots-Tag è la parte che la maggior parte dei team trascura. Un tag meta robots funziona solo all'interno dell'HTML, quindi non può governare PDF, immagini, video o altri file non HTML. L'X-Robots-Tag porta le stesse regole noindex e nofollow nell'intestazione di risposta e si applica a qualsiasi tipo di file. Su Apache lo imposti per tutti i PDF con un blocco Files nel file .htaccess, su NGINX con un add_header all'interno di una corrispondenza location. Vale lo stesso requisito di scansione, se il robots.txt blocca il file, il crawler non vede mai l'intestazione, quindi la regola non fa nulla.

  7. Un ultimo confine vale la pena enunciarlo chiaramente, nessuna delle due direttive è sicurezza. Il robots.txt è un file pubblico che di fatto pubblicizza i percorsi che non vuoi vengano scansionati, e un noindex serve comunque il contenuto completo a chiunque, umano o bot, richieda l'URL. Per qualsiasi cosa davvero privata, come dati dei clienti, strumenti interni o ambienti di prelancio, usa l'autenticazione o la protezione con password. Tratta noindex e disallow come controlli di visibilità per i motori di ricerca, mai come controllo degli accessi.

  8. Fare questo bene su un sito reale significa controllare insieme ogni schema di URL basato su template, la sitemap, le regole del robots.txt e le direttive meta e di intestazione, perché interagiscono tra loro. Questa pulizia trasversale è esattamente il tipo di lavoro di cui si occupano i nostri servizi sito web in 30 giorni e stabilizzazione, mappiamo quali URL devono essere scansionati, quali indicizzati e quali bloccati, poi implementiamo le direttive in modo che si rafforzino a vicenda invece di combattersi.

Pronto a rilasciare?

Dicci dove sei bloccato. Lo esaminiamo e ti inviamo una raccomandazione mirata entro un giorno lavorativo.

Scritto da

Kostadin Stamboliev

Fondatore e Imaginator

Fondatore e Imaginator di Pineido. Si occupa di consulenza IT, sviluppo di app e siti web, SEO tecnica, IA e automazione. Rilascia codice in produzione in sprint di 30 giorni con perimetro fisso e responsabilità chiare.

LinkedIn