Come intercettare un noindex prima che rovini il tuo posizionamento
Un noindex finito per errore in produzione è uno dei modi più veloci per perdere traffico organico, ed è anche uno dei più silenziosi. Il sito funziona, la pagina si carica senza problemi, non compare nessun errore, e intanto Google elimina lentamente la pagina dal suo indice. Ecco come succede, come scoprirlo e come assicurarti di essere il primo a saperlo, non l'ultimo.
Deltio controlla ogni giorno i siti dei tuoi clienti e ti avvisa su Slack nell'istante in cui compare un noindex dove non dovrebbe esserci. A partire da £20 al mese.
Il tag noindex fa esattamente una cosa: dice ai motori di ricerca di non includere una pagina nel loro indice. È genuinamente utile per le pagine di ringraziamento, i risultati di ricerca interni, gli ambienti di staging e i contenuti duplicati. Diventa un disastro quando finisce su una pagina che invece vuoi assolutamente posizionare, e nessuno se ne accorge per tre settimane.
Come un noindex finisce in produzione
Quasi sempre per errore, e quasi sempre in un modo che non lascia traccia nel tuo flusso di lavoro abituale:
- Lo staging si infiltra in produzione. I siti di staging sono di solito impostati su
noindexin modo che Google li ignori. Quando un deploy copia la configurazione dello staging in produzione, ilnoindexviene portato con sé. - Un'impostazione del CMS o di un plugin. Una casella di spunta nel CMS, un'impostazione predefinita di un plugin SEO, o un aggiornamento del tema fanno passare una pagina o un'intera sezione a
noindex. - Uno sviluppatore prudente. Qualcuno aggiunge
noindexa una nuova sezione mentre è in costruzione e si dimentica di rimuoverlo al lancio. - Un meta robots o un header X-Robots-Tag. Il tag può trovarsi nell'HTML o nell'header HTTP, e la versione nell'header è facile da perdere perché non è visibile nel codice sorgente della pagina.
In ogni caso, la pagina appare perfettamente normale a un occhio umano. Ed è proprio questa la trappola.
Come controllare manualmente la presenza di un noindex
Se vuoi controllare subito una pagina specifica, ecco i metodi affidabili:
- Visualizza il codice sorgente della pagina e cerca
noindex. Controlla all'interno di un tag meta robots, qualcosa come<meta name="robots" content="noindex">. - Controlla gli header HTTP per un
X-Robots-Tag: noindex. Questo non si trova nell'HTML, quindi guardare solo il codice sorgente non basta. Gli strumenti per sviluppatori del browser, nella scheda Network, mostrano gli header di risposta. - Usa Google Search Console. Lo strumento di ispezione URL ti dice se una pagina è indicizzabile e segnala "Esclusa dal tag noindex". Search Console è autorevole, ma è reattivo e spesso lento nel riflettere una modifica appena fatta.
- Esegui una scansione con uno strumento come Screaming Frog su tutto il sito e filtra le pagine che restituiscono
noindex. Ottimo per un controllo completo, ma è un'operazione manuale che devi ricordarti di eseguire.
Tutti questi metodi funzionano. Il problema è che dipendono dal fatto che tu decida di controllare. Un noindex aggiunto di venerdì non si annuncia da solo, quindi a meno che tu non ispezioni proprio quella pagina, non lo scoprirai finché non lo farà il report del traffico.
La vera soluzione: essere avvisati automaticamente
I controlli manuali intercettano un noindex che stai cercando attivamente. Ciò che protegge davvero il sito di un cliente è un sistema che lo tiene d'occhio e ti avvisa nell'istante in cui compare, su ogni pagina, senza che tu debba ricordarti di controllare.
Questa è la differenza tra controllare e monitorare. Un controllo risponde alla domanda "questa pagina è noindexata adesso?". Un monitoraggio risponde a "è appena diventata noindexata qualche pagina?" e ti invia direttamente la risposta.
Come Deltio lo intercetta
Deltio scansiona ogni giorno le pagine della tua sitemap e ne controlla i segnali di indicizzazione, incluso il noindex sia nel meta tag che nell'header HTTP. Quando una pagina che ieri era indicizzabile oggi presenta un noindex, Deltio invia un avviso semplice su Slack: questa pagina, su questo sito cliente, è ora impostata su noindex. Lo vedi lo stesso giorno, prima che Google abbia finito di eseguire la nuova scansione, mentre è ancora una correzione da due minuti invece di un mese di traffico perso.
Fa lo stesso per gli altri segnali di indicizzazione che falliscono nello stesso modo silenzioso: modifiche al robots.txt, canonical che puntano altrove, e URL che scompaiono dalla sitemap.
Basta scoprirlo dal grafico del traffico
Aggiungi il primo sito cliente, collega Slack, e Deltio inizia a monitorare lo stesso giorno. Inizia la prova gratuita di 14 giorni e assicurati di essere tu il primo a sapere del prossimo noindex sfuggito di mano.
Domande frequenti
- Come finisce per errore un tag noindex in produzione?
- Di solito quando la configurazione dello staging (impostata su noindex) viene copiata in produzione durante un deploy, oppure quando un'impostazione del CMS, un plugin SEO o un aggiornamento del tema fanno passare una pagina a noindex. Anche uno sviluppatore che sta costruendo una nuova sezione può aggiungerlo e dimenticarsi di rimuoverlo al lancio.
- Come controllo se una pagina ha un tag noindex?
- Visualizza il codice sorgente della pagina e cerca un tag meta robots noindex, e controlla anche gli header di risposta HTTP per un X-Robots-Tag: noindex, dato che questo non si trova nell'HTML. Anche lo strumento di ispezione URL di Google Search Console segnala le pagine escluse per noindex.
- Perché un noindex è così dannoso per la SEO?
- Dice ai motori di ricerca di eliminare completamente la pagina dal loro indice. La pagina continua a caricarsi normalmente per gli utenti, quindi nulla sembra fuori posto, ma Google la rimuove lentamente e la pagina perde tutto il suo posizionamento e traffico.
- Posso ricevere un avviso automatico quando compare un noindex?
- Sì. Deltio controlla ogni giorno le pagine della tua sitemap alla ricerca di noindex sia nel meta tag che nell'header HTTP, e ti avvisa su Slack nell'istante in cui una pagina diventa noindexata, così la intercetti prima che Google finisca la nuova scansione.
- Qual è la differenza tra un controllo del noindex e il monitoraggio?
- Un controllo risponde se una pagina è noindexata proprio adesso, quando vai a verificarlo. Il monitoraggio tiene d'occhio ogni pagina in modo continuo e ti dice nell'istante in cui una diventa noindexata, senza che tu debba ricordarti di controllare.
- Deltio intercetta anche altri problemi di indicizzazione?
- Sì. Oltre al noindex, monitora le modifiche al robots.txt, i canonical che puntano a nuove pagine e gli URL che scompaiono dalla sitemap, tutto recapitato su Slack per ogni sito.