Cosa noindex sul tuo negozio Shopify e come? La guida a robots.txt e al meta tag robots

Il file robots.txt è una delle basi della SEO tecnica di cui dovresti sempre occuparti. Ti aiuta a controllare il modo in cui i motori di ricerca eseguono la scansione del tuo sito, in modo che tutto ciò che è importante appaia nei risultati di ricerca e tutto ciò che non desideri venga mostrato lì sia bloccato.

‍

Perché controllare la scansione e l'indicizzazione della tua pagina è così importante?

• Salvataggio del budget di scansione. C'è un limite al numero di pagine che un bot di ricerca può elaborare in un dato tempo. Per assicurarti che le tue pagine più importanti vengano scansionate e ripetute regolarmente, dovresti escludere quelle pagine che non devono essere mostrate nei risultati di ricerca.

• Impedire la visualizzazione di pagine tecniche nella ricerca. Ci sono molte pagine che il tuo negozio genera per comodità degli utenti: pagine con login, checkout, ricerca interna, ecc. Sono fondamentali per l'UX ma non devono essere classificate nelle ricerche.

• Evitare problemi di contenuti duplicati. Parlando delle pagine tecniche che abbiamo menzionato, possono creare duplicati: ad esempio, diverse opzioni di ordinamento arriveranno a URL diversi ma mostreranno gli stessi prodotti, solo in un ordine diverso. Non vuoi che quelle pagine vengano coinvolte nelle classifiche, poiché i motori di ricerca non apprezzano i contenuti duplicati.

Come puoi controllare l'indicizzazione delle pagine del tuo negozio?

Per dare valore alle tue pagine importanti e facilitarne l'indicizzazione da parte dei bot di ricerca, dovresti sempre avere una mappa del sito aggiornata e corretta. Inoltre, prenditi cura dei collegamenti interni e fai in modo che fonti esterne si colleghino ai tuoi contenuti in modo che le tue pagine appaiano più autorevoli agli occhi dei motori di ricerca.

Queste misure garantiscono praticamente che le tue pagine saranno classificate nelle ricerche, anche se non esiste un modo sicuro per garantire un'indicizzazione del 100%.

Quello che puoi garantire al 100% è escludere alcune pagine che non vuoi che appaiano nei risultati di ricerca. Per questo, puoi utilizzare la direttiva noindex nel file robots.txt o il meta tag robots . Sembra molto tecnico a prima vista, ma in realtà è molto semplice. Soprattutto per i commercianti Shopify, poiché la piattaforma si occupa automaticamente della maggior parte della corretta indicizzazione.

Quindi, cosa dovresti noindex su un negozio Shopify?

Per i negozi online, ha senso bloccare l'indicizzazione dei seguenti tipi di pagine:

• Tutto ciò che è associato agli account utente. Quelle pagine sono uniche per ogni cliente e non sono necessarie nella ricerca.
• Tutto ciò che è associato al check-out degli ospiti. Anche se gli utenti non accedono al proprio account e sono autorizzati ad acquistare come ospiti, le pagine con i passaggi di checkout generati per loro non sono destinate alla ricerca.
• Navigazione sfaccettata e ricerca interna. Come abbiamo già accennato, offrire quegli URL ai robot di ricerca li confonderà, prosciugherà il budget di scansione e creerà problemi di contenuti duplicati.
• Prodotti che vuoi nascondere dalla ricerca. Se non desideri che determinati prodotti vengano mostrati nei risultati di ricerca, ad esempio articoli esauriti o articoli sensibili al tempo che non sono più rilevanti, puoi nascondere i prodotti dalla ricerca nel file robots.txt di Shopify.

Robots.txt in Shopify

Per controllare il tuo file robots.txt che viene generato automaticamente per te, puoi aggiungere /robots.txt al dominio del tuo negozio:

Cosa contiene solitamente questo file? Indica un particolare bot di ricerca (il campo User-agent ) e fornisce direttive di scansione ( Disallow significa bloccarne l'accesso). Nell'esempio sopra, il primo set di regole viene assegnato a tutti i robot di ricerca (l' agente utente è impostato su *). A sua volta, la direttiva Disallow vieta la scansione delle pagine specificate. Nell'esempio, possiamo vedere che il file vieta la scansione di pagine tecniche, come admin, carrello, checkout e così via.

Robots.txt include anche un collegamento alla tua mappa del sito, utile anche per i crawler di ricerca per comprendere la struttura del tuo sito e le priorità di indicizzazione.

Fino a poco tempo, Shopify non offriva alcuna flessibilità con questo file. Ma nel giugno 2021, i commercianti Shopify hanno avuto la possibilità di modificare robots.txt. Le regole predefinite sono per lo più sufficienti ma potrebbero non considerare tutti i casi. Se utilizzi un'app per la ricerca interna, spesso cambia l'URL e le regole predefinite non vengono applicate. Oppure, se hai navigato in facet, l'URL cambia in base a ciascun filtro scelto e le regole predefinite potrebbero non tenere conto di tutto. Puoi aggiungere più pagine e regole al tuo file, specificare più programmi utente, ecc.

Per conoscere le direttive esistenti che puoi applicare, consulta la guida di Google su robots.txt.

Inoltre, tieni presente che nuove regole vengono visualizzate continuamente. Ad esempio, all'inizio del 2022, Google ha introdotto un nuovo tag che controlla l'indicizzazione dei contenuti incorporati: indexifembedded. Può essere applicato se hai dei widget nel tuo negozio che vengono inseriti tramite iframe o tag HTML simili e non vuoi che vengano indicizzati.

Come modificare il tuo robots.txt su Shopify?

Nel codice del tuo tema vedrai una serie di modelli (vai su Negozio online > Temi > fai clic su Azioni sul tema corrente > scegli Modifica codice > vai a Modelli ). L'elenco dovrebbe contenere il file robots.txt.liquid.

Se, per qualche motivo, non hai il file, puoi crearlo facendo clic su Aggiungi nuovo modello e scegliendo robots.txt.

Ad esempio, blocchiamo la ricerca interna dall'indicizzazione: nel modello apparirà così:

Fai riferimento alla pagina della guida di Shopify sulla modifica di robots.txt per maggiori dettagli.

Tieni presente che anche se una pagina non è consentita in robots.txt, può comunque essere indicizzata se contiene collegamenti da fonti esterne. Quindi, ad esempio, se hai una vecchia pagina che ha ricevuto una discreta quantità di traffico in passato ma non è più rilevante per il tuo negozio, è meglio bloccarla con il meta tag robots o rimuoverla completamente.

Indicizzazione dei contenuti di Shopify con il meta tag robots

Oltre a robots.txt, la direttiva noindex può essere inserita nella sezione <head> del codice del tuo tema con l'aiuto del meta tag robots. Il tag ha la seguente sintassi: <meta name=”robots” content=”noindex”>.

Analogamente a come modifichi o crei un codice Shopify robots.txt, vai su theme.liquid nella sezione Layout . Ad esempio, questo è ciò che apparirà se aggiungi una regola per il noindexing della tua pagina /nuova-raccolta:

In questo modo, nasconderai una pagina dalla ricerca per sempre.

Nota che puoi usare noindex con le direttive nofollow o seguire insieme. Con follow , la tua pagina verrà bloccata dall'indicizzazione ma consentirà ai robot di ricerca di eseguire la scansione di altri collegamenti posizionati su quella pagina, mentre con nofollow , sia la pagina stessa che tutti i collegamenti su di essa non saranno accessibili ai robot di ricerca.

Indicizzazione dei contenuti di Shopify con l'aiuto delle app

Se tutto questo ti sembra un problema, ci sono modi per controllare l'indicizzazione della tua pagina ancora più facilmente, senza dover scrivere una singola riga di codice. Esistono diverse app SEO per Shopify che ti aiuteranno a nascondere i prodotti dalla ricerca nel tuo negozio Shopify o a bloccare qualsiasi altra pagina.

Dai un'occhiata a questi due:

• Sitemap Noindex SEO Tools ($ 3,49 al mese per tutti i tipi di pagine)
• NoIndexify - Sitemap Manager (gratuito per pagine di prodotti, raccolte e blog; $ 2,99 al mese per altre pagine: ricerca, impaginazione, accesso, ecc.)

Ecco come appare l'interfaccia di NoIndexify: per ogni pagina, puoi scegliere una serie di direttive:

Migliora la tua SEO migliorando l'indicizzazione delle pagine

Questo è tutto: speriamo che tu abbia una migliore comprensione di come funziona il robots.txt di Shopify e come usarlo a tuo vantaggio. Con l'aiuto di robots.txt e del meta tag robots, puoi migliorare il tuo controllo sull'indicizzazione delle pagine, prevenire problemi di SEO e dare più valore alle tue pagine più importanti in modo che brillino nella ricerca e attirino più visitatori.

Se stai cercando altri suggerimenti SEO di Shopify, consulta la nostra guida SEO.