¿Qué no indexar en tu tienda Shopify y cómo? La guía de robots.txt y la metaetiqueta de robots

El archivo robots.txt es uno de los elementos básicos del SEO técnico que siempre debes cuidar. Le ayuda a controlar cómo los motores de búsqueda rastrean su sitio, de modo que todo lo importante aparece en los resultados de búsqueda y todo lo que no desea que se muestre allí se bloquea.

‍

¿Por qué es tan importante controlar el rastreo y la indexación de su página?

• Guardar el presupuesto de rastreo. Hay un límite en la cantidad de páginas que un robot de búsqueda puede procesar en un momento dado. Para asegurarse de que sus páginas más importantes se rastreen y se vuelvan a rastrear regularmente, debe excluir aquellas páginas que no necesitan mostrarse en los resultados de búsqueda.

• Evitar que se muestren páginas técnicas en la búsqueda. Hay muchas páginas que su tienda genera para la comodidad de los usuarios: páginas con inicio de sesión, pago, búsqueda interna, etc. Son cruciales para UX pero no es necesario clasificarlas en la búsqueda.

• Evitar problemas de contenido duplicado. Hablando de las páginas técnicas que hemos mencionado, pueden crear duplicación: por ejemplo, diferentes opciones de clasificación vendrán en diferentes URL pero mostrarán los mismos productos, solo que en un orden diferente. No desea que esas páginas se involucren en las clasificaciones, ya que los motores de búsqueda no aprecian el contenido duplicado.

¿Cómo puedes controlar la indexación de páginas de tu tienda?

Para dar valor a tus páginas importantes y facilitar su indexación por parte de los robots de búsqueda, siempre debes tener un sitemap actualizado y correcto. Además, tenga cuidado con los enlaces internos y consiga que las fuentes externas enlacen a su contenido para que sus páginas se vean más autorizadas a los ojos de los motores de búsqueda.

Estas medidas prácticamente garantizan que sus páginas se clasifiquen en la búsqueda, aunque no existe una forma segura de garantizar una indexación del 100 %.

Lo que puede garantizar al 100% es excluir ciertas páginas que no desea que aparezcan en la búsqueda. Para esto, puede usar la directiva noindex en el archivo robots.txt o la metaetiqueta de robots . Suena muy técnico a primera vista, pero en realidad es muy fácil. Especialmente para los comerciantes de Shopify, ya que la plataforma se encarga automáticamente de la mayor parte de la indexación adecuada.

Entonces, ¿qué no debería indexar en una tienda Shopify?

Para las tiendas en línea, tiene sentido bloquear la indexación de los siguientes tipos de páginas:

• Todo lo relacionado con las cuentas de usuario. Esas páginas son únicas para cada cliente y no son necesarias en la búsqueda.
• Todo lo relacionado con el pago de invitados. Incluso si los usuarios no inician sesión en su cuenta y se les permite comprar como invitados, las páginas con pasos de pago generados para ellos no están destinadas a la búsqueda.
• Navegación facetada y búsqueda interna. Como ya mencionamos, ofrecer esas URL a los robots de búsqueda solo los confundirá, agotará su presupuesto de rastreo y creará problemas de contenido duplicado.
• Productos que desea ocultar de la búsqueda. Si no desea que ciertos productos se muestren en los resultados de búsqueda, por ejemplo, artículos agotados o artículos sensibles al tiempo que ya no son relevantes, puede ocultar productos de la búsqueda en su archivo Shopify robots.txt.

Robots.txt en Shopify

Para verificar su archivo robots.txt que se genera automáticamente, puede agregar /robots.txt al dominio de su tienda:

¿Qué suele contener este archivo? Indica un bot de búsqueda en particular (el campo Usuario-agente ) y proporciona directivas de rastreo ( Disallow significa bloquear el acceso). En el ejemplo anterior, el primer conjunto de reglas se proporciona a todos los robots de búsqueda (el agente de usuario se establece en *). A su vez, la directiva Disallow prohíbe el rastreo de las páginas especificadas. En el ejemplo, podemos ver que el archivo prohíbe el rastreo de páginas técnicas, como administrador, carrito, pago, etc.

Robots.txt también incluye un enlace a su mapa del sitio, que también es útil para buscar rastreadores para comprender la estructura de su sitio y las prioridades de indexación.

Hasta hace poco, Shopify no brindaba ninguna flexibilidad con este archivo. Pero en junio de 2021, a los comerciantes de Shopify se les dio la posibilidad de editar robots.txt. Las reglas predefinidas son en su mayoría suficientes, pero es posible que no consideren todos los casos. Si usa una aplicación para la búsqueda interna, a menudo cambia la URL y no se aplican las reglas predeterminadas. O, si tiene navegación por facetas, la URL cambia según cada filtro elegido y es posible que las reglas predeterminadas no tengan todo en cuenta. Puede agregar más páginas y reglas a su archivo, especificar más agentes de usuario, etc.

Para conocer las directivas existentes que puede aplicar, consulte la guía de Google sobre robots.txt.

Además, tenga en cuenta que aparecen nuevas reglas todo el tiempo. Por ejemplo, a principios de 2022, Google introdujo una nueva etiqueta que controla la indexación del contenido incrustado: indexifembedded. Se puede aplicar si tiene algunos widgets en su tienda que se insertan a través de iframe o una etiqueta HTML similar y no desea que se indexen.

¿Cómo editar tu archivo robots.txt en Shopify?

En el código de su tema, verá un montón de plantillas (vaya a Tienda en línea > Temas > haga clic en Acciones en su tema actual > elija Editar código > vaya a Plantillas ). La lista debe contener el archivo robots.txt.liquid.

Si, por alguna razón, no tiene el archivo, puede crearlo haciendo clic en Agregar nueva plantilla y seleccionando robots.txt.

Por ejemplo, bloqueemos la indexación de la búsqueda interna; se verá así en la plantilla:

Consulte la página de ayuda de Shopify sobre la edición de robots.txt para obtener más detalles.

Tenga en cuenta que incluso si una página no está permitida en robots.txt, aún puede indexarse ​​si tiene enlaces de fuentes externas. Entonces, por ejemplo, si tiene una página antigua que recibió una cantidad decente de tráfico en el pasado pero que ya no es relevante para su tienda, es mejor bloquearla con la metaetiqueta de robots o eliminarla por completo.

No indexar el contenido de Shopify con la metaetiqueta de robots

Además de robots.txt, la directiva noindex se puede insertar en la sección <head> del código de su tema con la ayuda de la metaetiqueta robots. La etiqueta tiene la siguiente sintaxis: <meta name=”robots” content=”noindex”>.

De manera similar a cómo editas o creas un código Shopify robots.txt, ve a theme.liquid en la sección Diseño . Por ejemplo, este es el aspecto que tendrá si agrega una regla para no indexar su página /nueva colección:

De esta manera, ocultará una página de la búsqueda para siempre.

Tenga en cuenta que puede usar noindex con las directivas nofollow o follow juntas. Con seguir , se bloqueará la indexación de su página, pero permitirá que los robots de búsqueda rastreen otros enlaces colocados en esa página, mientras que con nofollow , tanto la página como todos los enlaces no serán accesibles para los robots de búsqueda.

Sin indexación del contenido de Shopify con la ayuda de aplicaciones

Si todo esto le parece demasiado problemático, hay formas de controlar la indexación de su página aún más fácilmente, sin tener que escribir una sola línea de código. Existen varias aplicaciones de SEO para Shopify que lo ayudarán a ocultar productos de la búsqueda en su tienda Shopify o bloquear cualquier otra página.

Echa un vistazo a estos dos:

• Sitemap Noindex SEO Tools ($3.49 por mes para todo tipo de páginas)
• NoIndexify - Sitemap Manager (gratis para páginas de productos, colecciones y blogs; $2,99 al mes para otras páginas: búsqueda, paginación, inicio de sesión, etc.)

Así es como se ve la interfaz de NoIndexify: para cada página, puede elegir un conjunto de directivas:

Mejora tu SEO mejorando la indexación de páginas

Eso es todo: esperamos que comprendas mejor cómo funciona el archivo robots.txt de Shopify y cómo usarlo para tu beneficio. Con la ayuda de robots.txt y la metaetiqueta robots, puede mejorar su control sobre la indexación de páginas, evitar problemas de SEO y dar más valor a sus páginas más importantes para que brillen en la búsqueda y atraigan a más visitantes.

Si buscas más consejos de Shopify SEO, consulta nuestra guía de SEO.