Cómo bloquear la indexación de Google en WordPress

Que tu sitio este indexado en Google es importante para que te puedan encontrar en Internet. Y sin embargo hay ocasiones en las que es necesario evitarlo. Por ejemplo:

• Cuando estás comenzando un sitio y el contenido es de prueba.
• Cuando duplicas el sitio en otro lugar y lo utilizas como un sitio dónde realizar pruebas.
• Cuando no quieres indexar el contenido de tus textos legales, páginas de administración o páginas de formularios.

WordPress tiene previstas estas circunstancias y puede evitar que tu sitio o alguna de sus páginas aparezcan en las búsquedas.

Bloquear a Google desde WordPress

Puedes evitar que Google indexe tu sitio desde la propia configuración de WordPress siguiendo estos pasos:

• Entra en el escritorio de WordPress.
• En el menú principal pulsa en Ajustes y luego en Lectura.
  Tienes que marcar la casilla para Disuade a los motores de búsqueda de indexar este sitio.

Al guardar los cambios, WordPress añade esta metaetiqueta a todas las páginas del sitio:

<meta name="robots" content="noindex, nofollow">

Que indica a Google y a cualquier buscador como Bing o Yahoo que no debe indexar ni rastrear la página.

Esta opción de WordPress funciona bien para bloquear todo el sitio, pero si quieres bloquear sólo algunas páginas no te sirve. Necesitas las opciones de configuración que te permite el fichero robots.txt.

Bloquear a Google con el archivo robots.txt

El fichero robots.txt te permite especificar cada una de páginas quieres bloquear en Google.

Por ejemplo, para bloquear completamente el acceso a Google tienes que crear un fichero robots con el contenido:

User-agent: Googlebot
Disallow: /

Si quieres bloquear el acceso a cualquier robot:

User-agent: *
Disallow: /

Y para permitir el acceso a Google y bloquear sólo alguna de tus páginas el fichero robots tendrá un aspecto parecido a este:

User-agent: Googlebot
Disallow: /category/
Disallow: /wp-admin/

Más información sobre el fichero robots.txt

Google tarda varios días en actualizar su índice. Así puedes comprobar que has realizado la configuración correcta:

Comprueba si tu sitio esta indexado en Google

Quizá la mejor forma de comprobar que tu sitio está indexado en Google es utilizar su propia herramienta llamada «Search Console».

Dentro de la aplicación, en el menú Índice»Cobertura puedes hacer un seguimiento diario y a lo largo del tiempo del estado de indexación de tu sitio.

Más información sobre cómo añadir WordPress a la Search Console

Y si quieres saber el número de páginas indexadas de cualquier página web aunque no sea tuya puedes utilizar el buscador de Google. Por ejemplo, si tu sitio es example.com busca con este texto:

Te ánimo a que eches un vistazo a mi artículo sobre el fichero robots.txt para profundizar sobre este tema.

---