Robots.txt para WordPress

Con el archivo robots.txt para WordPress, podrás optimizar el posicionamiento Seo de una Web

Es muy importante que aprendas a crear y configurar un robots.txt para WordPress, ya que se trata de un archivo que le dice a las arañas de los motores de búsqueda que no rastreen ciertas páginas o secciones de un sitio web. 

Pero, ¿porqué debo restringir la indexación de algunas páginas?

Bueno, básicamente se trata de optimizar el tiempo que las arañas de los buscadores pasan rastreando una página web.

Imagina que tienes una página web con muchas secciones y publicaciones.

Seguro que prefieres que el tiempo de rastreo de una araña se emplee en las páginas y publicaciones que realmente te interese indexar en Google o en cualquier otro buscador.

Normalmente se suelen restringirlo accesos de contenidos duplicados (para que no nos penalicen) o páginas cómo la de Privacidad, Cookies, etc.

¿Es absolutamente necesario configurar el Robots.txt?

Pues casi todas las preguntas relacionadas con el Marketing… depende

¿De qué depende?

Pues de aspectos como el tamaño de vuestra web (en cuanto a cantidad de contenidos) o tambien en función del tipo de web.

Si tienes una web común que quieras posicionar, lo lógico sería utilizar el robots.txt para restringir el acceso a aquellas páginas o posts que no tengan relevancia para tu audiencia.

Pero si tienes una web simple con poco contenido, no es absolutamente necesario tener un robots.txt

Sin embargo, si tienes un tipo de web donde los contenidos son «delicados» y no quieres que los bots entren a fisgonear, quizás te interese restringirlas.

Cómo crear el Robots.txt en una web que no está hecha con WordPress

Si tu página web no está hecha en wordPress, crear un archivo Robots.txt es realmente fácil.

Como ya he comentado antes, se trata de un archivo de texto plano que puedes crear con cualquier editor de texto (por ejemplo, word o notepad)

Lo único que debes tener en cuenta son 3 cosas:

  • Poner el siguiente código base y a partir de ahí incluir los «Allow» o «Disallow» que quieras (tal como explico en el video:
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
  • Nombrar este archivo como robots.txt
  • Colgarlo en la carpeta raiz de tu web

Una vez hecho esto, ya tendrás activado tu robots.txt y las arañas de los buscadores podrán leerlo para entender donde pueden mirar y donde no


VER SIGUIENTE LECCIÓN


Uso de cookies

Este sitio web utiliza cookies para que usted tenga la mejor experiencia de usuario. Si continúa navegando está dando su consentimiento para la aceptación de las mencionadas cookies y la aceptación de nuestra política de cookies, pinche el enlace para mayor información. ACEPTAR

Aviso de cookies
Save & Share Cart
Your Shopping Cart will be saved and you'll be given a link. You, or anyone with the link, can use it to retrieve your Cart at any time.
Back Save & Share Cart
Your Shopping Cart will be saved with Product pictures and information, and Cart Totals. Then send it to yourself, or a friend, with a link to retrieve it at any time.
Your cart email sent successfully :)