Uno de los elementos indispensables de todo blog es el archivo de texto robots.txt el cual contiene información relevante para el SEO de tu sitio, básicamente le indica al motor de búsqueda Google como quieres que tu sitio web sea rastreado e indexado.

A través de unos comandos de instrucciones se le da acceso o bloqueo al robot de Google para que pueda indexar nuestro contenido o parte de este en sus servidores.

En esta oportunidad queremos compartir con ustedes la herramienta web online robots.txt checker mediante la cual conoceremos los errores que pueda contener este archivo. Por lo general los errores del robots.txt son muy difíciles de reconocer, haciendo que esta herramienta nos facilite el trabajo.

Bastará con copiar y pegar la URL de nuestro sitio web y la herramienta nos arrojará los puntos buenos, los errores y los actuales peligros que puedan causar un error. Puedes visitar la aplicación desde el enlace de más abajo.

Enlace | Robots.txt checker