Archivos sitemap.xml y robots.txt: qué son y por qué los necesita tu web

Tu web tiene dos archivos que probablemente no has visto nunca pero que son fundamentales para que Google la entienda: el sitemap.xml y el robots.txt.

Qué es el sitemap.xml

El sitemap es como un mapa de tu web. Es un archivo que contiene la lista de todas las páginas que quieres que Google conozca, con información adicional como cuándo se actualizó cada una.

Si usas WordPress con Yoast SEO, el sitemap se genera automáticamente. Lo puedes ver en tudominio.com/sitemap_index.xml. Si está ahí, bien. Si no, revisa la configuración de Yoast.

Una vez que tienes el sitemap, conviene enviarlo a Google a través de Search Console para que lo rastree más rápido.

Qué es el robots.txt

El robots.txt es un archivo de texto que le dice a los buscadores qué partes de tu web pueden rastrear y cuáles no. Está en la raíz de tu web: tudominio.com/robots.txt.

Por ejemplo, puedes indicar que Google no rastree la carpeta de administración de WordPress (/wp-admin/) o determinadas carpetas de archivos internos. Esto ayuda a que los buscadores se centren en las páginas que realmente importan.

Un robots.txt mal configurado puede hacer que Google no indexe páginas importantes de tu web, así que si lo tocas, hazlo con cuidado o pide ayuda.

Cualquier duda o consulta ponte en contacto conmigo para ayudarte o concretar mis servicios, aquí.