D
davidtm
Gamma
SEO
Con el nuevo blogger podemos modificar el robots.txt y así poder indexar las etiquetas.
Este es el robots.txt por defecto:
Con "Disallow: /search" no permite que los buscadores indexen las etiquetas que son /search/label.
Con este código en cambio:
Permitímos que se indexen las etiquetas pero evitamos la indexación de las busquedas de los paginadores y así impedimos el contenido duplicado.
ADVERTENCIA: Revisa como es la estructura de tus paginadores por si es diferente aunque sería muy raro.
Este es el robots.txt por defecto:
Insertar CODE, HTML o PHP:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://www.example.com/feeds/posts/default?orderby=updated
Con "Disallow: /search" no permite que los buscadores indexen las etiquetas que son /search/label.
Con este código en cambio:
Insertar CODE, HTML o PHP:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search?updated-min=
Disallow: /search?updated-max=
Disallow: /search?q=
Allow: /
Sitemap: http://www.example.com/feeds/posts/default?orderby=updated
Permitímos que se indexen las etiquetas pero evitamos la indexación de las busquedas de los paginadores y así impedimos el contenido duplicado.
Fuente: Enlace eliminado
ADVERTENCIA: Revisa como es la estructura de tus paginadores por si es diferente aunque sería muy raro.
Última edición: