¿cual es la forma correcta de deshabilitar url por Robots.txt?

leit0s · 9 Sep 2020

Hola betas, como dice el titulo, me orientarían cual es la forma correcta de deshabilitar una url en blogger desde roboots.txt

Yo uso la siguiente manera pero una herramienta de una web dice que tengo que corregir porque falta "/ or * "
Disallow: https://www.miweb.com/p/pagina.html
Disallow: https://www.miweb.com/2017/06/mi-articulo.html

Si es así, el formato seria:
Disallow: /https://www.miweb.com/p/pagina.html
Disallow: /https://www.miweb.com/2017/06/mi-articulo.html

o
Disallow: /p/pagina.html
Disallow: /2017/06/mi-articulo.html

pedro salinas · 9 Sep 2020

A la entrada (post y page) que no quieras indexar solo colócale
no index y ya --> no indexar (marcar esta opción)
nofollow --> No seguir (marcar esta opción)

Si no quieres que se indexe y no se digan a la vez, pues marcar las opciones (no index, no follow)

leit0s · 9 Sep 2020

pedro salinas dijo:
A la entrada (post y page) que no quieras indexar solo colócale
no index y ya --> no indexar (marcar esta opción)
nofollow --> No seguir (marcar esta opción)

Si no quieres que se indexe y no se digan a la vez, pues marcar las opciones (no index, no follow)

Por ese lado, pero la consulta va por unas url que me reclamaron y por mas que las elimine aun suelen reclamarlas y no se como si ya no estan y me dijeron que las bloquee desde root pero no se si estará bien echo.

pedro salinas · 9 Sep 2020

puedes mostrar captura ???

Andy S Pérez · 9 Sep 2020

Tengo entendido que he sin el dominio solo Disallow: /2017/06/mi-articulo.html si la URL tiene al final / tiene que ponerlo

¿cual es la forma correcta de deshabilitar url por Robots.txt?

leit0s

pedro salinas

leit0s

pedro salinas

Andy S Pérez

Temas similares