Claro que no Girlly, para eso estamos.
🙂
Lo que tienes que hacer es incluir en la carpeta raiz de tu sitio un archivo denominado robots.txt
El posible que ya lo tengas o es posible que no.
Ese archivo sirve para decirle a los motores de búsqueda que carpetas y archivos de tu web deben indexar y cuales no.
Lo habitual es incluir en el robots.txt solo las URL que no quieres que sean indexadas. Todas las que no incluyas expresamente se entiende que deben ser indexadas.
En este caso de querer eliminar un directorio entero puedes poner esto en el archivo:
Insertar CODE, HTML o PHP:
User-agent: *
Disallow: /carpetaquedeseaseliminar/
o bien, si deseas hacerlo página por página puedes hacerlo así:
Insertar CODE, HTML o PHP:
User-agent: *
Disallow: /carpetaquedeseaseliminar/archivoquedeseaseliminar1.htm
Disallow: /carpetaquedeseaseliminar/archivoquedeseaseliminar2.htm
Disallow: /carpetaquedeseaseliminar/archivoquedeseaseliminar3.htm
Es importante que tengas en cuenta que, si usas un CMS ( Wordpress, Joomla, etc...), debes respetar el contenido que encuentres dentro del robots.txt
En la mayoría de los CMS se desactiva por defecto la indexación de algunas carpetas, como administrator, install, etc...
Si tienes dudas o no tienes ningún archivo robots.txt en tu sitio dime que CMS estás usando o yo te digo que carpetas debes desactivar además de las páginas que te dan error. :encouragement: