Ayuda con robots.txt

  • Autor Autor lydiasamtos
  • Fecha de inicio Fecha de inicio
L

lydiasamtos

Kappa
Verificación en dos pasos activada
¡Hola betas!

Hace un tiempo creé un sitio con Wordpress y, por consejo de un colega, activé la opción "Ajustes de privacidad: pide a los buscadores que no indexen este sitio". Acepté el consejo porque me dijo que era mejor que nadie entrara al sitio hasta que el diseño estuviera listo. Y yo, como era toda una ignorante, pues lo hice así sin dudar.

Total, que han pasado los meses, he terminado el diseño del sitio y, pese a haber cambiado la opción "Ajustes de privacidad😛ermite que los motores de búsqueda indexen este sitio", me encuentro con que no se indexa y me da error en Herramientas para webmaster de Google, porque dice que robots.txt está bloqueado y no permite el acceso.

He mirado en mi servidor (Hostgator) y no soy capaz de encontrar en el listado de archivos el famoso robots.txt para ver qué pasa y modificarlo.

No sé qué hacer.

Se me ha ocurrido desinstalar wordpress de mi servidor, después volverlo a instalar e ir metiendo las modificaciones de diseño que he ido haciendo, a ver si así de alguna forma se borra el bloqueo.

¿Qué puedo hacer?
 
Claro no se indexa por que no les permitias entrar, ahora has de enviarles el sitemamap y hacer un par de backlinks para que entren a tu sitio.. que solos no van a entrar si no les llamas.

Si no encuentras el robots.txt crealo tu mismo.
 
¿Simplemente cambiando los ajustes de privacidad de Wordpress y esperando algún tiempo funcionará?

Claro no se indexa por que no les permitias entrar, ahora has de enviarles el sitemamap y hacer un par de backlinks para que entren a tu sitio.. que solos no van a entrar si no les llamas.

Si no encuentras el robots.txt crealo tu mismo.
 
Si los buscadores no llegan al sitio no te indexan, por lo menos tienes que mandar el sitemap.
 
El sitemap está creado y enviado desde Herramientas para webmaster de Google, pero da el siguiente mensaje:
El sitemap incluye URL que el archivo robots.txt ha bloqueado


Mi pregunta es:
¿Cambiando los ajustes de privacidad podrá ser indexado normalmente?



Si los buscadores no llegan al sitio no te indexan, por lo menos tienes que mandar el sitemap.

- - - Actualizado - - -

Bueno, por ahora he cambiado los ajustes de privacidad y voy a darle 48 horas. Iré informando en el hilo cómo va la cosa, por si a alguien le puede servir.
 
El sitemap está creado y enviado desde Herramientas para webmaster de Google, pero da el siguiente mensaje:



Mi pregunta es:
¿Cambiando los ajustes de privacidad podrá ser indexado normalmente?
.

Claro con eso a de ser suficiente, cuando pase google.

Igual has de revisar en el webmaster tools, ahí google te informa si puede o no acceder a tu sitio o si tiene problemas por que le restringen el acceso.
 
El problema que tienes es que robots.txt está bloqueando todo tu dominio. Por mucho sitemap que hagas el googlebot no podrá ver el contenido de tu página. Busca en www.dominio.com/robots.txt entra por ftp con filezilla o cualquier otro programa y edita ese archivo.
 
Solucionado en algo más de 24 horas. Simplemente cambiando la opción desde Wordpress (ajustes de privacidad). Comprobado en Herramientas para webmasters de Google que no hay ninguna incidencia.

Así que, si a alguien más le pasa, es así de fácil solucionarlo. 😉
 
Atrás
Arriba