Más de 700 errores de rastreo

arbitre · 20 Abr 2013

Buenas, llevo unos días con un descenso de visitas considerable en mi web. He entrado a ver las herramientas de webmaster de Google y me encuentro con más de 700 errores de rastreo cada día en los últimos 5 días, por lo que Google me ha penalizado. Google me dice lo siguiente: "Googlebot no ha podido rastrear la URL porque tu servidor requiere que se inicie sesión para acceder a la página o está impidiendo que Googlebot acceda a tu sitio. Para obtener más información, consulta esta página"
¿Alguien sabe a qué se debe esto?
Añado que el error fue justo después de editar el robot.txt (maldita la hora). Ahora lo he eliminado, debo crear uno nuevo y poner algo en él?

Gracias!

jlchevrolet · 20 Abr 2013

create un sitmeap xml

subilo a tu servidor

enviaselo a google, desde la webmaster tool. y despues miras mas tranquilo como solucionarlo.

no se me ocurre para q hiciste un txt??

samuelsoler · 20 Abr 2013

Como dice el compañero crea un sitemap y envíalo.
Incluso borra el robot q le enviaste.

jlchevrolet dijo:
create un sitmeap xml

subilo a tu servidor

enviaselo a google, desde la webmaster tool. y despues miras mas tranquilo como solucionarlo.

no se me ocurre para q hiciste un txt??

ecomedic · 20 Abr 2013

No puedes dejar el robots.txt vacío si trabajas con un CMS !!
Si lo haces, los bots empezarán a indexar todas las carpetas de temas, administración, plugins, etc... y eso te traerá problemas además de que los usuarios verán en Google páginas tuyas sin sentido.

Si trabajas con WP entonces tienes que poner al menos esto:

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Si trabajas con Joomla lo mínimo es esto:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/

Y si trabajas con otro CMS dime cual y te digo.

arbitre · 20 Abr 2013

Gracias por las respuestas. El sitemap ya estaba enviado antes de este problema y he añadido el robots.txt que me dice ecomedic. Ahora a esperar que vuelva a pasar la araña de Google. De momento, en webmaster tool ya me dice que mi index se ve correctamente.

arbitre · 22 Abr 2013

Han pasado ya dos días y me sigue saliendo lo siguiente, ¿alguna solución? ¡Gracias!

jlchevrolet · 22 Abr 2013

arbitre dijo:
Han pasado ya dos días y me sigue saliendo lo siguiente, ¿alguna solución? ¡Gracias!
Ver el archivo adjunto 13585

eliminaste el robot.txt ???

arbitre · 22 Abr 2013

jlchevrolet dijo:
eliminaste el robot.txt ???

Si claro, mi nuevo robot.txt es el siguiente:
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://miweb/sitemap.xml

arbitre · 22 Abr 2013

Mas datos, a ver si alguien me puede ayudar. El error que dice google sale en mi web es el 403.

adthz · 22 Abr 2013

arbitre dijo:
Mas datos, a ver si alguien me puede ayudar. El error que dice google sale en mi web es el 403.

en la configuracion de wordpress lo tienes que google indexe o rastree tu web?
sabes de lo que hablo?

arbitre · 22 Abr 2013

adthz dijo:
en la configuracion de wordpress lo tienes que google indexe o rastree tu web?
sabes de lo que hablo?

Sí, la opción que disuada a los buscadores está desactivada.

adthz · 22 Abr 2013

arbitre dijo:
Sí, la opción que disuada a los buscadores está desactivada.

Pues activala
Desactiva= destildada
Activada= tildada

Si esta desactivada activala amigo
Tambien te recomiendo usar el plugin de wordpress seo by yoast
te ayuda mucho en estos casos

EDITO: Bueno yo lo tengo destildada, me he confundido xd
Instala el plugin que te digo que el te configura todo eso.

arbitre · 22 Abr 2013

adthz dijo:
Pues activala
Desactiva= destildada
Activada= tildada

Si esta desactivada activala amigo
Tambien te recomiendo usar el plugin de wordpress seo by yoast
te ayuda mucho en estos casos

EDITO: Bueno yo lo tengo destildada, me he confundido xd
Instala el plugin que te digo que el te configura todo eso.

Lo tengo configurada e instalado desde hace meses. Si ya te digo que mi web estaba bien indexada pero derrepente está dando estos errores en WHT.

adthz · 22 Abr 2013

arbitre dijo:
Lo tengo configurada e instalado desde hace meses. Si ya te digo que mi web estaba bien indexada pero derrepente está dando estos errores en WHT.

Si te entiendo, es bien estraño lo que te pasa una ves me sucedio con un foro y lo vendi xd
Pues dejame echar cabeza y te aviso

arbitre · 22 Abr 2013

adthz dijo:
Si te entiendo, es bien estraño lo que te pasa una ves me sucedio con un foro y lo vendi xd
Pues dejame echar cabeza y te aviso

De acuerdo, muchas gracias. La web es Trabajo en Inglaterra - Ofertas para trabajar en Inglaterra.

adthz · 22 Abr 2013

arbitre dijo:
De acuerdo, muchas gracias. La web es Trabajo en Inglaterra - Ofertas para trabajar en Inglaterra.

Tu robot es este
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://trabajoeninglaterra.org/sitemap.xml

Quita esto: http://trabajoeninglaterra.org/sitemap.xml

Y deja esto:
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

arbitre · 22 Abr 2013

adthz dijo:
Tu robot es este
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://trabajoeninglaterra.org/sitemap.xml

Quita esto: http://trabajoeninglaterra.org/sitemap.xml

Y deja esto:
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Cambiado, de todas formas no creo que sea eso pues sólo le estoy indicando el sitemap. Gracias!

adthz · 22 Abr 2013

arbitre dijo:
Cambiado, de todas formas no creo que sea eso pues sólo le estoy indicando el sitemap. Gracias!

Sisi lo se, pero acuerda que estamos buscandole una solucion y hay que probar de todo.

arbitre · 22 Abr 2013

adthz dijo:
Sisi lo se, pero acuerda que estamos buscandole una solucion y hay que probar de todo.

Mas pistas:

jlchevrolet · 22 Abr 2013

arbitre dijo:
Mas pistas:
Ver el archivo adjunto 13591

sigo sin explicarme para q queres un robot.txt

yo tengo sitio en WP y a ninguno le puse un robot.txt

tu sitio se encuentra bien. tenes un sitemap y la respuesta HTTP ES 200

PD: no se que sucede con webmastertool ultimamente creo q esta fallando un poco. (quiza sea eso)

Más de 700 errores de rastreo

arbitre

jlchevrolet

samuelsoler

ecomedic

arbitre

arbitre

jlchevrolet

arbitre

arbitre

adthz

arbitre

adthz

arbitre

adthz

arbitre

adthz

arbitre

adthz

arbitre

jlchevrolet

Temas similares

Privacidad y transparencia

Privacidad y transparencia