ayuda con Robots.txt

  • Autor Autor gowkster
  • Fecha de inicio Fecha de inicio
G

gowkster

Delta
Hola a todos..

Estoy supervisando un foro de reciente creación con las herramientas de webmaster de google y resulta que me da estos errores:



calendar.php?action=addevent&calendar=1&day=2&month=3&year=2013 403
calendar.php?action=addevent&calendar=1&day=2&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=23&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=24&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=28&month=3&year=2013 403
calendar.php?action=addevent&calendar=1&day=17&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=8&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=19&month=2&year=2013 403 .............

Y así, cada vez mas, hace una semana eran 30 errores de URL, hoy son mas de 200, el caso es que quiero evitar una penalización de google pero no se como hacer para modificar el obots.txt y que elimine esto. me podéis echar una mano?

Gracias
 
Sería esto
Insertar CODE, HTML o PHP:
User-agent: *
Disallow: /calendar.php*


o

Insertar CODE, HTML o PHP:
User-agent: Googlebot
Disallow: /calendar.php*

Saludos

Hola a todos..

Estoy supervisando un foro de reciente creación con las herramientas de webmaster de google y resulta que me da estos errores:



calendar.php?action=addevent&calendar=1&day=2&month=3&year=2013 403
calendar.php?action=addevent&calendar=1&day=2&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=23&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=24&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=28&month=3&year=2013 403
calendar.php?action=addevent&calendar=1&day=17&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=8&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=19&month=2&year=2013 403 .............

Y así, cada vez mas, hace una semana eran 30 errores de URL, hoy son mas de 200, el caso es que quiero evitar una penalización de google pero no se como hacer para modificar el obots.txt y que elimine esto. me podéis echar una mano?

Gracias
 
Última edición:
Muchas gracias, solo desabilitando la pagina y ya esta..... que facil si sabes como...:encouragement:

---------- Post agregado el 07-feb-2014 hora: 10:35 ----------

hora que lo busco.......

No tengo ningún robots.txt....🙄

Hay algún plug para generarlo... o lo hago a mano?
 
no se si esto funcione un dia lo probare, tengo este codigo php haber si sirve:
// Ignore bots
if( strpos($_SERVER['HTTP_USER_AGENT'], 'Googlebot')!==FALSE ) return;
if( strpos($_SERVER['HTTP_USER_AGENT'], 'msnbot')!==FALSE ) return;
 
bueno, lo solucioné con esto:

Insertar CODE, HTML o PHP:
User-Agent: *
Disallow: /moderation.php
Disallow: /ratethread.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /sendthread.php
Disallow: /usercp.php
Disallow: /usercp2.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /editpost.php
Disallow: /private.php
Disallow: /search.php
Disallow: /memberlist.php
Disallow: /showteam.php
Disallow: /calendar.php*


User-agent: dotbot 
Disallow: /

pero ahora me escupe este otro error:


Acceso denegado... tengo 27 errores como este:

Calendar-Calendario?year=2013&month=3&day=3&action=addevent

alguien sabe como eliminar este error?
 
Coloca la pantalla del error.

Saludos

bueno, lo solucioné con esto:

Insertar CODE, HTML o PHP:
User-Agent: *
Disallow: /moderation.php
Disallow: /ratethread.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /sendthread.php
Disallow: /usercp.php
Disallow: /usercp2.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /editpost.php
Disallow: /private.php
Disallow: /search.php
Disallow: /memberlist.php
Disallow: /showteam.php
Disallow: /calendar.php*


User-agent: dotbot 
Disallow: /

pero ahora me escupe este otro error:


Acceso denegado... tengo 27 errores como este:

Calendar-Calendario?year=2013&month=3&day=3&action=addevent

alguien sabe como eliminar este error?
 
Coloca la pantalla del error.

Saludos

El error es en las herramientas de webmaster y es el siguiente:


1 Calendar-Calendario?year=2013&month=3&day=3&action=addevent 403 8/02/14

2 Calendar-Calendario?year=2012&month=6&day=23&action=addevent 403 8/02/14

3 Calendar-Calendario?year=2012&month=6&day=29&action=addevent 403 8/02/14

4 Calendar-Calendario?year=2012&month=6&day=2&action=addevent 403 8/02/14

5 Calendar-Calendario?year=2012&month=6&day=25&action=addevent 403 8/02/14

6 Calendar-Calendario?year=2012&month=6&day=26&action=addevent 403 8/02/14

7 Calendar-Calendario?year=2013&month=3&day=11&action=addevent 403 8/02/14

8 Calendar-Calendario?year=2012&month=6&day=7&action=addevent 403 8/02/14

9 Calendar-Calendario?year=2012&month=6&day=18&action=addevent 403 8/02/14

10 Calendar-Calendario?year=2014&month=10&day=28&action=addevent 403 8/02/14

11 Calendar-Calendario?year=2012&month=6&day=1&action=addevent 403 8/02/14

12 Calendar-Calendario?year=2012&month=6&day=30&action=addevent 403 8/02/14

13 Calendar-Calendario?year=2012&month=5&day=28&action=addevent 403 8/02/14

14 Calendar-Calendario?year=2012&month=6&day=9&action=addevent 403 8/02/14

15 Calendar-Calendario?year=2012&month=5&day=29&action=addevent 403 8/02/14

16 Calendar-Calendario?year=2012&month=6&day=8&action=addevent 403 8/02/14

17 Calendar-Calendario?year=2013&month=3&day=24&action=addevent 403 8/02/14

18 Calendar-Calendario?year=2012&month=6&day=12&action=addevent 403 8/02/14

19 Calendar-Calendario?year=2012&month=6&day=4&action=addevent 403 8/02/14

20 Calendar-Calendario?year=2012&month=6&day=13&action=addevent 403 8/02/14

21 Calendar-Calendario?year=2012&month=6&day=21&action=addevent 403 8/02/14

22 Calendar-Calendario?year=2012&month=6&day=6&action=addevent 403 8/02/14

23 Calendar-Calendario?year=2013&month=3&day=17&action=addevent 403 8/02/14

24 Calendar-Calendario?year=2013&month=3&day=21&action=addevent 403 8/02/14

25 Calendar-Calendario?year=2012&month=6&day=5&action=addevent 403 8/02/14

y como se en el roborts.txt ya bloquee el calendario.
 
La solución es simple.
Agrega la línea:

Insertar CODE, HTML o PHP:
Disallow: /Calendar.php*

El robots.txt distingue entre mayúsculas y minúsculas.

Saludos!


El error es en las herramientas de webmaster y es el siguiente:


1 Calendar-Calendario?year=2013&month=3&day=3&action=addevent 403 8/02/14

2 Calendar-Calendario?year=2012&month=6&day=23&action=addevent 403 8/02/14

3 Calendar-Calendario?year=2012&month=6&day=29&action=addevent 403 8/02/14

4 Calendar-Calendario?year=2012&month=6&day=2&action=addevent 403 8/02/14

5 Calendar-Calendario?year=2012&month=6&day=25&action=addevent 403 8/02/14

6 Calendar-Calendario?year=2012&month=6&day=26&action=addevent 403 8/02/14

7 Calendar-Calendario?year=2013&month=3&day=11&action=addevent 403 8/02/14

8 Calendar-Calendario?year=2012&month=6&day=7&action=addevent 403 8/02/14

9 Calendar-Calendario?year=2012&month=6&day=18&action=addevent 403 8/02/14

10 Calendar-Calendario?year=2014&month=10&day=28&action=addevent 403 8/02/14

11 Calendar-Calendario?year=2012&month=6&day=1&action=addevent 403 8/02/14

12 Calendar-Calendario?year=2012&month=6&day=30&action=addevent 403 8/02/14

13 Calendar-Calendario?year=2012&month=5&day=28&action=addevent 403 8/02/14

14 Calendar-Calendario?year=2012&month=6&day=9&action=addevent 403 8/02/14

15 Calendar-Calendario?year=2012&month=5&day=29&action=addevent 403 8/02/14

16 Calendar-Calendario?year=2012&month=6&day=8&action=addevent 403 8/02/14

17 Calendar-Calendario?year=2013&month=3&day=24&action=addevent 403 8/02/14

18 Calendar-Calendario?year=2012&month=6&day=12&action=addevent 403 8/02/14

19 Calendar-Calendario?year=2012&month=6&day=4&action=addevent 403 8/02/14

20 Calendar-Calendario?year=2012&month=6&day=13&action=addevent 403 8/02/14

21 Calendar-Calendario?year=2012&month=6&day=21&action=addevent 403 8/02/14

22 Calendar-Calendario?year=2012&month=6&day=6&action=addevent 403 8/02/14

23 Calendar-Calendario?year=2013&month=3&day=17&action=addevent 403 8/02/14

24 Calendar-Calendario?year=2013&month=3&day=21&action=addevent 403 8/02/14

25 Calendar-Calendario?year=2012&month=6&day=5&action=addevent 403 8/02/14

y como se en el roborts.txt ya bloquee el calendario.
 
Atrás
Arriba