ayuda con Robots.txt

G

gowkster Seguir

Delta
Desde
6 Mar 2012
Mensajes
678
Hola a todos..

Estoy supervisando un foro de reciente creación con las herramientas de webmaster de google y resulta que me da estos errores:



calendar.php?action=addevent&calendar=1&day=2&month=3&year=2013 403
calendar.php?action=addevent&calendar=1&day=2&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=23&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=24&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=28&month=3&year=2013 403
calendar.php?action=addevent&calendar=1&day=17&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=8&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=19&month=2&year=2013 403 .............

Y así, cada vez mas, hace una semana eran 30 errores de URL, hoy son mas de 200, el caso es que quiero evitar una penalización de google pero no se como hacer para modificar el obots.txt y que elimine esto. me podéis echar una mano?

Gracias
 
DoctorPC

DoctorPC

1
Pi
SEO
Verificado
Verificación en dos pasos activada
Verificado por Whatsapp
¡Ha verificado su Paypal!
Verificado por Binance
Suscripción a IA
Desde
10 Dic 2010
Mensajes
6.080
Sería esto
Insertar CODE, HTML o PHP: 
User-agent: *
Disallow: /calendar.php*


o

Insertar CODE, HTML o PHP: 
User-agent: Googlebot
Disallow: /calendar.php*

Saludos

gowkster dijo:
Hola a todos..

Estoy supervisando un foro de reciente creación con las herramientas de webmaster de google y resulta que me da estos errores:



calendar.php?action=addevent&calendar=1&day=2&month=3&year=2013 403
calendar.php?action=addevent&calendar=1&day=2&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=23&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=24&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=28&month=3&year=2013 403
calendar.php?action=addevent&calendar=1&day=17&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=8&month=2&year=2013 403
calendar.php?action=addevent&calendar=1&day=19&month=2&year=2013 403 .............

Y así, cada vez mas, hace una semana eran 30 errores de URL, hoy son mas de 200, el caso es que quiero evitar una penalización de google pero no se como hacer para modificar el obots.txt y que elimine esto. me podéis echar una mano?

Gracias
Hacer clic para expandir...
 
Última edición:
G

gowkster

Delta
Desde
6 Mar 2012
Mensajes
678
Muchas gracias, solo desabilitando la pagina y ya esta..... que facil si sabes como...:encouragement:

---------- Post agregado el 07-feb-2014 hora: 10:35 ----------

hora que lo busco.......

No tengo ningún robots.txt....:rolleyes:

Hay algún plug para generarlo... o lo hago a mano?
 
S

soniderot

Curioso
¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!
Desde
20 Ene 2014
Mensajes
12
no se si esto funcione un dia lo probare, tengo este codigo php haber si sirve:
// Ignore bots
if( strpos($_SERVER['HTTP_USER_AGENT'], 'Googlebot')!==FALSE ) return;
if( strpos($_SERVER['HTTP_USER_AGENT'], 'msnbot')!==FALSE ) return;
 
G

gowkster

Delta
Desde
6 Mar 2012
Mensajes
678
bueno, lo solucioné con esto:

Insertar CODE, HTML o PHP: 
User-Agent: *
Disallow: /moderation.php
Disallow: /ratethread.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /sendthread.php
Disallow: /usercp.php
Disallow: /usercp2.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /editpost.php
Disallow: /private.php
Disallow: /search.php
Disallow: /memberlist.php
Disallow: /showteam.php
Disallow: /calendar.php*


User-agent: dotbot 
Disallow: /

pero ahora me escupe este otro error:


Acceso denegado... tengo 27 errores como este:

Calendar-Calendario?year=2013&month=3&day=3&action=addevent

alguien sabe como eliminar este error?
 
DoctorPC

DoctorPC

1
Pi
SEO
Verificado
Verificación en dos pasos activada
Verificado por Whatsapp
¡Ha verificado su Paypal!
Verificado por Binance
Suscripción a IA
Desde
10 Dic 2010
Mensajes
6.080
Coloca la pantalla del error.

Saludos

gowkster dijo:
bueno, lo solucioné con esto:

Insertar CODE, HTML o PHP: 
User-Agent: *
Disallow: /moderation.php
Disallow: /ratethread.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /sendthread.php
Disallow: /usercp.php
Disallow: /usercp2.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /editpost.php
Disallow: /private.php
Disallow: /search.php
Disallow: /memberlist.php
Disallow: /showteam.php
Disallow: /calendar.php*


User-agent: dotbot 
Disallow: /

pero ahora me escupe este otro error:


Acceso denegado... tengo 27 errores como este:

Calendar-Calendario?year=2013&month=3&day=3&action=addevent

alguien sabe como eliminar este error?
Hacer clic para expandir...
 
G

gowkster

Delta
Desde
6 Mar 2012
Mensajes
678
DoctorPC dijo:
Coloca la pantalla del error.

Saludos
Hacer clic para expandir...

El error es en las herramientas de webmaster y es el siguiente:


1 Calendar-Calendario?year=2013&month=3&day=3&action=addevent 403 8/02/14

2 Calendar-Calendario?year=2012&month=6&day=23&action=addevent 403 8/02/14

3 Calendar-Calendario?year=2012&month=6&day=29&action=addevent 403 8/02/14

4 Calendar-Calendario?year=2012&month=6&day=2&action=addevent 403 8/02/14

5 Calendar-Calendario?year=2012&month=6&day=25&action=addevent 403 8/02/14

6 Calendar-Calendario?year=2012&month=6&day=26&action=addevent 403 8/02/14

7 Calendar-Calendario?year=2013&month=3&day=11&action=addevent 403 8/02/14

8 Calendar-Calendario?year=2012&month=6&day=7&action=addevent 403 8/02/14

9 Calendar-Calendario?year=2012&month=6&day=18&action=addevent 403 8/02/14

10 Calendar-Calendario?year=2014&month=10&day=28&action=addevent 403 8/02/14

11 Calendar-Calendario?year=2012&month=6&day=1&action=addevent 403 8/02/14

12 Calendar-Calendario?year=2012&month=6&day=30&action=addevent 403 8/02/14

13 Calendar-Calendario?year=2012&month=5&day=28&action=addevent 403 8/02/14

14 Calendar-Calendario?year=2012&month=6&day=9&action=addevent 403 8/02/14

15 Calendar-Calendario?year=2012&month=5&day=29&action=addevent 403 8/02/14

16 Calendar-Calendario?year=2012&month=6&day=8&action=addevent 403 8/02/14

17 Calendar-Calendario?year=2013&month=3&day=24&action=addevent 403 8/02/14

18 Calendar-Calendario?year=2012&month=6&day=12&action=addevent 403 8/02/14

19 Calendar-Calendario?year=2012&month=6&day=4&action=addevent 403 8/02/14

20 Calendar-Calendario?year=2012&month=6&day=13&action=addevent 403 8/02/14

21 Calendar-Calendario?year=2012&month=6&day=21&action=addevent 403 8/02/14

22 Calendar-Calendario?year=2012&month=6&day=6&action=addevent 403 8/02/14

23 Calendar-Calendario?year=2013&month=3&day=17&action=addevent 403 8/02/14

24 Calendar-Calendario?year=2013&month=3&day=21&action=addevent 403 8/02/14

25 Calendar-Calendario?year=2012&month=6&day=5&action=addevent 403 8/02/14

y como se en el roborts.txt ya bloquee el calendario.
 
DoctorPC

DoctorPC

1
Pi
SEO
Verificado
Verificación en dos pasos activada
Verificado por Whatsapp
¡Ha verificado su Paypal!
Verificado por Binance
Suscripción a IA
Desde
10 Dic 2010
Mensajes
6.080
La solución es simple.
Agrega la línea:

Insertar CODE, HTML o PHP: 
Disallow: /Calendar.php*

El robots.txt distingue entre mayúsculas y minúsculas.

Saludos!


gowkster dijo:
El error es en las herramientas de webmaster y es el siguiente:


1 Calendar-Calendario?year=2013&month=3&day=3&action=addevent 403 8/02/14

2 Calendar-Calendario?year=2012&month=6&day=23&action=addevent 403 8/02/14

3 Calendar-Calendario?year=2012&month=6&day=29&action=addevent 403 8/02/14

4 Calendar-Calendario?year=2012&month=6&day=2&action=addevent 403 8/02/14

5 Calendar-Calendario?year=2012&month=6&day=25&action=addevent 403 8/02/14

6 Calendar-Calendario?year=2012&month=6&day=26&action=addevent 403 8/02/14

7 Calendar-Calendario?year=2013&month=3&day=11&action=addevent 403 8/02/14

8 Calendar-Calendario?year=2012&month=6&day=7&action=addevent 403 8/02/14

9 Calendar-Calendario?year=2012&month=6&day=18&action=addevent 403 8/02/14

10 Calendar-Calendario?year=2014&month=10&day=28&action=addevent 403 8/02/14

11 Calendar-Calendario?year=2012&month=6&day=1&action=addevent 403 8/02/14

12 Calendar-Calendario?year=2012&month=6&day=30&action=addevent 403 8/02/14

13 Calendar-Calendario?year=2012&month=5&day=28&action=addevent 403 8/02/14

14 Calendar-Calendario?year=2012&month=6&day=9&action=addevent 403 8/02/14

15 Calendar-Calendario?year=2012&month=5&day=29&action=addevent 403 8/02/14

16 Calendar-Calendario?year=2012&month=6&day=8&action=addevent 403 8/02/14

17 Calendar-Calendario?year=2013&month=3&day=24&action=addevent 403 8/02/14

18 Calendar-Calendario?year=2012&month=6&day=12&action=addevent 403 8/02/14

19 Calendar-Calendario?year=2012&month=6&day=4&action=addevent 403 8/02/14

20 Calendar-Calendario?year=2012&month=6&day=13&action=addevent 403 8/02/14

21 Calendar-Calendario?year=2012&month=6&day=21&action=addevent 403 8/02/14

22 Calendar-Calendario?year=2012&month=6&day=6&action=addevent 403 8/02/14

23 Calendar-Calendario?year=2013&month=3&day=17&action=addevent 403 8/02/14

24 Calendar-Calendario?year=2013&month=3&day=21&action=addevent 403 8/02/14

25 Calendar-Calendario?year=2012&month=6&day=5&action=addevent 403 8/02/14

y como se en el roborts.txt ya bloquee el calendario.
Hacer clic para expandir...
 
Hay que estar conectado o registrado para responder aquí.
Arriba