Problemas de desindexación y error 403 en Google Search Console

  • Autor Autor snacky
  • Fecha de inicio Fecha de inicio
snacky

snacky

Gamma
Verificación en dos pasos activada
Verificado por Whatsapp
¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!
Pues resulta que ayer Google me ha desindexado una o varias páginas, he mirado en robots.txt y en htaccess y todo parece normal,

Sin embargo en search console los sitemaps salen como si no se pudieran encontrar o rastrear, y la URL importante en cuestión me sale esto

He probado con otra URL en inspección de URLS y me sale en verde, pero esta me sale como si se hubiera bloqueado.

También me he percatado que google no encuentra el archivo ads.txt

¿Qué puede ser? Tengo el plugin simple ssl

1635660445410.png


1635661391854.png


1635675873277.webp
 
Última edición:
Pues resulta que ayer Google me ha desindexado una o varias páginas, he mirado en robots.txt y en htaccess y todo parece normal,

Sin embargo en search console los sitemaps salen como si no se pudieran encontrar o rastrear, y la URL importante en cuestión me sale esto

He probado con otra URL en inspección de URLS y me sale en verde, pero esta me sale como si se hubiera bloqueado.

También me he percatado que google no encuentra el archivo ads.txt

¿Qué puede ser? Tengo el plugin simple ssl

Ver el archivo adjunto 625000

Ver el archivo adjunto 625002
¿Cuál es la url?
¿Tu sitio tiene muchas visitas?
¿En que hosting esta tu sitio?
 
¿Cuál es la url?
¿Tu sitio tiene muchas visitas?
¿En que hosting esta tu sitio?

Esta alojada en IONOS

Por lo que he visto, después de lo que pasó ayer, ha caído el trafico en un 25%, no se si a parte de esa URL hhabrán desindexado mas...

Haciendo varios tests, parece que otras URL si las agarra sin error el Search Console

Sin embargo, me parece extraño que se haya juntado todo, error en ads.txt en crawleo de los sitemap, lo de la desindexación de esa URl... etc.

Estaba en top 3, y tenia visitas moderadas esa URL en específico, unas 700-1000 diarias
 
He borrado los sitemap y vuelto a enviar y me sale esto.

Alguien sabe que puede ser?

1635675834198.webp
 
¿Cuál es la url?
¿Tu sitio tiene muchas visitas?
¿En que hosting esta tu sitio?

Pues resulta que he usado un plugin para cambiar el user agent, y he puesto el del crawler de google y boom

IONOS metiendo adsense en el error 403 que solo se muestra al robot. Ahora llamare para que me den explicaciones

omegalol.webp
 
Los mierdas de IONOS no saben nada jajajajaj que risa. Me piro
 
Los mierdas de IONOS no saben nada jajajajaj que risa. Me piro
Te recomiendo Banahosting, el Problema es tu hosting yo con 1and1 ni Dominios compraría.
Tiene un limite de recursos, cuando los excedes suele marcar errores
Entre ellos este 403 dependiendo su configuración
 
Te recomiendo Banahosting, el Problema es tu hosting yo con 1and1 ni Dominios compraría.
Tiene un limite de recursos, cuando los excedes suele marcar errores
Entre ellos este 403 dependiendo su configuración

Sí, de hecho subí el plan de rendimiento y el performance esta bien.

Pero el problema es que tienen alguna config en su server que bloquea los bots de Google, he hecho muchas pruebas y es así.

Porque en otro host compartido de dentro de IONOS no ocurre, es ese en específico.

Encima el tío del teléfono va de experto hablando con tecnicismos, parecía un político, hablaba mucho pero no decía nada. Mas bien parecía una herramienta de relleno, no decía nada útil. es mas todo erróneo.

Ya estoy buscando otro host, Banahosting ya lo usé anteriormente, pero quiero que tenga una respuesta de servidor muy rápida para EU
 
Sí, de hecho subí el plan de rendimiento y el performance esta bien.

Pero el problema es que tienen alguna config en su server que bloquea los bots de Google, he hecho muchas pruebas y es así.

Porque en otro host compartido de dentro de IONOS no ocurre, es ese en específico.

Encima el tío del teléfono va de experto hablando con tecnicismos, parecía un político, hablaba mucho pero no decía nada. Mas bien parecía una herramienta de relleno, no decía nada útil. es mas todo erróneo.

Ya estoy buscando otro host, Banahosting ya lo usé anteriormente, pero quiero que tenga una respuesta de servidor muy rápida para EU
Usa un CDN, Tendrás la calidad de banahosting y el tiempo de respuesta que desees.
 
configura tu robots asi :

# Bloqueo basico para todos los bots y crawlers
User-agent: *
Allow: /wp-content/uploads/*
Allow: /wp-content/*.js
Allow: /wp-content/*.css
Allow: /wp-includes/*.js
Allow: /wp-includes/*.css
Disallow: /cgi-bin
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /wp-includes/
Disallow: /*/attachment/
Disallow: /tag/*/page/
Disallow: /tag/*/feed/
Disallow: /page/
Disallow: /comments/
Disallow: /xmlrpc.php
Disallow: /?attachment_id*

# Bloqueo de las URL dinamicas
Disallow: /*?


#Bloqueo de busquedas
User-agent: *
Disallow: /?s=
Disallow: /search


# Bloqueo de trackbacks
User-agent: *
Disallow: /trackback
Disallow: /*trackback
Disallow: /*trackback*
Disallow: /*/trackback


# Bloqueo de feeds para crawlers
User-agent: *
Allow: /feed/$
Disallow: /feed/
Disallow: /comments/feed/
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$


# Ralentizamos algunos bots
User-agent: noxtrumbot
Crawl-delay: 20
User-agent: msnbot
Crawl-delay: 20
User-agent: Slurp
Crawl-delay: 20


# Bloqueo de bots y crawlers poco utiles
User-agent: MSIECrawler
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: libwww
Disallow: /
User-agent: Orthogaffe
Disallow: /
User-agent: UbiCrawler
Disallow: /
User-agent: DOC
Disallow: /
User-agent: Zao
Disallow: /
User-agent: sitecheck.internetseer.com
Disallow: /
User-agent: Zealbot
Disallow: /
User-agent: MSIECrawler
Disallow: /
User-agent: SiteSnagger
Disallow: /
User-agent: WebStripper
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: Fetch
Disallow: /
User-agent: Offline Explorer
Disallow: /
User-agent: Teleport
Disallow: /
User-agent: TeleportPro
Disallow: /
User-agent: WebZIP
Disallow: /
User-agent: linko
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: Xenu
Disallow: /
User-agent: larbin
Disallow: /
User-agent: libwww
Disallow: /
User-agent: ZyBORG
Disallow: /
User-agent: Download Ninja
Disallow: /
User-agent: wget
Disallow: /
User-agent: grub-client
Disallow: /
User-agent: k2spider
Disallow: /
User-agent: NPBot
Disallow: /
User-agent: WebReaper
Disallow: /


# Previene problemas de recursos bloqueados en Google Webmaster Tools
User-Agent: Googlebot
Allow: /*.css$
Allow: /*.js$
 
configura tu robots asi :

# Bloqueo basico para todos los bots y crawlers
User-agent: *
Allow: /wp-content/uploads/*
Allow: /wp-content/*.js
Allow: /wp-content/*.css
Allow: /wp-includes/*.js
Allow: /wp-includes/*.css
Disallow: /cgi-bin
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /wp-includes/
Disallow: /*/attachment/
Disallow: /tag/*/page/
Disallow: /tag/*/feed/
Disallow: /page/
Disallow: /comments/
Disallow: /xmlrpc.php
Disallow: /?attachment_id*

# Bloqueo de las URL dinamicas
Disallow: /*?


#Bloqueo de busquedas
User-agent: *
Disallow: /?s=
Disallow: /search


# Bloqueo de trackbacks
User-agent: *
Disallow: /trackback
Disallow: /*trackback
Disallow: /*trackback*
Disallow: /*/trackback


# Bloqueo de feeds para crawlers
User-agent: *
Allow: /feed/$
Disallow: /feed/
Disallow: /comments/feed/
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$


# Ralentizamos algunos bots
User-agent: noxtrumbot
Crawl-delay: 20
User-agent: msnbot
Crawl-delay: 20
User-agent: Slurp
Crawl-delay: 20


# Bloqueo de bots y crawlers poco utiles
User-agent: MSIECrawler
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: libwww
Disallow: /
User-agent: Orthogaffe
Disallow: /
User-agent: UbiCrawler
Disallow: /
User-agent: DOC
Disallow: /
User-agent: Zao
Disallow: /
User-agent: sitecheck.internetseer.com
Disallow: /
User-agent: Zealbot
Disallow: /
User-agent: MSIECrawler
Disallow: /
User-agent: SiteSnagger
Disallow: /
User-agent: WebStripper
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: Fetch
Disallow: /
User-agent: Offline Explorer
Disallow: /
User-agent: Teleport
Disallow: /
User-agent: TeleportPro
Disallow: /
User-agent: WebZIP
Disallow: /
User-agent: linko
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: Xenu
Disallow: /
User-agent: larbin
Disallow: /
User-agent: libwww
Disallow: /
User-agent: ZyBORG
Disallow: /
User-agent: Download Ninja
Disallow: /
User-agent: wget
Disallow: /
User-agent: grub-client
Disallow: /
User-agent: k2spider
Disallow: /
User-agent: NPBot
Disallow: /
User-agent: WebReaper
Disallow: /


# Previene problemas de recursos bloqueados en Google Webmaster Tools
User-Agent: Googlebot
Allow: /*.css$
Allow: /*.js$


Ahora mismo tengo lo básico de wp

Pero he hecho una prueba, he clonado el sitio con todos los archivos y base de datos igual en otro hosting de mismo IONOS y funciona..

Por lo que es culpa de el servidor o alguna movida que tendrán montada IONOS

Al final me he pillado un dedicado y ahora lo montare a ver si se soluciona
 
Atrás
Arriba