Problemas de desindexación y error 403 en Google Search Console

Pues resulta que ayer Google me ha desindexado una o varias páginas, he mirado en robots.txt y en htaccess y todo parece normal,

Sin embargo en search console los sitemaps salen como si no se pudieran encontrar o rastrear, y la URL importante en cuestión me sale esto

He probado con otra URL en inspección de URLS y me sale en verde, pero esta me sale como si se hubiera bloqueado.

También me he percatado que google no encuentra el archivo ads.txt

¿Qué puede ser? Tengo el plugin simple ssl

snacky dijo:

Pues resulta que ayer Google me ha desindexado una o varias páginas, he mirado en robots.txt y en htaccess y todo parece normal,

Sin embargo en search console los sitemaps salen como si no se pudieran encontrar o rastrear, y la URL importante en cuestión me sale esto

He probado con otra URL en inspección de URLS y me sale en verde, pero esta me sale como si se hubiera bloqueado.

También me he percatado que google no encuentra el archivo ads.txt

¿Qué puede ser? Tengo el plugin simple ssl

Ver el archivo adjunto 625000

Ver el archivo adjunto 625002

Hacer clic para expandir...

¿Cuál es la url?
¿Tu sitio tiene muchas visitas?
¿En que hosting esta tu sitio?

David Morales dijo:

¿Cuál es la url?
¿Tu sitio tiene muchas visitas?
¿En que hosting esta tu sitio?

Hacer clic para expandir...

Esta alojada en IONOS

Por lo que he visto, después de lo que pasó ayer, ha caído el trafico en un 25%, no se si a parte de esa URL hhabrán desindexado mas...

Haciendo varios tests, parece que otras URL si las agarra sin error el Search Console

Sin embargo, me parece extraño que se haya juntado todo, error en ads.txt en crawleo de los sitemap, lo de la desindexación de esa URl... etc.

Estaba en top 3, y tenia visitas moderadas esa URL en específico, unas 700-1000 diarias

He borrado los sitemap y vuelto a enviar y me sale esto.

Alguien sabe que puede ser?

David Morales dijo:

¿Cuál es la url?
¿Tu sitio tiene muchas visitas?
¿En que hosting esta tu sitio?

Hacer clic para expandir...

Pues resulta que he usado un plugin para cambiar el user agent, y he puesto el del crawler de google y boom

IONOS metiendo adsense en el error 403 que solo se muestra al robot. Ahora llamare para que me den explicaciones

Los mierdas de IONOS no saben nada jajajajaj que risa. Me piro

snacky dijo:

Los mierdas de IONOS no saben nada jajajajaj que risa. Me piro

Hacer clic para expandir...

Te recomiendo Banahosting, el Problema es tu hosting yo con 1and1 ni Dominios compraría.
Tiene un limite de recursos, cuando los excedes suele marcar errores
Entre ellos este 403 dependiendo su configuración

David Morales dijo:

Te recomiendo Banahosting, el Problema es tu hosting yo con 1and1 ni Dominios compraría.
Tiene un limite de recursos, cuando los excedes suele marcar errores
Entre ellos este 403 dependiendo su configuración

Hacer clic para expandir...

Sí, de hecho subí el plan de rendimiento y el performance esta bien.

Pero el problema es que tienen alguna config en su server que bloquea los bots de Google, he hecho muchas pruebas y es así.

Porque en otro host compartido de dentro de IONOS no ocurre, es ese en específico.

Encima el tío del teléfono va de experto hablando con tecnicismos, parecía un político, hablaba mucho pero no decía nada. Mas bien parecía una herramienta de relleno, no decía nada útil. es mas todo erróneo.

Ya estoy buscando otro host, Banahosting ya lo usé anteriormente, pero quiero que tenga una respuesta de servidor muy rápida para EU

snacky dijo:

Sí, de hecho subí el plan de rendimiento y el performance esta bien.

Pero el problema es que tienen alguna config en su server que bloquea los bots de Google, he hecho muchas pruebas y es así.

Porque en otro host compartido de dentro de IONOS no ocurre, es ese en específico.

Encima el tío del teléfono va de experto hablando con tecnicismos, parecía un político, hablaba mucho pero no decía nada. Mas bien parecía una herramienta de relleno, no decía nada útil. es mas todo erróneo.

Ya estoy buscando otro host, Banahosting ya lo usé anteriormente, pero quiero que tenga una respuesta de servidor muy rápida para EU

Hacer clic para expandir...

Usa un CDN, Tendrás la calidad de banahosting y el tiempo de respuesta que desees.

configura tu robots asi :

# Bloqueo basico para todos los bots y crawlers
User-agent: *
Allow: /wp-content/uploads/*
Allow: /wp-content/*.js
Allow: /wp-content/*.css
Allow: /wp-includes/*.js
Allow: /wp-includes/*.css
Disallow: /cgi-bin
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /wp-includes/
Disallow: /*/attachment/
Disallow: /tag/*/page/
Disallow: /tag/*/feed/
Disallow: /page/
Disallow: /comments/
Disallow: /xmlrpc.php
Disallow: /?attachment_id*

# Bloqueo de las URL dinamicas
Disallow: /*?


#Bloqueo de busquedas
User-agent: *
Disallow: /?s=
Disallow: /search


# Bloqueo de trackbacks
User-agent: *
Disallow: /trackback
Disallow: /*trackback
Disallow: /*trackback*
Disallow: /*/trackback


# Bloqueo de feeds para crawlers
User-agent: *
Allow: /feed/$
Disallow: /feed/
Disallow: /comments/feed/
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$


# Ralentizamos algunos bots
User-agent: noxtrumbot
Crawl-delay: 20
User-agent: msnbot
Crawl-delay: 20
User-agent: Slurp
Crawl-delay: 20


# Bloqueo de bots y crawlers poco utiles
User-agent: MSIECrawler
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: libwww
Disallow: /
User-agent: Orthogaffe
Disallow: /
User-agent: UbiCrawler
Disallow: /
User-agent: DOC
Disallow: /
User-agent: Zao
Disallow: /
User-agent: sitecheck.internetseer.com
Disallow: /
User-agent: Zealbot
Disallow: /
User-agent: MSIECrawler
Disallow: /
User-agent: SiteSnagger
Disallow: /
User-agent: WebStripper
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: Fetch
Disallow: /
User-agent: Offline Explorer
Disallow: /
User-agent: Teleport
Disallow: /
User-agent: TeleportPro
Disallow: /
User-agent: WebZIP
Disallow: /
User-agent: linko
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: Xenu
Disallow: /
User-agent: larbin
Disallow: /
User-agent: libwww
Disallow: /
User-agent: ZyBORG
Disallow: /
User-agent: Download Ninja
Disallow: /
User-agent: wget
Disallow: /
User-agent: grub-client
Disallow: /
User-agent: k2spider
Disallow: /
User-agent: NPBot
Disallow: /
User-agent: WebReaper
Disallow: /


# Previene problemas de recursos bloqueados en Google Webmaster Tools
User-Agent: Googlebot
Allow: /*.css$
Allow: /*.js$

DiosDelSeo dijo:

configura tu robots asi :

# Bloqueo basico para todos los bots y crawlers
User-agent: *
Allow: /wp-content/uploads/*
Allow: /wp-content/*.js
Allow: /wp-content/*.css
Allow: /wp-includes/*.js
Allow: /wp-includes/*.css
Disallow: /cgi-bin
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /wp-includes/
Disallow: /*/attachment/
Disallow: /tag/*/page/
Disallow: /tag/*/feed/
Disallow: /page/
Disallow: /comments/
Disallow: /xmlrpc.php
Disallow: /?attachment_id*

# Bloqueo de las URL dinamicas
Disallow: /*?


#Bloqueo de busquedas
User-agent: *
Disallow: /?s=
Disallow: /search


# Bloqueo de trackbacks
User-agent: *
Disallow: /trackback
Disallow: /*trackback
Disallow: /*trackback*
Disallow: /*/trackback


# Bloqueo de feeds para crawlers
User-agent: *
Allow: /feed/$
Disallow: /feed/
Disallow: /comments/feed/
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$


# Ralentizamos algunos bots
User-agent: noxtrumbot
Crawl-delay: 20
User-agent: msnbot
Crawl-delay: 20
User-agent: Slurp
Crawl-delay: 20


# Bloqueo de bots y crawlers poco utiles
User-agent: MSIECrawler
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: libwww
Disallow: /
User-agent: Orthogaffe
Disallow: /
User-agent: UbiCrawler
Disallow: /
User-agent: DOC
Disallow: /
User-agent: Zao
Disallow: /
User-agent: sitecheck.internetseer.com
Disallow: /
User-agent: Zealbot
Disallow: /
User-agent: MSIECrawler
Disallow: /
User-agent: SiteSnagger
Disallow: /
User-agent: WebStripper
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: Fetch
Disallow: /
User-agent: Offline Explorer
Disallow: /
User-agent: Teleport
Disallow: /
User-agent: TeleportPro
Disallow: /
User-agent: WebZIP
Disallow: /
User-agent: linko
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: Xenu
Disallow: /
User-agent: larbin
Disallow: /
User-agent: libwww
Disallow: /
User-agent: ZyBORG
Disallow: /
User-agent: Download Ninja
Disallow: /
User-agent: wget
Disallow: /
User-agent: grub-client
Disallow: /
User-agent: k2spider
Disallow: /
User-agent: NPBot
Disallow: /
User-agent: WebReaper
Disallow: /


# Previene problemas de recursos bloqueados en Google Webmaster Tools
User-Agent: Googlebot
Allow: /*.css$
Allow: /*.js$

Hacer clic para expandir...

Ahora mismo tengo lo básico de wp

Pero he hecho una prueba, he clonado el sitio con todos los archivos y base de datos igual en otro hosting de mismo IONOS y funciona..

Por lo que es culpa de el servidor o alguna movida que tendrán montada IONOS

Al final me he pillado un dedicado y ahora lo montare a ver si se soluciona