Optimizando mi archivo robots.txt: ¡tratando de tener mas visibilidad en buscadores!

¡Hola a todos!

Quiero compartir con ustedes una inquietud que he tenido recientemente en relación a mi archivo robots.txt y cómo ha impactado en la indexación de mi blog. Al principio, dejé el archivo robots.txt tal como lo tenía Blogger, pero pasaron meses y no se indexó ni siquiera el título de mi blog. Después de investigar y hacer algunos cambios, finalmente tengo una configuración que me recomendó una página hace aproximadamente 15 días. Quiero compartirla con ustedes y obtener sus opiniones.

Aquí está mi archivo robots.txt actual:

vbnet
Copy code
User-agent: *
Disallow: /

Sitemap: https://tuguialegalycontable.blogspot.com/
Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500
Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml?redirect=false&start-index=501&max-results=500
Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml?redirect=false&start-index=1001&max-results=500
Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml?redirect=false&start-index=1501&max-results=500
Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml?redirect=false&start-index=2001&max-results=500
Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml?redirect=false&start-index=2501&max-results=500
Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml?redirect=false&start-index=3001&max-results=500

¿Qué opinan ustedes? ¿Es esta configuración adecuada o tienen alguna recomendación que pueda mejorar aún más la visibilidad de mi blog en los motores de búsqueda? ¡Espero sus comentarios y sugerencias!

Saludos y gracias de antemano.

Hoy he descargado una app para verificar la pagina y me manda error en el robots.txt
La aplicación se llama seo check.
Gracias

Yo lo hice en su día por default aunque cambie algunas cosas, y indexa si vas teniendo visitas .

claro, estás bloqueandolo porque tienes estás desautorizando

Deberias tenerlo así:

User-agent: *
Allow: /

Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml

Hacer clic para expandir...

Realmente no sé qué intentas hacer con eso. Un sitemap al final es un índice de links internos, sea el formato que sea.

Y yendo a las urls que muestras, es demasiado embarullado para un sitemap. Te aconsejo que le des una vuelta a todo.

Tampoco entiendo la intención de escalonar los sitemaps

Te agradezco sinceramente por tu tiempo y buena intención.

No tengo experiencia en este ámbito; todo lo que he logrado hasta ahora ha sido gracias a tutoriales en YouTube o recomendaciones recibidas. El sitio web o blog https://tuguialegalycontable.blogspot.com/ no se indexa en Google Search Console. Por el contrario, noto que se están eliminando gradualmente páginas indexadas.

Dado este problema, busqué en YouTube y en el motor de búsqueda de Google cómo generar el archivo Robots.txt de manera óptima para Blogger. Encontré una página que supuestamente genera este archivo de forma ideal para Blogger, y esto es lo que he implementado siguiendo sus recomendaciones.

Hoy recurro a ustedes en busca de ayuda para identificar posibles errores y corregirlos. Aspiro a que todos los motores de búsqueda puedan indexar esta página.

Una vez más, les agradezco mucho por dedicar su tiempo a esto.

Hace poco comencé a leer y entender mejor el uso de robots.txt y sitemaps, pero ahora bien, me di cuenta de que varias paginas a las cuales nunca hice nada por que indexaran lo hacian bastante rapido, a las 24 horas ya veia un par de link indexados y la verdad aun sigo sin entender el porque lo indexaban rapido jaja

He intentado diversas estrategias para mejorar la indexación en Google. Sin embargo, parece que no he tenido éxito hasta el momento, a pesar de no haber realizado cambios recientes en Google Search Console. Tengo en cuenta que Blogger puede presentar problemas de indexación y errores en su código.

Estoy considerando seriamente la posibilidad de migrar a otra plataforma para solucionar estos problemas y garantizar una indexación adecuada en los motores de búsqueda. Si alguien tiene experiencias o sugerencias sobre este tema, les agradecería compartirlas.

Saludos y gracias por compartir sus conocimientos.

podrias migrar al wordpress gratuito, ahi si que indexaras mas rapido, cuando alguna vez me gustaba crear paginas en wordpress, era mas facil que con blogspot, siempre he considerado a blogspot como una gran plataforma alli casi todos iniciamos, sin embargo por eso mismo es como decirlo mas artesanal, se necesita entender muchas cosas que ahora con el tiempo y la existencia de otras plataformas y gadgets, ya no son tan necesarios - lo digo en condicional-, en resumen si tu intencion es indexar mas rapido la mejor formula seria migrar a un wordpress.

si he pesado en migrar, el tema es el trabajo realizado con https://tuguialegalycontable.blogspot.com/, además no he encontrado como migrar el contenido, además he leído que las plantillas no son compatibles.
La verdad que si no se intenta no se sabrá.
Gracias pro sus apreciaciones.

Kcho26 dijo:

si he pesado en migrar, el tema es el trabajo realizado con https://tuguialegalycontable.blogspot.com/, además no he encontrado como migrar el contenido, además he leído que las plantillas no son compatibles.
La verdad que si no se intenta no se sabrá.
Gracias pro sus apreciaciones.

Hacer clic para expandir...

Si me permites un consejo, quedarse con algo que tiene limitaciones solo por que hay cosas que no son compatibles es un paso atrás.

Si quieres una web profesional y donde además ofrezcas tus servicios, vas a necesitar un dominio y un hosting. Banahosting estan al alcance de casi cualquiera.

Ya solo un dominio y no un subdominio de blogger va a aportar presencia y confianza al usuario.

Para importar el contenido tienes una opción automática de exportar en XML desde blogger y wordpress te permite importar desde un XML de blogger. Que tendrás que configurar un nuevo theme, plugins, redirecciones... etc... Además de que igual alguna parte se pierde y tendrás que resubirla/modificarla... Si, no es algo que si no estas acostumbrado puedas hacer en dos minutos, pero merece la pena en temas de escalabilidad, personalización y presencia.

otra cosa que tambien te aconsejo, es que no pongas tantos links en los posts, porque el robot de google te puede penalizar la pagina, y lo puede ver como spam, dado que aunque lo escribas , se podria evidenciar no tan natural, y eso puede ser capital en la indexación de los post de vuestro sitio. slds.

OK

webmaaron dijo:

Si me permites un consejo, quedarse con algo que tiene limitaciones solo por que hay cosas que no son compatibles es un paso atrás.

Si quieres una web profesional y donde además ofrezcas tus servicios, vas a necesitar un dominio y un hosting. Banahosting estan al alcance de casi cualquiera.

Ya solo un dominio y no un subdominio de blogger va a aportar presencia y confianza al usuario.

Para importar el contenido tienes una opción automática de exportar en XML desde blogger y wordpress te permite importar desde un XML de blogger. Que tendrás que configurar un nuevo theme, plugins, redirecciones... etc... Además de que igual alguna parte se pierde y tendrás que resubirla/modificarla... Si, no es algo que si no estas acostumbrado puedas hacer en dos minutos, pero merece la pena en temas de escalabilidad, personalización y presencia.

Hacer clic para expandir...

Gracias. Lo tendré en cuenta.
Mientras el blog no facture no invertiré en ello.
Saludos

Me pasa algo parecido. Cada vez tengo menos páginas indexadas. Si busco mi sitio en Google solo me aparecen 12 entradas. Antes eran más de 30,llegaba hasta la tercera página. Algo raro que pasa es que mi blog tiene 84 entradas y Seach Console me dice que tengo 41 entradas indexadas y 87 sin indexar. No dan los números. Últimamente ya no me indexa ninguna entrada nueva. Estoy pensando en cambiar a Wordpress, que al parecer indexa mejor.

Estimado amigo, has encontrado un formato antiguo en lo correspondiente a configurar el archivo aunque se puede acceder, lo más puntual y claro es enfocarse a dar a conocer los sitemaps tanto de tus paginas creadas y de los post y esto lo haces con la sentencias que te muestro abajo; claro esto no garantiza que se indexen las entradas, actualmente existe un problema con ello que desde ya como a dado a conocer el compañero @david limonche realizar el reporte y este debe ser masivo, de ser posible todos los usuarios de blogger de forobeta, serviría para que lo solucionen y claro que no te van a responder, en el mejor de los casos solucionen el problema de redireccionamiento y de las url canónicas, que en parte generan problemas para indexar.

En respuesta al porque implementar estas sentencias, las primeras servirán para deshabilitar alguna entrada o algún contenido dentro de blogger, en mi caso yo deshabilito toda búsqueda por medio de search, la segunda parte es para dar a conocer tus sitemaps a google y de alguna manera intentar influenciar la indexación del contenido.

Si es cierto que últimamente es más tedioso en blogger indexar y sobre todo mantener esa indexación tanto en sitio como en artículos, claro que blogger es una plataforma para iniciar por lo que es gratuita, pero wordpress es más avanzado y manejable y puedes instalar plugings que van a estar enviado y actualizando el envío de tus entradas hasta lograr que se indexen, lo que puedes hacer en blogger de forma manual pero es más tedioso, una forma que ayuda a ello es un buen enlazado interno así como externo por un lado y por el otro estar enviado los sitemaps mediante Search console; clro esta si optas por invertir y migrar a wordpress el detalle mayor seria mantener el diseño visual de tu blog, y esto es solucionable buscando las miles de plantillas gratuitas existentes o usar una distinta para darle otros aires más modernos, ya que la parte de copiar el contenido, este lo puedes descargar desde el mismo blogger desde Administrar el blog/ Crear una copia de seguridad del contenido con el cual crearas un archivo xml, el cual podrás desde wordpress importar todo el contenido publicado, esto lo puedes encontrar normal en algún video en youtube para hacerlo más practico si decides migrar, no entiendo como no has encontrado ello, aqui te comparto un video de un usuario de aquí
Lo que si podría decirte es que mires el contenido del cual te estas informando, ya que puede ser contenido antiguo o desactualizado.

# Blogger Sitemap generated on 2023.10.05
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search

Allow: /

# Sitemap Paginas
Sitemap: https://www. tuweb .com/sitemap-pages.xml

# Sitemap Entradas
Sitemap: https://www. tu web.com/sitemap.xml

Bueno, después de algunas semanas Google se inmutó en revisar mi blog, pero como ya no es de extrañar nada, de indexar nada.
Hoy manada el error
Search Console ha detectado que hay páginas de tu sitio que no se están indexando debido al motivo siguiente

el archivo robots.txt es

User-agent: *
Disallow: /search

Disallow: /*.html?m=1$
Disallow: /*?m=1$

Allow: /

Sitemap: https://tuguialegalycontable.blogspot.com/sitemap.xml
Sitemap: https://tuguialegalycontable.blogspot.com/sitemap-pages.xml
Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500
Sitemap: https://tuguialegalycontable.blogspot.com/atom.xml?redirect=false&start-index=501&max-results=500

no sé si borrar html?m=1$m por lo menos esta vez no me salió el error de redireccionamiento.

Espero poder monetizar pronto o tendré que dedicar mi tiempo libre a otra cosa-

la indexacion esta muy dificil para dominios que no son de pago, parece que en la ultima actualizacion se borro la autoridad de varios sitios, lo he visto en varios blogs.