Ayuda, Problema con robots.txt y ubicación de SITEMAP

Hola amigos de foro, tengo un problema con el archivo robots.txt

Mi web está en WP y tiene certificado SSL https.

Al escribir la url en el navegador con http o www automaticamente me redirecciona a https, hasta ahí todo está bien.

El problema es cuando escribo en el navegador:

https://midominio/robots.txt me aparece el archivo robots.txt que ya lo modifique para que ahí aparezca la url de la ubicacion de mi sitemap PERO NO APARECE LA URL DE LA UBICACIÓN DEL SITEMAP.

Pero, si escribo la url de mi sitio así solo con http:
http://midominio/robots.txt no redirecciona a https
y si aparece la url de la ubicación del sitemap.

Ahora si escribo la url con HTTPS pero le agrego www
https://www.midominios/robots.txt también aparece la ubicación del sitemap.xml

Mi pregunta es... ¿por qué si después de modificar mi archivo robots.txt agregando la ubicación de mi sitemap.xml, No parece lo que modifique cuando escribo:

https://midominio/robots.txt

????
Saludos y espero que alguien me pueda ayudar.

Yo creo que la tienes que enviar el robots.txt a google en search console para que actualice, algo así me pasaba modificada el robots y al entrar al robots.txt seguía igual que antes sea como sea http,s o www y sin pero al enviarla a search console Pum al entrar ya estaba modificado no se si se resuelve el problema amigo

Me suscribo, tengo un problema similar

ivan455 dijo:

Yo creo que la tienes que enviar el robots.txt a google en search console para que actualice, algo así me pasaba modificada el robots y al entrar al robots.txt seguía igual que antes sea como sea http,s o www y sin pero al enviarla a search console Pum al entrar ya estaba modificado no se si se resuelve el problema amigo

Hacer clic para expandir...

Voy a intentarlo amigo, lo raro es que las modificaciones que hago si se aplican en todo, menos cuando con la url con https y sin los www.
Saludos.

Robots.txt se edita en el servidor, por medio de ftp. O por su file manager en caso que el hosting lo permite.
Y un sitemap se pone en paginas con encima de 100 puntos de menú. No trae ningún beneficio tenerlos con menos. Menos aun si tiene una buena estructura de su enlazamiento interno. Ultimo siendo un punto de posicionamiento en la mayoría de los buscadores.

Si no saben como editar el Robots.txt cobro €5 por edición. 🙂

Primero yo haria la redireccion por htaccess y luego verificaria.
TEST:
A mi me huele que es un tema de cache, haber te explico.

A mi me pasa que modifico el robots.txt y mando a el test de search console y no detecta el cambio, luego me voy manualmente al robots y tampoco aparece el **** cambio, entonces me toca ir a incógnito y si aparece.

Podéis probar haciendo un "empty cache and hard reload", para eso teneis que abrir la barrita de opciones de desarrollo que usualmente es SHIT + CONTROL + I y luego mantienes presionando el click en donde recargas... sino busca en google.