Cómo crear archivo robot.txt en WordPress

msfrek23 · 1 Oct 2013

buenas amigos de forobeta,queria saber como crear el robot.txt para wordpress y si alguien tiene una buena configuracion de el para ponerlo en el mio,

queria saber si al no tener robot.txt es la causa que en algunos post se me indexen cosas como RSS Feed | Comments RSS Feed,"search","login" y cosas asi...

saludos

domox · 1 Oct 2013

Usa el SEO by Yoast y te resolverá lo del search, login, coments rss, enlace canonical etc. El plugin creará un meta keyords donde indica si ese contenido que mencionaste se indexa o no así: <meta name="robots" content="noindex,follow"> lo cual también puedes poner manual en caso de que sepas identificar cada tipo de url en tu wordpress.

msfrek23 · 1 Oct 2013

domox dijo:
Usa el SEO by Yoast y te resolverá lo del search, login, coments rss, enlace canonical etc. El plugin creará un meta keyords donde indica si ese contenido que mencionaste se indexa o no así: <meta name="robots" content="noindex,follow"> lo cual también puedes poner manual en caso de que sepas identificar cada tipo de url en tu wordpress.

gracias por responder en este momento estoy usando all one seo pack,y estaba por probar seo by yoast en otra web,en esta web que tengo el problema la tengo bien posicionada,mi pregunta es si saco el plugsin all one seo y lo cambio por el yoast voy a perder posiciones por tocar estos plugins,cambio algo del seo??

domox · 1 Oct 2013

nop el seo by yoast puede importar la data del all in one seo y todo te va a funcionar igual pero el seo by yoast tiene unas cuantas herramientas a la hora de publicar que te ayudaran a redactar un post con mejor contenido y mejores keywords.

msfrek23 · 20 Oct 2013

domox dijo:
Usa el SEO by Yoast y te resolverá lo del search, login, coments rss, enlace canonical etc. El plugin creará un meta keyords donde indica si ese contenido que mencionaste se indexa o no así: <meta name="robots" content="noindex,follow"> lo cual también puedes poner manual en caso de que sepas identificar cada tipo de url en tu wordpress.

buenas!!donde esta la opcion para que se puede hacer lo que dices y no me indexe rss login,etc...gracias

TheZDownload · 20 Oct 2013

aquí te dejo la mía y me esta funcionando sin problemas:

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /comments
Disallow: /author
Disallow: /category
Disallow: /feed/
Disallow: /trackback/
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.php$
Sitemap: tuweb.com

Agradecer no cuesta nada :encouragement:

nefeli · 21 Oct 2013

Ojo [MENTION=47135]TheZDownload[/MENTION], con eso estás evitando que los buscadores indexen los archivos de wordpress, pero estás permitiendo a algunas botnets identificar tu sitio como wordpress (muchos ataques nuevos se basan en descargar el robot.txt, buscar cadenas predeterminadas y detectar así qué plataformas se utilizan y atacarlas).

TheZDownload · 21 Oct 2013

nefeli dijo:
Ojo [MENTION=47135]TheZDownload[/MENTION], con eso estás evitando que los buscadores indexen los archivos de wordpress, pero estás permitiendo a algunas botnets identificar tu sitio como wordpress (muchos ataques nuevos se basan en descargar el robot.txt, buscar cadenas predeterminadas y detectar así qué plataformas se utilizan y atacarlas).

Gracias lo tomare en cuenta :encouragement: