Guia de Robots.txt para otimizar SEO no WordPress

  • Autor Autor DUQUEredes
  • Data de início Data de início
Este tópico foi traduzido automaticamente do espanhol. Ver original
Excelente contribuição!! :encouragement:
 
Agradeço.. gostaria de saber se é necessário bloquear as "pages" da página... melhora em algo?
 
Muito obrigado por esta contribuição, servirá muito para os meus sites. Um abraço!
 
Olá, muito obrigado pela contribuição. Preciso de ajuda, pessoal: copio todo o arquivo TXT em um bloco de notas no Windows, depois coloco o nome robots.txt e subo para o meu servidor web, copio a URL e colo na ferramenta de Webmaster do Google na seção de rastreamento.

Se é assim, por favor me digam, ou se não, me digam como seria.
Obrigado

Enviado do meu GT-I9300-La Maquina. usando Tapatalk 2
 
ok, mas não precisa enviar no webmaster, também veja se você quer bloquear as tags como dizem no início
Olá, muito obrigado pela contribuição. Preciso de ajuda, pessoal: copio todo o arquivo TXT em um bloco de notas no Windows, depois coloco o nome robots.txt e subo para o meu servidor web, copio a URL e colo na ferramenta de Webmaster do Google na seção de rastreamento.

Se é assim, por favor me digam, ou se não, me digam como seria.
Obrigado

Enviado do meu GT-I9300-La Maquina. usando Tapatalk 2
 
ok, mas não precisa enviar no webmaster, também veja se você quer bloquear as tags como dizem no início

Obrigado nicorto, e se eu não enviar ao webmaster, como as aranhas do Google vão perceber? Seria apenas subindo para o meu servidor? Se for assim, você poderia me dizer onde colocá-lo exatamente no meu servidor?
Sobre as tags, seria bom ou não indexá-las?

Enviado do meu GT-I9300-La Maquina. usando Tapatalk 2
 
que eu me lembre, não precisa nem tem onde enviar no wb, suba para o diretório principal, o necessário é o sitemap.xml. Sobre as tags, depende: se se repetem, então não vale a pena porque vai gerar conteúdo duplicado
Obrigado nicorto, e se eu não enviar ao webmaster, como as aranhas do Google vão perceber? Seria apenas subindo para o meu servidor? Se for assim, você poderia me dizer onde colocá-lo exatamente no meu servidor?
Sobre as tags, seria bom ou não indexá-las?

Enviado do meu GT-I9300-La Maquina. usando Tapatalk 2
 
que eu me lembre, não precisa nem tem onde enviar no wb, suba para o diretório principal, o necessário é o sitemap.xml. Sobre as tags, depende: se se repetem, então não vale a pena porque vai gerar conteúdo duplicado


obrigado nicorto, uma coisinha a mais: o criador do arquivo robots.txt coloca como advertência "cuidado com o copy paste", a que ele se refere com isso, ou o que eu tenho que fazer.
 
que você preste atenção no que quer adicionar para bloquear ou não :encouragement:
obrigado nicorto, uma coisinha a mais: o criador do arquivo robots.txt coloca como advertência "cuidado com o copy paste", a que ele se refere com isso, ou o que eu tenho que fazer.


---------- Post adicionado em 22-abr-2013 hora: 12:32 ----------

se te serve de algo, eu tenho assim, não bloqueio as tags, a ter em conta que se se repetem é melhor bloqueá-las

Inserir CODE, HTML ou PHP:
Sitemap: http://www.sitio.com/sitemap.xml

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

# digg mirror
User-agent: duggmirror
Disallow: /

# global
User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /*?
Disallow: /wp-login.php
Allow: /wp-content/uploads/
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.php$
Disallow: /author/
Disallow: /wp-
Disallow: /?s=
Disallow: /search
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
User-agent: MSIECrawler
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Microsoft.URL.Control
Disallow: /

User-agent: libwww
Disallow: /

User-agent: noxtrumbot
Crawl-delay: 150

User-agent: msnbot
Crawl-delay: 130

User-agent: Slurp
Crawl-delay: 110

User-agent: Mediapartners-Google
Allow: /*
 
que você preste atenção no que quer adicionar para bloquear ou não :encouragement:


---------- Post adicionado em 22-abr-2013 hora: 12:32 ----------

se te serve de algo, eu tenho assim, não bloqueio as tags a ter em conta se se repetirem melhor bloqueá-las

Inserir CODE, HTML ou PHP:
Sitemap: http://www.sitio.com/sitemap.xml

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

# digg mirror
User-agent: duggmirror
Disallow: /

# global
User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /*?
Disallow: /wp-login.php
Allow: /wp-content/uploads/
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.php$
Disallow: /author/
Disallow: /wp-
Disallow: /?s=
Disallow: /search
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
User-agent: MSIECrawler
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Microsoft.URL.Control
Disallow: /

User-agent: libwww
Disallow: /

User-agent: noxtrumbot
Crawl-delay: 150

User-agent: msnbot
Crawl-delay: 130

User-agent: Slurp
Crawl-delay: 110

User-agent: Mediapartners-Google
Allow: /*


Nicorto este robots para que serve:

User-agent: WebCopier
Disallow: /
 
Nicorto este robots para que serve:

User-agent: WebCopier
Disallow: /

Te respondo eu que estou de passagem, Webcopier é um robô que copia conteúdo de sites e com essa ação você o bloqueia de entrar na raiz do wp.
 
Te respondo eu que estou de passagem, Webcopier é um robô que copia conteúdo de sites e com essa ação você o bloqueia de entrar na raiz do wp.

Muito obrigado pelo esclarecimento.
 
Muito obrigado!
 
hey muito obrigado
 
obrigado, vou implementar no meu site

que você preste atenção no que quer adicionar para bloquear ou não :encouragement:


---------- Post adicionado em 22-abr-2013 hora: 12:32 ----------

se te serve de algo, eu tenho assim, não bloqueio as tags a ter em conta se se repetirem melhor bloqueá-las

Inserir CODE, HTML ou PHP:
Sitemap: http://www.sitio.com/sitemap.xml

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

# digg mirror
User-agent: duggmirror
Disallow: /

# global
User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /*?
Disallow: /wp-login.php
Allow: /wp-content/uploads/
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.php$
Disallow: /author/
Disallow: /wp-
Disallow: /?s=
Disallow: /search
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
User-agent: MSIECrawler
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Microsoft.URL.Control
Disallow: /

User-agent: libwww
Disallow: /

User-agent: noxtrumbot
Crawl-delay: 150

User-agent: msnbot
Crawl-delay: 130

User-agent: Slurp
Crawl-delay: 110

User-agent: Mediapartners-Google
Allow: /*
 
leve em conta as tags ou etiquetas que aí não estão bloqueadas :encouragement:

Para bloqueá-las o que deve ser adicionado? ¿Disallow: /*/tags? :topsy_turvy:
 
Voltar
Topo