D
dxmediagroup
Beta
Usuário com poucas negociações! Use sempre o saldo do ForoBeta!
Excelente contribuição!! :encouragement:
Siga o vídeo abaixo para ver como instalar nosso site como um aplicativo web na sua tela inicial.
Observe: Este recurso pode não estar disponível em alguns navegadores.
Olá, muito obrigado pela contribuição. Preciso de ajuda, pessoal: copio todo o arquivo TXT em um bloco de notas no Windows, depois coloco o nome robots.txt e subo para o meu servidor web, copio a URL e colo na ferramenta de Webmaster do Google na seção de rastreamento.
Se é assim, por favor me digam, ou se não, me digam como seria.
Obrigado
Enviado do meu GT-I9300-La Maquina. usando Tapatalk 2
ok, mas não precisa enviar no webmaster, também veja se você quer bloquear as tags como dizem no início
Obrigado nicorto, e se eu não enviar ao webmaster, como as aranhas do Google vão perceber? Seria apenas subindo para o meu servidor? Se for assim, você poderia me dizer onde colocá-lo exatamente no meu servidor?
Sobre as tags, seria bom ou não indexá-las?
Enviado do meu GT-I9300-La Maquina. usando Tapatalk 2
que eu me lembre, não precisa nem tem onde enviar no wb, suba para o diretório principal, o necessário é o sitemap.xml. Sobre as tags, depende: se se repetem, então não vale a pena porque vai gerar conteúdo duplicado
obrigado nicorto, uma coisinha a mais: o criador do arquivo robots.txt coloca como advertência "cuidado com o copy paste", a que ele se refere com isso, ou o que eu tenho que fazer.
Sitemap: http://www.sitio.com/sitemap.xml
# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*
# digg mirror
User-agent: duggmirror
Disallow: /
# global
User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /*?
Disallow: /wp-login.php
Allow: /wp-content/uploads/
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.php$
Disallow: /author/
Disallow: /wp-
Disallow: /?s=
Disallow: /search
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
User-agent: MSIECrawler
Disallow: /
User-agent: WebCopier
Disallow: /
User-agent: HTTrack
Disallow: /
User-agent: Microsoft.URL.Control
Disallow: /
User-agent: libwww
Disallow: /
User-agent: noxtrumbot
Crawl-delay: 150
User-agent: msnbot
Crawl-delay: 130
User-agent: Slurp
Crawl-delay: 110
User-agent: Mediapartners-Google
Allow: /*
que você preste atenção no que quer adicionar para bloquear ou não :encouragement:
---------- Post adicionado em 22-abr-2013 hora: 12:32 ----------
se te serve de algo, eu tenho assim, não bloqueio as tags a ter em conta se se repetirem melhor bloqueá-las
Inserir CODE, HTML ou PHP:Sitemap: http://www.sitio.com/sitemap.xml # Google Image User-agent: Googlebot-Image Disallow: Allow: /* # digg mirror User-agent: duggmirror Disallow: / # global User-agent: * Disallow: /cgi-bin/ Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/plugins/ Disallow: /wp-content/cache/ Disallow: /wp-content/themes/ Disallow: /trackback/ Disallow: /feed/ Disallow: /comments/ Disallow: */trackback/ Disallow: */feed/ Disallow: */comments/ Disallow: /*? Disallow: /wp-login.php Allow: /wp-content/uploads/ Disallow: /*.js$ Disallow: /*.inc$ Disallow: /*.css$ Disallow: /*.php$ Disallow: /author/ Disallow: /wp- Disallow: /?s= Disallow: /search Disallow: /*/feed/$ Disallow: /*/feed/rss/$ Disallow: /*/trackback/$ Disallow: /*/*/feed/$ Disallow: /*/*/feed/rss/$ Disallow: /*/*/trackback/$ Disallow: /*/*/*/feed/$ Disallow: /*/*/*/feed/rss/$ Disallow: /*/*/*/trackback/$ User-agent: MSIECrawler Disallow: / User-agent: WebCopier Disallow: / User-agent: HTTrack Disallow: / User-agent: Microsoft.URL.Control Disallow: / User-agent: libwww Disallow: / User-agent: noxtrumbot Crawl-delay: 150 User-agent: msnbot Crawl-delay: 130 User-agent: Slurp Crawl-delay: 110 User-agent: Mediapartners-Google Allow: /*
Nicorto este robots para que serve:
User-agent: WebCopier
Disallow: /
Te respondo eu que estou de passagem, Webcopier é um robô que copia conteúdo de sites e com essa ação você o bloqueia de entrar na raiz do wp.
que você preste atenção no que quer adicionar para bloquear ou não :encouragement:
---------- Post adicionado em 22-abr-2013 hora: 12:32 ----------
se te serve de algo, eu tenho assim, não bloqueio as tags a ter em conta se se repetirem melhor bloqueá-las
Inserir CODE, HTML ou PHP:Sitemap: http://www.sitio.com/sitemap.xml # Google Image User-agent: Googlebot-Image Disallow: Allow: /* # digg mirror User-agent: duggmirror Disallow: / # global User-agent: * Disallow: /cgi-bin/ Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/plugins/ Disallow: /wp-content/cache/ Disallow: /wp-content/themes/ Disallow: /trackback/ Disallow: /feed/ Disallow: /comments/ Disallow: */trackback/ Disallow: */feed/ Disallow: */comments/ Disallow: /*? Disallow: /wp-login.php Allow: /wp-content/uploads/ Disallow: /*.js$ Disallow: /*.inc$ Disallow: /*.css$ Disallow: /*.php$ Disallow: /author/ Disallow: /wp- Disallow: /?s= Disallow: /search Disallow: /*/feed/$ Disallow: /*/feed/rss/$ Disallow: /*/trackback/$ Disallow: /*/*/feed/$ Disallow: /*/*/feed/rss/$ Disallow: /*/*/trackback/$ Disallow: /*/*/*/feed/$ Disallow: /*/*/*/feed/rss/$ Disallow: /*/*/*/trackback/$ User-agent: MSIECrawler Disallow: / User-agent: WebCopier Disallow: / User-agent: HTTrack Disallow: / User-agent: Microsoft.URL.Control Disallow: / User-agent: libwww Disallow: / User-agent: noxtrumbot Crawl-delay: 150 User-agent: msnbot Crawl-delay: 130 User-agent: Slurp Crawl-delay: 110 User-agent: Mediapartners-Google Allow: /*
obrigado, vou implementar no meu site
leve em conta as tags ou etiquetas que aí não estão bloqueadas :encouragement:
Para bloqueá-las o que deve ser adicionado? ¿Disallow: /*/tags? :topsy_turvy: