¿Alguém sabe? MauiBot (crawler.feedback+dc@gmail.com)

Buenas! me acabo de enterar que hay un bot rodando por mi web de procedencia extraña que fue detectado por wordfance y me esta entrando a todos los enlaces de mi web!

Aqui los datos:
IP: 52.204.99.105 Hostname: ec2-52-204-99-105.compute-1.amazonaws.com
Human/Bot: Bot
Browser: undefined
MauiBot (crawler.feedback+dc@gmail.com)

Alguien le ha entrado este bot? y que hicieron para bloquearlo o que?

Intento bloquearlo por robots.txt pero al parecer no surte efecto y sigue por ahí rodando por la web, gracias

SOLUCIONADO:

Ya solucione este problema agregue al robots.txt

User-agent: MauiBot (crawler.feedback+dc@gmail.com)
Disallow: /

y ya dejo de rastrear la web, gracias

Creo que bloqueando la IP también hubieses podido frenar al bot :encouragement:

Rolando97x disse:

Creo que bloqueando la IP también hubieses podido frenar al bot :encouragement:

Clique para expandir...

Lo primerito que hice jajaaj, pero de algún modo saltaba el bloqueo y seguía como si nada rastreando la web, pero ya con el robots parece aver parado