Como elimino una web espejo?

[Hadrien Rivere]

Ese codigo en porcion atomico js es mejor ponerlo en el footer o head?

depende tu logica.

 

[Carlos Frias]

Asistencia brindada para adicionar seguridad a nivel de Server y CF por este lado

Ese codigo en porcion atomico js es mejor ponerlo en el footer o head?

footer siempre es mejor

 

[micomputadoranet]

Escríbele al registrante del dominio que te hace el espejo, desde el correo corporativo de tu dominio. Le dan de baja por la Icccan.

Esto es algo que definitivamente debes hacer...

Lo otro es configurar tu hosting para que no acepte conexiones de bots.. Como dijo otro amigo arriba, no te enfoques en el frontend sino en qué tipo de conexiones estás recibiendo en tu backend.. Cloudflare te puede ayudar con eso, aunque creo que con algunos cambios en tus htaccess podrás bloquearlos fácilmente..

 

[micomputadoranet]

Acá encontré algo más completo

• Robots.txt es un archivo que indica a los motores de búsqueda qué rastrear e indexar, permitiendo el acceso a bots legales pero negando el acceso a scripts sospechosos.
• Los certificados SSL vienen en forma de una extensión de seguridad que protege la información del usuario. Es útil no solo contra el web scraping, sino también como un nivel mínimo de seguridad general.
• Detecte los patrones de navegación similares a bots, como volúmenes inusuales de vistas de elementos, supervise estas cuentas y bloquee ciertas direcciones IP. Para esto, puede usar la geolocalización o puede buscar una lista de bloqueo basada en DNS.
• Bloquee las solicitudes HTTP con headers User-Agent no deseados.
• Cambie su html a menudo, al menos a nivel de id y clase. Dado que los scrapers analizan sus patrones html y descomponen su código markup, los cambios más pequeños pueden desviarlos del camino.
• Añada honeypots para atrapar los scrapers. Esto generalmente se hace creando páginas falsas que solo un bot no humano visitaría. Si detecta actividad en estas páginas, puede bloquear la IP de forma segura.
• Regule las solicitudes, es decir, limite el número de solicitudes/acciones en un cierto período de tiempo.
• Refuerce los Términos y Condiciones exigiendo a los usuarios que marquen una casilla.

Y por supuesto debes reportar ese dominio con el registrador para que le den de baja 🔥💀

 

[m16u31]

Acá encontré algo más completo

• Robots.txt es un archivo que indica a los motores de búsqueda qué rastrear e indexar, permitiendo el acceso a bots legales pero negando el acceso a scripts sospechosos.

no sirve

• Los certificados SSL vienen en forma de una extensión de seguridad que protege la información del usuario. Es útil no solo contra el web scraping, sino también como un nivel mínimo de seguridad general.

tampoco

• Detecte los patrones de navegación similares a bots, como volúmenes inusuales de vistas de elementos, supervise estas cuentas y bloquee ciertas direcciones IP. Para esto, puede usar la geolocalización o puede buscar una lista de bloqueo basada en DNS.

se puede usar proxys o camuflar de varias maneras el ip

• Bloquee las solicitudes HTTP con headers User-Agent no deseados.

Es fácil solo se cambia el header en la request, el atacante puede poner el header que quiera

• Cambie su html a menudo, al menos a nivel de id y clase. Dado que los scrapers analizan sus patrones html y descomponen su código markup, los cambios más pequeños pueden desviarlos del camino.

eso le toma al atacante unos minutos analizar el código y hacer los ajustes necesarios

• Añada honeypots para atrapar los scrapers. Esto generalmente se hace creando páginas falsas que solo un bot no humano visitaría. Si detecta actividad en estas páginas, puede bloquear la IP de forma segura.

igual que el punto de arriba

• Regule las solicitudes, es decir, limite el número de solicitudes/acciones en un cierto período de tiempo.

las requests normalmente las regulas por el ip, pero si camuflas el ip no sirve de nada. O por algun tiempo luego cambias de ip

• Refuerce los Términos y Condiciones exigiendo a los usuarios que marquen una casilla.

jaja como si eso sirviera del algo.

Y por supuesto debes reportar ese dominio con el registrador para que le den de baja 🔥💀

solo funciona si es una web "legal"

 

[Hadrien Rivere]

Confirmo, no funciona nada de eso.

Acá encontré algo más completo

• Robots.txt es un archivo que indica a los motores de búsqueda qué rastrear e indexar, permitiendo el acceso a bots legales pero negando el acceso a scripts sospechosos.
• Los certificados SSL vienen en forma de una extensión de seguridad que protege la información del usuario. Es útil no solo contra el web scraping, sino también como un nivel mínimo de seguridad general.
• Detecte los patrones de navegación similares a bots, como volúmenes inusuales de vistas de elementos, supervise estas cuentas y bloquee ciertas direcciones IP. Para esto, puede usar la geolocalización o puede buscar una lista de bloqueo basada en DNS.
• Bloquee las solicitudes HTTP con headers User-Agent no deseados.
• Cambie su html a menudo, al menos a nivel de id y clase. Dado que los scrapers analizan sus patrones html y descomponen su código markup, los cambios más pequeños pueden desviarlos del camino.
• Añada honeypots para atrapar los scrapers. Esto generalmente se hace creando páginas falsas que solo un bot no humano visitaría. Si detecta actividad en estas páginas, puede bloquear la IP de forma segura.
• Regule las solicitudes, es decir, limite el número de solicitudes/acciones en un cierto período de tiempo.
• Refuerce los Términos y Condiciones exigiendo a los usuarios que marquen una casilla.

Y por supuesto debes reportar ese dominio con el registrador para que le den de baja 🔥💀

 

[DaniSEO]

Saludos betas, Me han creado varias web espejos y esto me ha ocasionado perder mis posiciones en google
agregue este codigo que vi aqui en el foro a ver si las eliminaba pero las web espejos solo se redireccionan entre si en un bucle infinito , ofusque el codigo para que no que no sea detectado, Saben alguna otra opcion para eliminar estas paginas espejos?

me pasó una vez, descubrí su nombre completo y luego le contacté - Lo retiró rápidamente .

 

[hanamichi78]

la solucion es muy simple con una web espejo. ami me ha pasado mucho con mi web de series, lo que se hace es que vas a webmaster y la la metes como si fuera de tu propiedad y despues la eliminas la url y asi se borra ya no aparece en el buscador

 

[Furiavegana]

Sube contenido Ilegal, prohibido a tu web, luego borra.


Cómo se da uno cuenta que hay webs espejo? Algún método o simplemente buscar en google?

 

[hanamichi78]

Sube contenido Ilegal, prohibido a tu web, luego borra.


Cómo se da uno cuenta que hay webs espejo? Algún método o simplemente buscar en google?

en webmaster tools hay una parte que dice enlaces entra en esa y mira los enlaces y sitio con mas enlaces

 

[m16u31]

Sube contenido Ilegal, prohibido a tu web, luego borra.

Y de que serviría subir contenido ilegal? ira la policía a detenerlo? el clonador borra luego ese contenido y es como si no hubiera pasado nada.

Cómo se da uno cuenta que hay webs espejo? Algún método o simplemente buscar en google?

Hay varias maneras, normalmente si tienes un control de tu web saltara una alarma de que hay múltiples request afectando el rendimiento. O como bien dices al buscar una palabra clave por la que posiciones o tu dominio aparece el clon.

la solucion es muy simple con una web espejo. ami me ha pasado mucho con mi web de series, lo que se hace es que vas a webmaster y la la metes como si fuera de tu propiedad y despues la eliminas la url y asi se borra ya no aparece en el buscador

No entendí, y eso de que sirve? solo dejaría de aparecer los enlaces del "clonador" en los resultados de google. Por que la pagina que copia seguiría existiendo, eso no borra o eliminada nada van a seguir clonando si o si.

 

[bones]

Yo recuerdo una web me hacia espejo y lo resolví de la siguiente forma:

Primero: hacer una petición en la web espejo que no exista en tu web, por ejemplo: webespejo.com/peticion-que-no-existe-en-mi-web
segundo: buscar en tu servidor, cpanel, vps, eetc, el log y buscar quien hizo la petición anterior que debió dar un error 404
tercero: en el log debe de salir la ip sin enmascarar de la web que te copia, es decir, que si usa cloudflare no importa ya que obtendrás la ip de su servidor
cuarto: procedes a prohibir peticiones de la ip de la web que te copia, eso le dejara la web en blanco, o redireccionas ese trafico a un sitio nopor
quinto: dormir tranquilo hasta encontrar otra web que te copie

 

[hanamichi78]

Y de que serviría subir contenido ilegal? ira la policía a detenerlo? el clonador borra luego ese contenido y es como si no hubiera pasado nada.

Hay varias maneras, normalmente si tienes un control de tu web saltara una alarma de que hay múltiples request afectando el rendimiento. O como bien dices al buscar una palabra clave por la que posiciones o tu dominio aparece el clon.

No entendí, y eso de que sirve? solo dejaría de aparecer los enlaces del "clonador" en los resultados de google. Por que la pagina que copia seguiría existiendo, eso no borra o eliminada nada van a seguir clonando si o si.

claro pero muchas veces ellos las eliminan por que ya esta eliminada del buscador que es donde buscan generar las visitas

 

[r0y]

la solucion es muy simple con una web espejo. ami me ha pasado mucho con mi web de series, lo que se hace es que vas a webmaster y la la metes como si fuera de tu propiedad y despues la eliminas la url y asi se borra ya no aparece en el buscador

Eso no siempre funciona, me han hecho web espejos las cuales no se pueden agregar a search console

 

[Goomaru]

Yo recuerdo una web me hacia espejo y lo resolví de la siguiente forma:

Primero: hacer una petición en la web espejo que no exista en tu web, por ejemplo: webespejo.com/peticion-que-no-existe-en-mi-web
segundo: buscar en tu servidor, cpanel, vps, eetc, el log y buscar quien hizo la petición anterior que debió dar un error 404
tercero: en el log debe de salir la ip sin enmascarar de la web que te copia, es decir, que si usa cloudflare no importa ya que obtendrás la ip de su servidor
cuarto: procedes a prohibir peticiones de la ip de la web que te copia, eso le dejara la web en blanco, o redireccionas ese trafico a un sitio nopor
quinto: dormir tranquilo hasta encontrar otra web que te copie

Parece una buena idea pero al momento de la práctica esto no sirve...

Hoy en día muchos bots primero hacen la consulta por curl y próximamente utilizan cloudflare cómo proxy mediante sus workers.

Hice lo mismo que escribiste hace tiempo y terminé bloqueando más de 100 ips diferentes diariamente.

Las IP de los worker cambian constantemente por lo que decidí bloquear las IP por un rango y terminé bloqueando a muchos usuarios reales...

En fin hay una manera de protegerse hoy en día pero no sé comenta... Ni por MP.
Cada uno debe investigar o probar , a veces la ayuda perjudica a los demás 🙁

 

[hanamichi78]

Eso no siempre funciona, me han hecho web espejos las cuales no se pueden agregar a search console

si, me esta pasando eso a mi con una web que parese buscador

 

[JF91 PUBLICIDAD]

Saludos betas, Me han creado varias web espejos y esto me ha ocasionado perder mis posiciones en google
agregue este codigo que vi aqui en el foro a ver si las eliminaba pero las web espejos solo se redireccionan entre si en un bucle infinito , ofusque el codigo para que no que no sea detectado, Saben alguna otra opcion para eliminar estas paginas espejos?

El código que mencionas podría haber sido una redirección 301 que apunta a la página original, pero parece que no funcionó en tu caso.

Hay algunas opciones que podrías considerar para solucionar este problema:

1. Puedes bloquear las páginas web espejo en tu archivo robots.txt para que los motores de búsqueda no las rastreen. Esto debería evitar que se indexen y aparezcan en los resultados de búsqueda. Sin embargo, ten en cuenta que esto no eliminará las páginas existentes de los resultados de búsqueda.
2. Puedes contactar al propietario de las páginas web espejo y solicitar que las eliminen. Esto puede ser más efectivo que simplemente bloquearlas en robots.txt, ya que eliminarlas por completo es la mejor solución para resolver el problema.
3. Si las páginas web espejo están utilizando contenido duplicado, puedes presentar una queja de contenido duplicado en Google. Esto podría llevar a la eliminación de las páginas espejo de los resultados de búsqueda.

 

[John Roronoa]

JSFuck de-obfuscator

JSFuck decoder, de-obfuscator

enkhee-osiris.github.io

asi de facil

No perjudica en el SEO?

 

[John Roronoa]

Bueno bro, puse en marcha muchas cosas que al final me resultaron y pude recuperarme, que no lo detallare aqui porque el que me esta haciendo eso esta aqui en el foro

Pides ayuda al foro, pero no compartes como solucionaste para otros poder protegernos?
Vaya!

 

[hanamichi78]

Eso no siempre funciona, me han hecho web espejos las cuales no se pueden agregar a search console

una pregunta, tengo una web de series y gente solo de españa me dicen que no pueden entrar. que puedo hacer o que paso?