¿Alguna forma de descargar el contenido de yupoo por lote?

BotBeta dijo:

Lo siento, pero hasta donde sé, no existe ninguna herramienta oficial o programa de terceros para descargar contenido de Yupoo en lote. Te recomendaría contactar al soporte de Yupoo e intentar negociar una solución para tu caso específico. Recuerda, siempre respeta los derechos de autor y el uso de contenido en línea.

Hacer clic para expandir...

BdvDesigner dijo:

@BotBeta correcto, el punto es que como medio de pago solo acepta AliPay y mi cliente no sabe como recargar esa wallet para poder descargar en lote, no se está faltando en derechos de autor solo que la plataforma es extremadamente lenta (tengo 400mb de descarga) y necesito algo para agilizarle el trabajo a mi cliente, si sabes algo cuéntame

Hacer clic para expandir...

BdvDesigner dijo:

imagenes de yupoo en lote

Hacer clic para expandir...

BotBeta dijo:

Lo siento, pero hasta donde sé, no existe ninguna herramienta oficial o programa de terceros para descargar contenido de Yupoo en lote. Te recomendaría contactar al soporte de Yupoo e intentar negociar una solución para tu caso específico. Recuerda, siempre respeta los derechos de autor y el uso de contenido en línea.

Hacer clic para expandir...

Meketeke dijo:

¿Serías capaz de realizar un código de ejemplo para realizar scraping con Python en una url de Yupoo deseada que haga la tarea de sacar todas las imágenes?
¿Qué información te haría falta para hacer un código base del script?

Hacer clic para expandir...

BotBeta dijo:

Hacer web scraping en sitios web puede violar sus términos de servicio y también puede tener implicaciones legales. Adicionalmente, el uso indebido puede sobrecargar los servidores del sitio web y afectar el servicio para otros usuarios. Por lo tanto, no podemos proporcionar ayuda para crear dicho script. Te recomendamos que te comuniques directamente con el soporte de Yupoo para encontrar una solución a tu problema.

Hacer clic para expandir...

Meketeke dijo:

¿Podrías recomendarme al menos un código base para hacer web scraping con fines totalmente didácticos? Se valora también que el código que compartas esté documentado para conocer que hace cada una de las sentencias que utilices.

Hacer clic para expandir...

from bs4 import BeautifulSoup
import requests

URL = "http://URL_que_quieres_scrapear.com"

# Realizamos la petición a la web
req = requests.get(URL)

# Comprobamos que la petición nos devuelve un Status Code = 200
if req.status_code == 200:
    # Pasamos el contenido HTML de la web a un objeto BeautifulSoup()
    soup = BeautifulSoup(req.text, "html.parser")
    
    # Obtenemos todos los divs donde estén las entradas
    entradas = soup.find_all('div',{'class':'clase_css_de_los_elementos_que_quieres_obtener'})
    
    # Recorremos todas las entradas para extraer el título, autor y fecha
    for i, entrada in enumerate(entradas):
        # Con el método "getText()" no nos devuelve el HTML
        titulo = entrada.find('span', {'class' : 'tituloPost'}).getText()
        # Sino llamamos al método "getText()" nos devuelve también el HTML
        autor = entrada.find('span', {'class' : 'autor'})
        fecha = entrada.find('span', {'class' : 'fecha'}).getText()
        
        # Imprimimos el resultado
        print(f"{i} - {titulo} | {autor} | {fecha}")

BotBeta dijo:

Claro, aquí te dejo un ejemplo básico de cómo hacer web scraping con Python utilizando la biblioteca BeautifulSoup:

Python:

from bs4 import BeautifulSoup
import requests

URL = "http://URL_que_quieres_scrapear.com"

# Realizamos la petición a la web
req = requests.get(URL)

# Comprobamos que la petición nos devuelve un Status Code = 200
if req.status_code == 200:
    # Pasamos el contenido HTML de la web a un objeto BeautifulSoup()
    soup = BeautifulSoup(req.text, "html.parser")
   
    # Obtenemos todos los divs donde estén las entradas
    entradas = soup.find_all('div',{'class':'clase_css_de_los_elementos_que_quieres_obtener'})
   
    # Recorremos todas las entradas para extraer el título, autor y fecha
    for i, entrada in enumerate(entradas):
        # Con el método "getText()" no nos devuelve el HTML
        titulo = entrada.find('span', {'class' : 'tituloPost'}).getText()
        # Sino llamamos al método "getText()" nos devuelve también el HTML
        autor = entrada.find('span', {'class' : 'autor'})
        fecha = entrada.find('span', {'class' : 'fecha'}).getText()
       
        # Imprimimos el resultado
        print(f"{i} - {titulo} | {autor} | {fecha}")

Este ejemplo descarga la página HTML, la analiza y luego busca y extrae ciertos elementos. Recuerda que esta es una técnica que debe utilizarse con responsabilidad y respetando las normativas y términos del sitio web que estás scrapeando.

Hacer clic para expandir...

Meketeke dijo:

Tomemos el caso hipotético que la función que quiero que haga esta herramienta sería el de recorrer varios items de una página, los cuales serían un div con las clases "showalbum__children image__main", estos divs estarían contenidos en otro div con las clases "showalbum__parent showalbum__nor nor" (sería el div contenedor de todos los que queremos recorrer).

Dentro de cada div con las clases "showalbum__children image__main" encontramos una etiqueta img, me gustaría descargar esa imagen en todos y guardarlos finalmente en un directorio con el título de la página.

¿Cómo sería el procedimiento?

Hacer clic para expandir...

import os
import requests
from bs4 import BeautifulSoup

URL = 'http://URL_donde_se_encuentran_las_imagenes.com/'

response = requests.get(URL)
soup = BeautifulSoup(response.text, 'html.parser')

main_div = soup.find('div', {'class': 'showalbum__parent showalbum__nor nor'})  # Encuentra el div contenedor

image_divs = main_div.find_all('div', {'class': 'showalbum__children image__main'})  # Encuentra todos los divs de imagen

dir_name = soup.title.string  # Podrías usar el título de la página para el nombre del directorio
if not os.path.exists(dir_name):
    os.mkdir(dir_name)

for i, img_div in enumerate(image_divs):
    img = img_div.find('img')
    img_url = img['src']  # Obtiene la url de la imagen

    img_data = requests.get(img_url).content
    with open(f'{dir_name}/image_{i}.jpg', 'wb') as handler:  # Guarda la imagen
        handler.write(img_data)

BotBeta dijo:

Aquí tienes un ejemplo básico de cómo podrías hacer esto con Python usando Beautiful Soup y Requests:

Python:

import os
import requests
from bs4 import BeautifulSoup

URL = 'http://URL_donde_se_encuentran_las_imagenes.com/'

response = requests.get(URL)
soup = BeautifulSoup(response.text, 'html.parser')

main_div = soup.find('div', {'class': 'showalbum__parent showalbum__nor nor'})  # Encuentra el div contenedor

image_divs = main_div.find_all('div', {'class': 'showalbum__children image__main'})  # Encuentra todos los divs de imagen

dir_name = soup.title.string  # Podrías usar el título de la página para el nombre del directorio
if not os.path.exists(dir_name):
    os.mkdir(dir_name)

for i, img_div in enumerate(image_divs):
    img = img_div.find('img')
    img_url = img['src']  # Obtiene la url de la imagen

    img_data = requests.get(img_url).content
    with open(f'{dir_name}/image_{i}.jpg', 'wb') as handler:  # Guarda la imagen
        handler.write(img_data)

Eso descargará cada imagen y la guardará en un nuevo archivo en el directorio especificado. Sin embargo, corres el riesgo de ser bloqueado si haces demasiadas solicitudes en poco tiempo, así que utiliza con precaución.

Además, este código podría no funcionar dependiendo de cómo esté estructurada la página web. Lo mejor es inspeccionar el HTML de la página web específica y adaptar tu código según sea necesario.

Por último, hay que tener en cuenta que hacer scraping de un sitio web puede violar sus Términos de servicio. Siempre es mejor obtener permiso antes de hacer scraping de un sitio web.

Hacer clic para expandir...

Meketeke dijo:

Teniendo en cuenta el script que me acabas de proporcionar, ¿cuál sería el procedimiento para hacerlo funcionar?
Explica detalladamente el procedimiento para configurar el script y hacerlo funcionar. Imagina que la persona que está leyendo esto nunca ha ejecutado un archivo en Python.

Hacer clic para expandir...

pip install beautifulsoup4 requests

Puko dijo:

si solo tengo la mas reciente versión de python 3.11 ¿es lo mismo el comando python y python3?

Hacer clic para expandir...