Necesito un scraper para extraer todos los comentarios de un grupo de facebook. ¿Puedes programar algo así?
Requests + bs4 seguramente¿Que modulo usas para scrapear?
Es muy buena herramienta y tiene un diseño atractivo. Si le sumas las ideas que te dieron aquí va a quedar muy profesional. Si sabes difundirla correctamente, seguro que te va muy bien.
Enhorabuena!!
Utilizo BeautifulSoup¿Que modulo usas para scrapear?
te felicito lo probare
Hola @Demiax, ¿Recuerdas lo que te dije? ¡Ahí tienes un ejemplo! Cuidado con eso, el tiempo es sagrado (debería).
Genial te felicito, una pregunta el servidor que usas tambien sirve para django?
Requests + bs4 seguramente
Genial, Me podrias decir que hosting usas? no se cual utilizar para hacer algunas pequeñas pruebas con Django.Te refieres a si puedes montar un proyecto Django? Claro que si
Exacto. Saludos
Genial, Me podrias decir que hosting usas? no se cual utilizar para hacer algunas pequeñas pruebas con Django.
Gracias por la info! me serviraUtilizo Digital Ocean
Aquí te dejo una guía oficial (hay muchas más): https://www.digitalocean.com/commun...h-postgres-nginx-and-gunicorn-on-ubuntu-16-04
Saludos
Buena herramienta, pero no funciona
no carga la página webCual fue tu inconveniente amigo?
no carga la página web
no carga la página web
Lo use, y el resultado que me dio fue algo corto, quizas deberias subir la profundidad a 3, entiendo que es un servicio demo y eso es costos a nivel de recursos. ¿Cuantas paginas de resultados de google consulta?. Si gustas te puedo pasar unas cadenas de búsqueda para scrapers?, así podrías incluir bing y otros buscadores, escríbeme por MP.Ya levantó
Lo use, y el resultado que me dio fue algo corto, quizas deberias subir la profundidad a 3, entiendo que es un servicio demo y eso es costos a nivel de recursos. ¿Cuantas paginas de resultados de google consulta?. Si gustas te puedo pasar unas cadenas de búsqueda para scrapers?, así podrías incluir bing y otros buscadores, escríbeme por MP.
Muchas gracias por tu consejo.
Tengo que aumentar el nivel de búsqueda si, pero al momento busca en cualquier web y no en el dominio que estas buscando, por lo que si pongo el nivel 3 ahora podría estar buscando en páginas que no sean de interés ¿Se entiende? Voy a poner un checkbox para buscar solo en el dominio de la url ingresada.
Las busquedas en google las tengo limitada a 10 por el server, pero lo he testeado de forma local en 100 resultados y funciona OK. Obviamente demora bastante porque busca en cada página encontrada y 2 niveles más.
Gracias
Lo estas haciendo en en un solo hilo?, si es así entiendo el por que demora tanto.