como scrapear el titulo de un post?

adpays

Dseda

Verificado

Verificación en dos pasos activada

Verificado por Binance

• 24 Nov 2022

• #1

Hola, quiero scrapear el titulo de varias URLS y poner los titulos en una lista, como hago eso?

 

Benderslab

Préstamo vencido

Iota

Verificado

Verificación en dos pasos activada

Verificado por Binance

¡Usuario popular!

• 24 Nov 2022

• #2

Con js podes hacer un fetch a cada url y sacar el titulo

 

E

edw9879

Gamma

¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!

• 24 Nov 2022

• #3

Lo puedes realizar con el lenguaje que dominas.
Si la web no tiene ninguna seguridad, lo puedes realizar con php.
Al realizar un scrapping, pon un temporizador, para que no te detecte como bot.

 

SEMTaurus

Gamma

Verificación en dos pasos activada

• 24 Nov 2022

• #4

Ya va, pero ¿Has hecho alguna vez web scrapping o primera vez? Si es primera vez, ponte a ver tutoriales. En YT hay bastantes. Lo que puedo decirte es que hasta con Excel puedes hacer esa tarea, solo ten presente que no siempre los títulos de los posts son h1. En Blogger por ejemplo son h2, y no se si es el único caso.
En cuanto a librerias, en Python puedes usar bs4, en R está rvest, en js está cheerio y así por el estilo.

 

RaynierL

Gamma

Verificado

Verificación en dos pasos activada

Verificado por Binance

• 24 Nov 2022

• #5

Js con Node lo haces en unos minutos.

 

Hugo7

Ómicron

Verificación en dos pasos activada

¡Usuario popular!

• 24 Nov 2022

• #6

con papel y lápiz, en su defecto un bolígrafo (invento argentino)

 

Hadrien Rivere

Dseda

Verificación en dos pasos activada

• 25 Nov 2022

• #7

Con Bun.js o Node.js (dependiendo la version de este), puedes hacer algo tan simple como esto, para scrapear los titulos de un sitio.

JavaScript:

const req = await fetch("https://www.youtube.com/watch?v=M0qMgoChzGI");
const html = await req.text();
const title = html.match(/title/gm);
console.log(title);

 

D

DevOpKinG

Épsilon

¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!

• 25 Nov 2022

• #8

Puedes hacerlo con un bot de telegram creado en python, hay muchos tutoriales en internet . Si no entiendes, puedes escribirme yo te ayudo.

 

Hugo7

Ómicron

Verificación en dos pasos activada

¡Usuario popular!

• 25 Nov 2022

• #9

En PHP es ultra fácil, copiar y pegar...

PHP:

<?php
    function page_title($url) {
        $fp = file_get_contents($url);
        if (!$fp)
            return null;

        $res = preg_match("/<title>(.*)<\/title>/siU", $fp, $title_matches);
        if (!$res)
            return null;

        $title = preg_replace('/\s+/', ' ', $title_matches[1]);
        $title = trim($title);
        return $title;
    }

    echo page_title("https://www.forobeta.com/");
?>