Olá mano. Tudo bem?.
Não sei se você vai ver esse comment, mas voltei aqui para falar que terminei a primeira parte desse meu projeto.
Bom, utilizei o nodejs que é o que tenho mais familiaridade e estou estudando no momento.
Basicamente eu achei um site que fica postando stats de ciclismo, e por ser um site com paginas estaticas, foi uma mão na roda para mim.
Utilizei as bibliotecas axios (para fazer requisiçoes http e extrair os dados da pagina) e o cheerio, para manipular os dados obtidos pelo axios.
Então basicamente, tem duas funçoes assincronas no meu codigo, uma me retorna o ranking top 10 mundial (pode ser mudado para mais, mas eu limitei só a 10 porque é o que tenho interesse em saber) e a outra funçao me retorna os resultados das principais corridas do ano do ciclismo de estrada mundial. Então essa primeira parte está finalizada kkkk.
Mas agora estou planejando em usar esses dados para fazer um Newsletter para mim mesmo, talvez receber uma vez por semana por email, ou por whatsapp, ainda nao sei o que irei fazer ao certo.
Ainda vou atualizar a readme e melhorar outras coisas, mas aqui ta o repo, caso queira dar uma olhada!!
https://github.com/Deniks71/cycling-scraper