Seria possivel pegar todos os link de download existente numa página?
Saudações,
Numa situção em que eu queira fazer o download de todos pdf de uma vez.
Um exemplo: baixar todos extratos bancario do site do meu banco?
1
2
Dependendo da linguagem usada existiram mais de uma forma de coletar essas informações. No caso da linguagem Python, você pode fazer desde uma requisição básica (requests, http) à raspagem dos dados (beautifulsoup, html). Ainda existe a possibilidade de simular um navegador usando o Selenium, que está disponível em várias linguagens, ou a simulação de hardware do pyautogui.
No caso do site do banco, é preferível que você evite usar selenium ou requests, caso você coloque sua senha e os acessos se tornem muito frequentes, o servidor pode te entender como um ataque e te bloquear.
1
valeu pela dica! estou querendo criar uma extensão que faça isso: "baixar todos extratos bancário disponíveis no site" mas não faço menor ideia de onde começar... depois de uma pesquisa fiquei sabendo hoje do termo "scrape" e estou aqui tentando bolar toda lógica e fazer isso funcionar. Ficaria grato com algumas sugestões de referência ou tecnologias a usar.
2
pesquisa sobre Selenium, é uma biblioteca de webscreping com ele você manipula o browser via script, tem .Net, Python, Java, Powershell... dá pra fazer muita coisa só precisa pegar uns tutoriais na net para aprender... eu uso muito no meu trabalho para extrair diversos tipos de relatórios.
2
usando cherrio tambem da
2
Beautifoulsoup, pandas e requests vc consegue isso com python.
Bs para ter o conteudo da pagina html
pandas p estruturar essse conteudo e filtrar os links
requests para o loop baixando um a um