Scraper do Bolsa Família

28 views
Skip to first unread message

Marcelo Träsel

unread,
Oct 31, 2013, 12:59:16 PM10/31/13
to thac...@googlegroups.com
Pessoal,

Estou tentando baixar dados da visualização de valores anuais por município diretamente do site do Bolsa Família (não há CSV para todos os anos e os arquivos, divididos por mês, têm mais de 300 MB).

Alguém aqui já se deparou com o problema de raspar os dados de lá e teria um scraper pronto?

Segue em anexo a tela que estou tentando raspar. Quero apenas as colunas "município" e "total no ano", texto simples.


Imagem inline 1

Alguma ideia?

Obrigado!
______________
marcelo träsel
mar...@trasel.com.br
http://www.trasel.com.br

Da habt ihr's nun! mit Narren sich beladen
Das kommt zuletzt dem Teufel selbst zu Schaden

                      -- Goethe, Fausto II
image.png

decko

unread,
Oct 31, 2013, 2:59:40 PM10/31/13
to thac...@googlegroups.com
Marcelo

Estou a tempos pra fazer um, e sempre me esquivo de botar a mão na massa.
Acho q podia ser uma boa trocarmos umas ideias pra extrair essas informações. No que vc tem esbarrado?

Abraços


2013/10/31 Marcelo Träsel <marcelo...@gmail.com>

--
Você está recebendo esta mensagem porque se inscreveu no grupo "Transparência Hacker" dos Grupos do Google.
Para cancelar a inscrição neste grupo e parar de receber seus e-mails, envie um e-mail para thackday+u...@googlegroups.com.
Para postar neste grupo, envie um e-mail para thac...@googlegroups.com.
Visite este grupo em http://groups.google.com/group/thackday.
Para ver esta discussão na web, acesse https://groups.google.com/d/msgid/thackday/CA%2BMF24kRbo_3Oi0S2wZo_S%3DD4DBpq%3DT83xVfA7wm%2B7b3LTxF_g%40mail.gmail.com.
Para obter mais opções, acesse https://groups.google.com/groups/opt_out.



--
@decko
André F. A. Brito
image.png

Daniel Bramatti

unread,
Oct 31, 2013, 4:01:01 PM10/31/13
to thac...@googlegroups.com

Caro Träsel, existe outra base na Caixa Federal, talvez seja mais fácil: https://www.beneficiossociais.caixa.gov.br/consulta/beneficio/04.01.00-00_00.asp

.

.

Daniel Bramatti | Editoria Nacional - Estadão Dados - Blog Públicos | O Estado de S. Paulo

Av. Eng. Caetano Álvares, 55 - Limão - São Paulo - SP - 02598-900

+ 55 11 3856-4592

estadoQuer  Blog Públicos Estadão Dados



2013/10/31 decko <de...@birosca.mobi>
image002.jpg
image.png

Daniel Bramatti

unread,
Oct 31, 2013, 4:11:48 PM10/31/13
to thac...@googlegroups.com

.

.

Daniel Bramatti | Editoria Nacional - Estadão Dados - Blog Públicos | O Estado de S. Paulo

Av. Eng. Caetano Álvares, 55 - Limão - São Paulo - SP - 02598-900

+ 55 11 3856-4592

estadoQuer  Blog Públicos Estadão Dados



2013/10/31 Daniel Bramatti <danielb...@gmail.com>
image002.jpg
image.png
Reply all
Reply to author
Forward
0 new messages