Concurso Nacional de Dados Abertos - Dump do SICONV

[Nitai B. Silva]

Pra quem está ligado no Concurso Nacional de Dados Abertos, temos uma novidade interessante. 

Para facilitar a exploração dos dados do SICONV acabamos de publicar uma extração completa do banco de dados [1] (postgresql) que sustenta a API de dados abertos [2].

Pra quem não conhece, o SICONV é o sistema do governo que registra todo repasse de dinheiro da união, conhecidos como transferências voluntárias, para prefeituras, governos estaduais, ONGs e entidades desse gênero. É uma grande parcela do orçamento da união que passa por influência das famosas emendas parlamentares.

Só um exemplo de dado contido nessas bases: Quem se lembra dos escândalos em 2011 com o programa do Ministério dos Esportes chamado Segundo Tempo? Bem, todos esses dados podem ser explorados partindo dessa consulta [3]. Dá pra navegar nos diversos convênios firmados nesse programa. Todavia se você pretende fazer análises profundas com todos os dados terá certo trabalho para baixá-los pela API, ainda que ela possibilite filtros e vários formatos.

Com o dump você tem toda a liberdade para manipulá-los.

Veja aqui [4] um exemplo da riqueza de dados contidos em um convênio.

Para este concurso resolvemos quebrar o paradigma e incluímos uma categoria focada em infográficos, além da categoria principal de aplicativos. Dessa forma esperamos que sejam criados diversos infográficos interessantes revelando padrões e tendências interessantes sobre o SICONV.

Como premiação serão fornecidos Ultrabooks Intel Core i3, telefones celulares Intel Razr i e mochilas.

Para mais informações e inscrições em: http://2.encontro.dados.gov.br/concurso.html

[1] http://api.convenios.gov.br#dump

[2] http://api.convenios.gov.br/

[3] http://api.convenios.gov.br/siconv/v1/consulta/programas.html?id_orgao_executor=51000&nome=segundo%20tempo

[4] http://api.convenios.gov.br/siconv/dados/convenio/454612.html

Atenciosamente,

Nitai Bezerra da Silva 
Time de Dados Abertos  @dadosgovbr
Analista em Tecnologia da Informação

DGE / SLTI / Ministério do Planejamento, Orçamento e Gestão

Esta mensagem de caráter PÚBLICO e OSTENSIVO, deverá, de acordo com a Lei 12.527, de 18 de novembro de 2011, ser fornecida a qualquer cidadão que solicite formalmente a seu remetente ou a qualquer de seus destinatários diretos ou indiretos acesso a seu conteúdo, cabeçalhos e anexos, no prazo máximo legal de 20 (vinte) dias. A negativa indevida de acesso ao seu conteúdo poderá sujeitar o infrator às penas previstas no art. 32.

[Diego Rabatone]

Noooossa... mandaram muito Nitai! =)
Finalmente alguém liberando DUMP!!!! Parabéns!!!

--------------------------------
Diego Rabatone Oliveira
diraol(arroba)diraol(ponto)eng(ponto)br
Identica: (@diraol) http://identi.ca/diraol
Twitter: @diraol

--
Você está recebendo esta mensagem porque se inscreveu no grupo "Infraestrutura Nacional de Dados Abertos - (INDA) - GT4 - Modelagem, Metadados, Dados e padrões" dos Grupos do Google.
Para cancelar a inscrição neste grupo e parar de receber seus e-mails, envie um e-mail para lista-inda-gt...@googlegroups.com.
Para obter mais opções, acesse https://groups.google.com/groups/opt_out.

[Pedro Markun]

liberô o dump!

2013/11/4 Diego Rabatone <dir...@diraol.eng.br>

--
Você está recebendo esta mensagem porque se inscreveu no grupo "Infraestrutura Nacional de Dados Abertos - (INDA) - GT3 - Tecnologia" dos Grupos do Google.

[Mario Mol]

muiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiito bom!!

fiz a importação, está fino demais!

seguinte, como que vinculo esses convenios com os deputados? seja quem criou a emenda ou a bancada.. ?

ví que na tabela de pessoa_responsavel existem alguns com cargo deputado.. mas qd filtro as demais tabelas me retorna o nome de apenas um..

select distinct r.* from pessoa_responsavel r,proposta p where
    (r.id =p.id_pessoa_responsavel_pelo_concedente or
    r.id =id_pessoa_responsavel_pelo_cadastramento or
    r.id =id_pessoa_responsavel_pelo_envio)
    and  r.cargo like '%DEPUTA%'

    union

    select distinct r.* from pessoa_responsavel r,convenio p where
    (r.id = p.id_pessoa_responsavel_como_concedente)
    and  r.cargo like '%DEPUTA%'


    union

    select distinct r.* from pessoa_responsavel r,habilitacao_area_atuacao p where
    (r.id = p.id_pessoa_responsavel)
    and  r.cargo like '%DEPUTA%'

   

abs!

2013/11/4 Nitai B. Silva <nitaib...@gmail.com>

--
Você está recebendo esta mensagem porque se inscreveu no grupo "Transparência Hacker" dos Grupos do Google.
Para cancelar a inscrição neste grupo e parar de receber seus e-mails, envie um e-mail para thackday+u...@googlegroups.com.
Para postar neste grupo, envie um e-mail para thac...@googlegroups.com.
Visite este grupo em http://groups.google.com/group/thackday.
Para ver esta discussão na web, acesse https://groups.google.com/d/msgid/thackday/CAFfrL7JxBerLPvzuV85t0XmHneKZh-7-dKffvXkUuULTDPn60A%40mail.gmail.com.

[Lucas]

Nitai,

Alguma previsão da API do comprasnet voltar ao ar?

Está fora há meses. 

Abraço,

Lucas 

Em 04/11/2013, às 23:24, Diego Rabatone <dir...@diraol.eng.br> escreveu:

Noooossa... mandaram muito Nitai! =)
Finalmente alguém liberando DUMP!!!! Parabéns!!!

--------------------------------
Diego Rabatone Oliveira
diraol(arroba)diraol(ponto)eng(ponto)br
Identica: (@diraol) http://identi.ca/diraol
Twitter: @diraol

Em 4 de novembro de 2013 22:49, Nitai B. Silva <nitaib...@gmail.com> escreveu:

<LOGO_DADOS_ABERTOS_2013_Finalizadas-02-semFundo.png>

Pra quem está ligado no Concurso Nacional de Dados Abertos, temos uma novidade interessante. 

Para facilitar a exploração dos dados do SICONV acabamos de publicar uma extração completa do banco de dados [1] (postgresql) que sustenta a API de dados abertos [2].

Pra quem não conhece, o SICONV é o sistema do governo que registra todo repasse de dinheiro da união, conhecidos como transferências voluntárias, para prefeituras, governos estaduais, ONGs e entidades desse gênero. É uma grande parcela do orçamento da união que passa por influência das famosas emendas parlamentares.

Só um exemplo de dado contido nessas bases: Quem se lembra dos escândalos em 2011 com o programa do Ministério dos Esportes chamado Segundo Tempo? Bem, todos esses dados podem ser explorados partindo dessa consulta [3]. Dá pra navegar nos diversos convênios firmados nesse programa. Todavia se você pretende fazer análises profundas com todos os dados terá certo trabalho para baixá-los pela API, ainda que ela possibilite filtros e vários formatos.

Com o dump você tem toda a liberdade para manipulá-los.

Veja aqui [4] um exemplo da riqueza de dados contidos em um convênio.

Para este concurso resolvemos quebrar o paradigma e incluímos uma categoria focada em infográficos, além da categoria principal de aplicativos. Dessa forma esperamos que sejam criados diversos infográficos interessantes revelando padrões e tendências interessantes sobre o SICONV.

Como premiação serão fornecidos Ultrabooks Intel Core i3, telefones celulares Intel Razr i e mochilas.

Para mais informações e inscrições em: http://2.encontro.dados.gov.br/concurso.html

[1] http://api.convenios.gov.br#dump

[2] http://api.convenios.gov.br/

[3] http://api.convenios.gov.br/siconv/v1/consulta/programas.html?id_orgao_executor=51000&nome=segundo%20tempo

[4] http://api.convenios.gov.br/siconv/dados/convenio/454612.html

Atenciosamente,

Nitai Bezerra da Silva 
Time de Dados Abertos  @dadosgovbr
Analista em Tecnologia da Informação

DGE / SLTI / Ministério do Planejamento, Orçamento e Gestão

Esta mensagem de caráter PÚBLICO e OSTENSIVO, deverá, de acordo com a Lei 12.527, de 18 de novembro de 2011, ser fornecida a qualquer cidadão que solicite formalmente a seu remetente ou a qualquer de seus destinatários diretos ou indiretos acesso a seu conteúdo, cabeçalhos e anexos, no prazo máximo legal de 20 (vinte) dias. A negativa indevida de acesso ao seu conteúdo poderá sujeitar o infrator às penas previstas no art. 32.

[Eduardo Ismael]

Comprasnet! Bem lembrado, Lucas. Aquele site é lamentável.

Eduardo

[Nitai B. Silva]

Olá, Lucas,

Infelizmente a API do SICAF (módulo do comprasnet) saiu do ar já faz algum tempo. O motivo foi de pane geral no servidor. Não haviam backups consolidados. Conseguimos encontrar uma versão intermediária do código da API. Estamos fechando os últimos detalhes para restaurar a API.

A notícia legal é que temos o compromisso de abrir grande parte do Comprasnet até 04/14. Nesse caso serão abertos as licitações, contratos e muito mais.

Não quero prometer nenhuma data  específica. Até por isso que não incluímos no concurso de dados abertos.

Pedimos enormes desculpas pela indisponibilidade do serviço.

[]s

2013/11/5 Lucas <lucas...@gmail.com>

--
Você está recebendo esta mensagem porque se inscreveu no grupo "Infraestrutura Nacional de Dados Abertos (INDA) - GT1 - Gestão e normativo" dos Grupos do Google.

Para cancelar a inscrição neste grupo e parar de receber seus e-mails, envie um e-mail para lista-inda-gt...@googlegroups.com.

[Lucas Freire]

Tranquilo, Nitai.

O caminho é longo mas estamos indo bem! 

Abraço,

Lucas

[Augusto Requião]

Eu ainda tenho muitas dúvidas da premissa do governo brasileiro com a parceria de Dados Abertos:
"Se oferecermos às pessoas acesso aos dados governamentais, elas exigirão um governo melhor, votarão de modo consciente e a qualidade dos políticos eleitos melhorará."

Será mesmo que a grande massa das classes C, D, E que elegem os políticos possuem tempo, recursos e disposição para fazerem pesquisas, cruzamentos, análises nos dados disponibilizados? Você teria?

Em 4 de novembro de 2013 22:49, Nitai B. Silva <nitaib...@gmail.com> escreveu:

--
Você está recebendo esta mensagem porque se inscreveu no grupo "Infraestrutura Nacional de Dados Abertos - (INDA) - GT4 - Modelagem, Metadados, Dados e padrões" dos Grupos do Google.
Para cancelar a inscrição neste grupo e parar de receber seus e-mails, envie um e-mail para lista-inda-gt...@googlegroups.com.
Para obter mais opções, acesse https://groups.google.com/groups/opt_out.

--

Augusto Requião
Blog: http://requiao.blogspot.com
Twitter: @cesarfex
"O ignorante afirma, o sábio duvida, o sensato reflete." - Aristóteles

[Nitai B. Silva]

Fala, Mario,

Conversei aqui internamente e me informaram que dá pra cruzar sim. O campo é o número da emenda. Ex. em http://api.convenios.gov.br/siconv/dados/emenda/74648,23960018,26.html

Os convênios mais antigos não possuem esse número. Vai entender...

Esse campo cruza com dados do Siga Brasil: http://www.interlegis.leg.br/fiscalizacao/link.2006-01-24.0945430907/

O projeto Orçamento Ao seu Alcance usa os dados do Siga Brasil.http://orcamento.inesc.org.br/2013 Pra inspirar!!

Abraços,

Nitai

2013/11/5 Mario Mol <mari...@gmail.com>

Para ver esta discussão na web, acesse https://groups.google.com/d/msgid/thackday/CAGOV_-wLwt87%3DDu7LXw%2BxPhxj%2BAhoJQe9Um6SLKUnAKnnJXGvA%40mail.gmail.com.