Dados -> Visualizações

8 views
Skip to first unread message

Andres MRM

unread,
Nov 26, 2014, 4:49:27 PM11/26/14
to gastosab...@googlegroups.com

Everton Zanella Alvarenga

unread,
Nov 26, 2014, 4:59:16 PM11/26/14
to Gastos Abertos Desenvolvimento
Andres, acho que esqueceu o corpo do e-mail. rs

Em 26 de novembro de 2014 19:49, Andres MRM <and...@inventati.org> escreveu:


--
Você está recebendo esta mensagem porque se inscreveu no grupo "gastosabertos-dev" dos Grupos do Google.
Para cancelar inscrição nesse grupo e parar de receber e-mails dele, envie um e-mail para gastosabertos-dev+unsubscribe@googlegroups.com.
Para postar neste grupo, envie um e-mail para gastosabertos-dev@googlegroups.com.
Para ver esta discussão na web, acesse https://groups.google.com/d/msgid/gastosabertos-dev/20141126214921.GK27864%40utopos.Home.
Para obter mais opções, acesse https://groups.google.com/d/optout.



--
Everton Zanella Alvarenga (also Tom)
Open Knowledge Brasil - Rede pelo Conhecimento Livre
http://br.okfn.org

Andres MRM

unread,
Nov 26, 2014, 5:02:46 PM11/26/14
to gastosab...@googlegroups.com
Sim, foi mal... Estou arrumando uma coisa aqui e já mando o e-mail completo.
=P

On 26-11-14 19:59, Everton Zanella Alvarenga wrote:
>Andres, acho que esqueceu o corpo do e-mail. rs
>
>Em 26 de novembro de 2014 19:49, Andres MRM <and...@inventati.org> escreveu:
>
>>
>>
>> --
>> Você está recebendo esta mensagem porque se inscreveu no grupo
>> "gastosabertos-dev" dos Grupos do Google.
>> Para cancelar inscrição nesse grupo e parar de receber e-mails dele, envie
>> um e-mail para gastosabertos-...@googlegroups.com.
>> Para postar neste grupo, envie um e-mail para gastosabertos-dev@
>> googlegroups.com.
>> Para ver esta discussão na web, acesse https://groups.google.com/d/
>> msgid/gastosabertos-dev/20141126214921.GK27864%40utopos.Home.
>> Para obter mais opções, acesse https://groups.google.com/d/optout.
>>
>
>
>
>--
>Everton Zanella Alvarenga (also Tom)
>Open Knowledge Brasil - Rede pelo Conhecimento Livre
>http://br.okfn.org
>
>--
>Você está recebendo esta mensagem porque se inscreveu no grupo "gastosabertos-dev" dos Grupos do Google.
>Para cancelar inscrição nesse grupo e parar de receber e-mails dele, envie um e-mail para gastosabertos-...@googlegroups.com.
>Para postar neste grupo, envie um e-mail para gastosab...@googlegroups.com.
>Para ver esta discussão na web, acesse https://groups.google.com/d/msgid/gastosabertos-dev/CAOUmeJBpVxCfF_v4giCWymDTfuoRXWfOEFzgD9Th8_%2BTBMxbgQ%40mail.gmail.com.

Andres MRM

unread,
Nov 26, 2014, 6:09:07 PM11/26/14
to gastosab...@googlegroups.com, Gastos Abertos
Oi gente,

Estou analisando as bases que o Edgar reuniu [1] e vendo as possíveis
visualizações para o projeto.
A base que tenho mais familiaridade é a de execução, então comecei por ela
e fiz um rascunho de um diagrama sobre como podemos usá-la [2].
(Para editar o diagrama é por aqui [3]. Ele está em "DOT" do Graphviz. Não é
com botões, mas é colaborativo e livre. =) )

Nesse primeiro momento, analiso só as bases na pasta "Orçamento", ou nas
outras (como CMDB) tb?
Tem vários PDFs por ali, acham que compensa tentarmos utilizá-los?
Será que procuro por mais dados ou me concentro no que já está no repositório?

Abs!

[1]: https://github.com/okfn-brasil/gastos_abertos_dados
[2]: http://andresmrm.github.io/EtherPlant/src/etherplant.html?svg&https://pad.okfn.org/p/gastosabertos-diagrama
[3]: http://andresmrm.github.io/EtherPlant/src/etherplant.html?https://pad.okfn.org/p/gastosabertos-diagrama

Andres MRM

unread,
Dec 2, 2014, 6:32:10 PM12/2/14
to gastosab...@googlegroups.com, Gastos Abertos
Alguma resposta para as minhas perguntas?

Erm... era para eu estar mandando estes e-mails para as duas listas ou apenas
para uma?

Quoting Andres MRM (2014-11-26 21:09:02)

Edgar Zanella Alvarenga

unread,
Dec 2, 2014, 8:18:11 PM12/2/14
to gastosab...@googlegroups.com, Gastos Abertos
Sorry Andres, vamos lá, primeiro às perguntas:

>> Nesse primeiro momento, analiso só as bases na pasta "Orçamento", ou
>> nas
>> outras (como CMDB) tb?

Nosso foco será 3 áreas: Receita (De onde vem o dinheiro), Planejamento
(O que
espera-se fazer com ele), Execução (O que foi/está sendo feito). Dados
como CMDB
ou indicadores acho importantíssimos, mas talvez para um segundo
momento. Os dados
do CMDB por exemplo serviriam muito bem para uma análise dos formatos
mais utilizados
nas liberações de dados, estatísticas de quão bom a abertura de dados
está sendo, etc
E os indicadores seriam fundamentais para analisar se as políticas
públicas estão
suprindo algum tipo de efeito, pelo menos numa análise primária de
correlação.

> Erm... era para eu estar mandando estes e-mails para as duas listas
> ou apenas
> para uma?

Pode colocar nas duas se quiser, por enquanto as perguntas ainda estão
gerais o suficiente
pra não assustar quem está na lista não "-dev". (Bom, na verdade não
sei, alguém aí
está acompanhando as discussões sem se perder?)

Quanto ao seu grafo, é interessante mas seria melhor tentarmos nos
organizar no wiki,
pois o grafo é confuso e mais difícil de modificar ou acrescentar
detalhes (por exemplo
em ítens como "Escolher uma coluna da tabela" seria legal colocarmos
uma referência
a quais colunas possíveis/interessantes, adicionar referências para as
sugestões de
visualizações, etc). O mais importante disso tudo é sempre tentarmos
mapear a cada
sugestão de visualização (treemap, bolhas, etc) ou fonte dos dados
(base de execução
por ano, por mês) de onde tais dados partiriam, referenciando o que
temos no github
e a fonte do site da prefeitura.

Ainda não comecei o processo organizacional no wiki, mas estou
explorando os dados
de planejamento para entender quais volumes de categorias e valores
possuímos para
pensar nas visualizações. Por enquanto o que já explorei encontra-se
aqui:

http://nbviewer.ipython.org/github/okfn-brasil/gastos_abertos_dados/blob/master/notebooks/Aprovado%202014.ipynb

E já surgiram diversas questões:

* Os valores aprovados são os valores finais da LOA?

* O que exatamente são as Fontes e como detalharemos isso para os
usuários do site.

* O que exatamente são os Fundos e como detalharemos isso para os
usuários do site.

* Qual melhor forma de representarmos os valores tão díspares das
Secretarias? 24 secretarias
com grande variação entre elas. Me parece que um treemap iria acabar
eclipsando muito a maior
parte das secretarias, exceto as 4 que mais recebem (Educação,
Infra-estrutura, Transporte e
Habitação).

* Olhando para a distribuição dos valores por subprefeituras fiquei em
dúvida de quais outras
bases de dados poderemos cruzar para entender tais diferenças na
distribuição do orçamento.
Estava comparando por exemplo com os dados populacionais por
subprefeitura, mas tive algumas
surpresas, por exemplo, o valor aprovado está está longe de possuir
uma forte correlação com
a número populacional na região de uma subprefeitura.

* Por que tão grande a diferença de valores para secretarias (94%) com
os valores para
subprefeituras (6%).

* Como entender (onde buscar tais informações?) e como visualizar as
grandes diferença nas Unidades
do orçamento? Aliás, o que é uma unidade do orçamento? Por que a
maior parte do dinheiro vai
para o Gabinete do Secretário? Na prática o que isso significa?

* Quais agrupamentos mais finos faremos e como em cada uma das colunas
dos dados? Por exemplo, em Unidades
existem Hospitais, Coordenadorias, Fundos, etc

Boa parte dessas questões deveriam já ter sido colocadas no wiki, farei
assim que possível, mas podemos
continuar a discussão na lista sem problemas.

Abs,
Edgar

Andres MRM

unread,
Dec 2, 2014, 8:45:12 PM12/2/14
to gastosab...@googlegroups.com
Quoting Edgar Zanella Alvarenga (2014-12-02 23:18:09)
> Quanto ao seu grafo, é interessante mas seria melhor tentarmos nos
> organizar no wiki,
> pois o grafo é confuso e mais difícil de modificar ou acrescentar
> detalhes (por exemplo
> em ítens como "Escolher uma coluna da tabela" seria legal colocarmos
> uma referência
> a quais colunas possíveis/interessantes, adicionar referências para as
> sugestões de
> visualizações, etc). O mais importante disso tudo é sempre tentarmos
> mapear a cada
> sugestão de visualização (treemap, bolhas, etc) ou fonte dos dados
> (base de execução
> por ano, por mês) de onde tais dados partiriam, referenciando o que
> temos no github
> e a fonte do site da prefeitura.

É, o grafo ficou meio confuso... Mas estava sentido falta de conseguir mapear
melhor o fluxo dos dados, justamente isso que você falou por último: a fonte,
como processar e como visualizar. Dai achei que um grafo conseguiria
representar melhor isso.

Coloquei alguns links na wiki e agora estou tentando mapear melhor o que há em
cada arquivo da prefeitura e colocando aqui:
https://pt.wikiversity.org/wiki/Gastos_Abertos/Prot%C3%B3tipo#Decifrando_Arquivos

Você viu que eles mudaram a página de dados da prefeitura? Acho que agora tem
mais coisas do que você colocou no github.
http://sempla.prefeitura.sp.gov.br/orcamento/execucao.html

Vamos tentar extrair dados de PDFs? A parte da receita parece que não dá para
avançar muito sem fazer isso... Se sim, faremos isso para todos os anos? O
padrão dos arquivos parece mudar ao longo do tempo...

> Ainda não comecei o processo organizacional no wiki, mas estou
> explorando os dados
> de planejamento para entender quais volumes de categorias e valores
> possuímos para
> pensar nas visualizações. Por enquanto o que já explorei encontra-se
> aqui:
>
> http://nbviewer.ipython.org/github/okfn-brasil/gastos_abertos_dados/blob/master/notebooks/Aprovado%202014.ipynb

Opa! Muito legal! E ótimas perguntas...


Abs!

Gisele S. Craveiro

unread,
Dec 3, 2014, 3:07:28 AM12/3/14
to gastos...@googlegroups.com, gastosab...@googlegroups.com
Olás a tod@s,



Pegando carona nessa thread, gostaria de saber se dentro das possíveis visualizações
para a execução orçamentária, está sendo considerada a utilização do Cuidando do
Meu Bairro, também projeto da Open KNowledge Brasil ?

Ele é o único aplicativo cívico no momento que mostra os dados de orçamento
da cidade de São Paulo.

A idéia é começar do zero ou linkar o Cuidando quando o Gastos Abertos oferecer
visualização geo localizada da despesa ?


Para que tiver interesse, seguem links de matérias recentemente veiculadas
Cuidando é tema de entrevista  na CBN:
 http://cbn.globoradio.globo.com/programas/cbn-sao-paulo/2014/12/02/ PORTAL-NA-INTERNET-ACOMPANHA-OBRAS-DA-PREFEITURA-EM-BAIRROS-DE-SP.htm

Também na TV Camara, da Camara Municipal de Vereadores de São Paulo
http://www.camara.sp.gov.br/index.php?option=com_content&view=article&id=19997:quer-entender-como-funciona-o-orcamento-a-tv-camara-explica&catid=34:comissoes&Itemid=91



Abs

Gisele










Andres MRM

unread,
Dec 3, 2014, 5:34:29 AM12/3/14
to gastosab...@googlegroups.com, Gisele S. Craveiro, gastos...@googlegroups.com, gastosab...@googlegroups.com
Sim, essa é uma pergunta que fiz também. Pelo que o Edgar falou, o código não
tem muito o que se reaproveitar. O que concordo, já que ele vem acumulando
gambiarras ao longo do tempo, e me parece saudável reescrevê-lo. Mas a
pergunta central é, vamos reaproveitar a ideia do Cuidando? De tentar
representar despesas com um ponto, e não apenas região (subprefeitura).

Quoting Gisele S. Craveiro (2014-12-03 06:07:27)
> --
> Você recebeu essa mensagem porque está inscrito no grupo "gastosabertos-dev"
> dos Grupos do Google.
> Para cancelar inscrição nesse grupo e parar de receber e-mails dele, envie um
> e-mail para gastosabertos-...@googlegroups.com.
> Para postar nesse grupo, envie um e-mail para
> gastosab...@googlegroups.com.
> Para ver essa discussão na Web, acesse https://groups.google.com/d/msgid/
> gastosabertos-dev/
> CALF7bvV8yRpFFq1udDOxraVTyTzVDzc5Je3kwNrmbrPfbP_GUg%40mail.gmail.com.
> Para mais opções, acesse https://groups.google.com/d/optout.

Gisele S. Craveiro

unread,
Dec 3, 2014, 5:56:00 AM12/3/14
to Andres MRM, gastosab...@googlegroups.com, gastos...@googlegroups.com
Andres,


Então adiciono uma pergunta: mesmo não reaproveitando o código, mas aproveitando
o conceito implementado no Cuidando, isso significa que haverá somente o "Gastos Abertos"
apresentando visualizações geolocalizadas ou haverá o "Gastos Abertos" e, quando
o usuário buscar por visualizações geolocalizadas, ele direcionará para o "Cuidando" ?


Gisele




Andres MRM

unread,
Dec 3, 2014, 6:21:44 AM12/3/14
to Gisele S. Craveiro, gastosab...@googlegroups.com, gastos...@googlegroups.com
Boa pergunta.
Bom, o Cuidando tem um certo "nome" construído que me parece interessante
manter, não? Talvez a identidade visual também (cores)...
Mas como poderíamos juntar as coisas?
Se formos manter as cores, acho que teremos que manter sites distintos, certo?
E dai o que ficaria em cada um? Apenas geolocalizações em pontos no Cuidando e
todas as outras no Gastos? Ou todas as geolocalizações no Cuidando? Ou
replicamos o mesmo código nos dois sites?
Sem manter as cores acho que dá para colocar o Cuidando dentro do Gastos, com
uma página própria. Mas ainda me fica a dúvida de que visualizações ficariam
em cada lugar.

Independente disso, a ideia das visualizações em mapa é colocar todas em um
mesmo mapa (ativando como camamas) ou dividir em alguns mapas. A primeira
opção me parece permitir à pessoa cruzar mais dados, mas não sei se não fica
mais confusa para pessoas normais.



Quoting Gisele S. Craveiro (2014-12-03 08:55:59)
Reply all
Reply to author
Forward
0 new messages