dataset despesa publica

2 views
Skip to first unread message

Rui Marinho

unread,
May 2, 2011, 9:28:26 PM5/2/11
to despesa...@googlegroups.com

Vamos tentar disponibilizar o dataset usado no site da Despesa publicacerto ? O vamos disponibilizar é apenas das tabelas dos ajustes_directos e das publicações, para isso cria-se uma BD á parte, só com as tabelas ad_contrato , entidades, mj_publicacoes e isso? Ou é tudo junto ?

 

De: despesa...@googlegroups.com [mailto:despesa...@googlegroups.com] Em nome de João Martins
Enviada: terça-feira, 3 de Maio de 2011 00:54
Para: despesa...@googlegroups.com
Assunto: Re: despesapublica.com

 

Rui, não percebi a pergunta.

On 03-05-2011 00:28, Rui Marinho wrote:

João quanto á bd, coloquei o script de backup numa dropbox da despesa publica, vamos retirar as tabelas do dataset para outra bd?  

 

João Martins

unread,
May 3, 2011, 6:53:34 AM5/3/11
to despesa...@googlegroups.com

Vamos exportar as tabelas para csv (utilizando por exemplo o SELECT ... INTO OUTFILE) e tambem vamos fazer um dump para um ficheiro sql das tabelas (utilizando por exemplo o mysqldump), para quem quiserer recriar a base de dados localmente.
Acho que as unicas tabelas que precisamos são:
ad_contrato
ad_contrato_entidade
ad_contrato_history
ad_contrato_pesquisa_h
ad_contrato_view_h

entidade
entidade_estatisticas
entidade_pesquisa_h
entidade_relacao
entidade_view_h

A publicacoes_mj, não é necessário porque era só uma tabela para recolher informação para depois ajudar a construir o scraper, mas que acho que já não tem utilidade...

O Vitor estava a dizer que ia pegar nisto, mas podes falar com ele e verem se querem dividir algumas daquelas tarefas que ele disse que vazia.
Acho que isto devia correr automaticamente no servidor ao final da noite por exemplo..


Citando Rui Marinho <r...@exileskimboards.pt>:



________________________________________________________________________________

Portugalmail - O email preferido dos portugueses!
http://www.portugalmail.pt

Vitor Silva

unread,
May 3, 2011, 7:00:27 AM5/3/11
to despesa...@googlegroups.com
reparei q há uma tabela localidades... tem interesse?

2011/5/3 João Martins <jfma...@portugalmail.pt>



--

http://blog.osmeusapontamentos.com/

João Martins

unread,
May 3, 2011, 7:07:06 AM5/3/11
to despesapublica

Essa tabela era um cruzamento que comecei a fazer entre a tabela de códigos postais e a bd de localidade do INE, no entanto encontrei muitos erros nos códigos postais, alguns até lhes reportei e eles corrigiram, mas como os ctts agora já não mostra a freguesia, porque dizem que é informação paga, impossibilita este tipo de cruzamento, e por isso abanonei a ideia por agora...
Depois teremos decidir que queremos utilizar a BD do INE ou a dos CTT

Citando Vitor Silva <vitorsi...@gmail.com>:

> reparei q há uma tabela localidades... tem interesse?
>
> 2011/5/3 João Martins <jfma...@portugalmail.pt>
>

>>  Vamos exportar as tabelas para csv (utilizando por exemplo o *SELECT* ...
>> *INTO* OUTFILE) e tambem vamos fazer um dump para um ficheiro sql das
>> tabelas (utilizando por exemplo o *mysqldump*), para quem quiserer recriar



________________________________________________________________________________
O email é um dos seus instrumentos de trabalho?
http://www.portugalmail.net/profissional

Vitor Silva

unread,
May 3, 2011, 7:19:18 AM5/3/11
to despesa...@googlegroups.com
o que me chateia é que eu já tive isso! há uns anos atrás dei-me ao trabalho de fazer essa ligação ctt - ine mas agora não encontro isso 

2011/5/3 João Martins <jfma...@portugalmail.pt>

João Martins

unread,
May 3, 2011, 7:45:18 AM5/3/11
to despesapublica

Isso é que era expectacular, mas tambem não sei se estaria um bocado desactualizado, porque sinceramente a bd dos CTT, nas regiões mais no interior é para esquecer, está tudo aldrabado. Mas tambem é verdade que se calhar essas não são muito importante para este projecto.

Citando Vitor Silva <vitorsi...@gmail.com>:

Rui

unread,
May 3, 2011, 11:18:49 AM5/3/11
to despesa...@googlegroups.com
Eu mostrei ao Vitor um example que fiz a uns tempos aqui n trabalho http://vimeo.com/5785617 em que mostro o n de doentes por localidade. Podia tentar fazer o mesmo , o truque que usei pk  nem todos os doentes tinham moradas completas foi usar os google geo services para obter uma localidade e mandate lhe os dados k tinha ou cp ou morada ou freguesia... Nao era infalivel mas funcionava. 
Pqrtilhei no dropbox os kml pas cada localidade. 
Posso tentar fazer isto sem ser silverlight . Precisa os e de decidir como vamos associar cada ajuate directo a localidade.

Cumprimentos/Regards

Rui Marinho

Enviado do meu iPhone

Vitor Silva

unread,
May 3, 2011, 11:29:06 AM5/3/11
to despesa...@googlegroups.com
>> associar cada ajuate directo a localidade.
pela localidade do adjudicado
e depois ter uma coisa coisa do género:
"está errada esta informação? ajude a corrigi-la => e uma caixa de texto para a pessoa escrever o que lhe apetecer para depois nós validarmos"

Vitor Silva

unread,
May 3, 2011, 11:26:44 AM5/3/11
to despesa...@googlegroups.com
>> associar cada ajuate directo a localidade.
pela localidade do adjudicado
e depois ter uma coisa coisa do género:
"está errada esta informação? ajude a corrigi-la => e uma caixa de texto para a pessoa escrever o que lhe apetecer para depois nós validarmos"

2011/5/3 Rui <r...@exileskimboards.pt>
Eu mostrei ao Vitor um example que fiz a uns tempos aqui n trabalho http://vimeo.com/5785617 em que mostro o n de doentes por localidade. Podia tentar fazer o mesmo , o truque que usei pk  nem todos os doentes tinham moradas completas foi usar os google geo services para obter uma localidade e mandate lhe os dados k tinha ou cp ou morada ou freguesia... Nao era infalivel mas funcionava. 
Reply all
Reply to author
Forward
0 new messages