Cartilha para Desenvolvedores

[Pedro Markun]

Caros,

estamos montando aqui uma cartilha (meio que um cheatsheet) para desenvolvedores que querem ingressar no maravilhoso mundo dos dados abertos...

a idéia é um guia muito rápido que cubra coisas como conceitos, formatos, ferramentas de limpeza de dados e ferramentas para visualização de dados

aceito sugestões gerais e gente que tope revisar o conteúdo.

mas além disso, queria incluir um exemplo de scrapper e um de visualização de dados, incluindo o código (mas teriam que ser poucas linhas)

e também indicações de bibliotecas em varias linguagens pra referenciar no documento (scrapping e visualização).

abs,
Pedro Markun

 

[Felipe Cabral]

Genial!

Eu posso fazer ilustrações! Mas com base no texto que vocês montarem.

Felipe Cabral
_______________________________
| Teia Casa de Criação | Nós Digitais |
|  Coletivo Digital  |  Conexão Brasil  |

 

--
Você está recebendo esta mensagem porque se inscreveu no grupo "Transparência Hacker" dos Grupos do Google.
Para postar neste grupo, envie um e-mail para thac...@googlegroups.com.
Para cancelar a inscrição nesse grupo, envie um e-mail para thackday+u...@googlegroups.com.
Para obter mais opções, visite esse grupo em http://groups.google.com/group/thackday?hl=pt-BR.

[Pedro Markun]

valeus!

2011/3/14 Felipe Cabral <fel...@teia.org.br>

[Gutem]

Posso pegar os textos e as ilustras do Felipe, diagramar e gerar PDF, ePub, .mobi, etc...

- Gutem
http://meadiciona.com/gutem
http://www.flickr.com/photos/gutem

[Pedro Markun]

opa!

a coisa esta tomando forma.

https://docs.google.com/document/d/1YEa-pA7jBC28cttjw3vPv4MR0E5dEhrAL1XSxwFuCQo/edit?hl=pt_BR&authkey=CIzXspMG

ta ai o primeiro rascunho pra quem quiser palpitar... a idéia é simplificar :)

2011/3/14 Gutem <gut...@gmail.com>

[Mauricio Maia]

Estava pensando em trabalhar em algumas documentações também... Topo revisar a cartilha.

Pra começar: scraping e não scraPPing ;)

abs

2011/3/14 Pedro Markun <pe...@esfera.mobi>

[Pedro Markun]

opa,

mal ae =D

2011/3/14 Mauricio Maia <mauric...@gmail.com>

[Luciano Santa Brígida]

Já deixei minha colaboração na seção Ferramentas.

Abraços,
Luciano Santa Brígida
(91) 9112-8098
.: http://www.sbvirtual.com.br :.
.: http://www.belemtevi.com.br :.
.: http://www.twitter.com/lucianosb :.

2011/3/14 Mauricio Maia <mauric...@gmail.com>

[Daniela B. Silva]

Desde o primeiro hackday o Pedro Valente corrige isso, dizendo que scraPPing é o ato de mandar recados no Orkut, mas a gente ainda erra... tsc tsc

2011/3/14 Mauricio Maia <mauric...@gmail.com>

[Luis Leao]

Seria legal colocar um exemplo usando expressões regulares também, mas não vi como agregar o assunto dentro do documento. Talvez se entrar um tópico dentro de scrapping separando scraping usando xpath e scrapping através de expressões regulares.

[]'s
Luís

2011/3/14 Pedro Markun <pe...@esfera.mobi>

[Pedro Markun]

total razão.

2011/3/14 Luis Leao <luis...@gmail.com>

[Luciano Santa Brígida]

Poderia recomendar o http://gskinner.com/RegExr/ para aprender a construir expressões regulares. 

Att,

Luciano Santa Brígida
(91) 9112-8098
.: http://www.sbvirtual.com.br :.
.: http://www.belemtevi.com.br :.
.: http://www.twitter.com/lucianosb :.

2011/3/14 Pedro Markun <pe...@esfera.mobi>

[Emerson Vinicius]

Dei meu 1 cent, lá.

a cartilha é para desenvolvedores?

$ cat /etc/contact
   Emerson Vinicius (Duke)
   twitter: @emersonvinicius
   gtalk: duke.m16
   evinicius.com
   blog.evinicius.com

2011/3/14 Luciano Santa Brígida <luciano.sa...@gmail.com>

[Emerson Vinicius]

Estava querendo fazer uns comentários sobre algumas coisas que acho estranha no texto, mais não curto a dinâmica de google docs lista para edição de arquivos, penso em duas coisas, subir num piratepad ou no git.

pessoalmente acho que fazer isso no git e em markdown é o que há.

$ cat /etc/contact
   Emerson Vinicius (Duke)
   twitter: @emersonvinicius
   gtalk: duke.m16
   evinicius.com
   blog.evinicius.com

2011/3/15 Emerson Vinicius <duke...@gmail.com>

[Thiago Rondon]

2011/3/14 Pedro Markun <pe...@esfera.mobi>:

> Caros,
>
> estamos montando aqui uma cartilha (meio que um cheatsheet) para
> desenvolvedores que querem ingressar no maravilhoso mundo dos dados
> abertos...
>

A São Paulo Perl Mongers este mês esta desenvolvendo material técnico
para isto, alguns artigos que foram gerados este mês (será publicado
um por dia), já estão no ar:

http://sao-paulo.pm.org/

Existe algo semelhante que escrevi com relação a cartilha, que é :

http://sao-paulo.pm.org/equinocio/2011/mar/1

O artigo de hoje é sobre infografia em dados governamentais:

http://sao-paulo.pm.org/equinocio/2011/mar/15

E esta sendo desenvolvido artigos sobre "Distribuindo com RDF e
pesquisando com SPARQL", XPATH e etc com provas de conceito em código.

Abs!
-Thiago Rondon

[Diego Rabatone]

Gente,

dei alguns pitacos lá no texto.

Uma coisa que eu gostaria de dizer aqui, com relação a uma alteração que fiz, é que - do meu ponto de vista - nós não estamos aqui para nos contrapor aos políticos, aos partidos políticos, aos engravatados ou qualquer outro grupo ou pessoa. Nós estamos aqui para batalhar por um sistema público mais transparente. E essa transparência traz incontáveis mudanças sociais em nosso país. Dentre elas possíveis reduções de índices de corrupção, possibilidade de maior engajamento crítico e preciso da população nas decisões e planejamentos do Poder Público, de forma mais democrática e menos oligárquica, e por ai vai.

Se eu estiver errado peço que me corrijam.

Abraços,

--------------------------------
Diego Rabatone Oliveira

2011/3/15 Thiago Rondon <thiago...@gmail.com>

[capi etheriel]

a coisa tá muito boa, podia rolar umas ilustrações já.

e alguém poderia colocar o scraper helloworld lá, não?

[Emerson Vinicius]

Estava falando com o Felipe e o Gutem hoje lá na CCD,

Google Docs me parece muito ruim para escrever essa cartilha, sugiro criar um piratepad ou um repositorio git e escrever com Markdown.

$ cat /etc/contact
   Emerson Vinicius (Duke)
   twitter: @emersonvinicius
   gtalk: duke.m16
   evinicius.com
   blog.evinicius.com

2011/3/20 capi etheriel <barra...@gmail.com>

a coisa tá muito boa, podia rolar umas ilustrações já.

e alguém poderia colocar o scraper helloworld lá, não?

--

[Emerson Vinicius]

Pelo menos eu colaboraria mais se fosse assim.

$ cat /etc/contact
   Emerson Vinicius (Duke)
   twitter: @emersonvinicius
   gtalk: duke.m16
   evinicius.com
   blog.evinicius.com

2011/3/20 Emerson Vinicius <duke...@gmail.com>

[Pedro Markun]

Emerson,

topa migrar o conteúdo e montar um pequeno tutorial de como operar nisso? Faço nem idéia de como usar git e markdown pra isso...

abs,

Pedro Markun

2011/3/20 Emerson Vinicius <duke...@gmail.com>

[Diego Rabatone]

Eu, sinceramente, acho que é usar bala de canhão pra matar mosquito usar um repositório git....

Além disso, desincentiva não-desenvolvere(a)s a participar e, também, desincentiva quem não anda por ai com seu próprio computador (se eu parar num "computador qualquer" não posso colaborar)..... prefiro o piratepad...

--------------------------------
Diego Rabatone Oliveira
http://blog.diraol.eng.br
diraol(arroba)diraol(ponto)eng(ponto)br
Identica: (@diraol) http://identi.ca/diraol
Twitter: @diraol

2011/3/20 Pedro Markun <pe...@esfera.mobi>

[erico dias]

uma opção para usar controle de versão sem a complicação que os commits podem causar é o dropbox, www.dropobox.com, no fundo é a mesma coisa mas talvez não tenha as dificuldades de compreensão iniciais

2011/3/21 Diego Rabatone <dir...@diraol.eng.br>

[Emerson Vinicius]

Nem da para comparar, cara,

O git permite eu remover o que eu quiser e poder voltar atras depois sem nenhuma  complexidade, sem contar que com github posso fazer comentários nos commits criando discussões sobre o que entra e o que sai, etc, github e repositórios públicos permite criar forks, e qualquer pessoa pode ver, forkar e assiti o projeto. o dropbox precisaria ficar compartilhando coisas com cada pessoa que chegasse.

$ cat /etc/contact
   Emerson Vinicius (Duke)
   twitter: @emersonvinicius
   gtalk: duke.m16
   evinicius.com
   blog.evinicius.com

2011/3/21 erico dias <eri...@gmail.com>

[erico dias]

então a saída e fazer um tutorial pro git, contemplando windows, arquivos de documentos, imagens, arquivos binários em geral...

2011/3/21 Emerson Vinicius <duke...@gmail.com>

[Emerson Vinicius]

Já coloquei no pirated pad, depois vemos isso de git