Scraping membri gruppo facebook opendatasicilia

55 views
Skip to first unread message

Andrea Nelson Mauro

unread,
Sep 27, 2016, 6:28:38 AM9/27/16
to opendatasicilia
Cari opendatari,

Essendo mattinata di scraping, ho estratto anche l'elenco dei membri del gruppo facebook 

https://docs.google.com/spreadsheets/d/1mJazHu911mCU0B-NUuCXV0Di6WmQ_cBp5p66WOyGwDE/edit?usp=sharing

Il tutto si fa con dataminer (estensione di google chrome) usando questa ricettina very easy che ho fatto


Adesso possono ovviamente essere effettuate ricerche più comode sul gdoc

A cosa serva non so, ma almeno adesso questi dati non li ha soltanto facebook :)
besos!

--

Totò Fiandaca

unread,
Sep 27, 2016, 8:16:20 AM9/27/16
to opendat...@googlegroups.com

Il giorno 27 settembre 2016 12:27, Andrea Nelson Mauro <andrea.ne...@gmail.com> ha scritto:
Essendo mattinata di scraping, ho estratto anche l'elenco dei membri del gruppo facebook 

​devi necessariamente essere amministratore, vero?
ho cercato di farlo in un gruppo in cui sono moderatore e non riesco a 'grattare'.
Saluti ​



--
Salvatore Fiandaca
mobile.:+39 327.493.8955 
m: pigrecoin...@gmail.com

43°51'0.54"N  10°34'27.62"E - EPSG:4326

“Se la conoscenza deve essere aperta a tutti,
perchè mai limitarne l’accesso?” 
R. Stallman

cristiano longo

unread,
Sep 27, 2016, 8:30:39 AM9/27/16
to opendatasicilia

Ma facebook permette il riutilizzo di questi dati?


--
Sito: http://opendatasicilia.it
Facebook: https://www.facebook.com/groups/opendatasicilia/
twitter: http://twitter.com/opendatasicilia
Slack: http://opendatasicilia.it/slack/
Newsletter http://opendatasicilia.it/newsletter/
---
Hai ricevuto questo messaggio perché sei iscritto al gruppo "opendatasicilia" di Google Gruppi.
Per annullare l'iscrizione a questo gruppo e non ricevere più le sue email, invia un'email a opendatasicilia+unsubscribe@googlegroups.com.
Per postare in questo gruppo, invia un'email a opendatasicilia@googlegroups.com.
Visita questo gruppo all'indirizzo https://groups.google.com/group/opendatasicilia.
Per visualizzare questa discussione sul Web, visita https://groups.google.com/d/msgid/opendatasicilia/CADk2tET698cvS-iLQUQCnqqZg%2BogG-A6vXUuq6SL7uoR1cY24Q%40mail.gmail.com.
Per altre opzioni visita https://groups.google.com/d/optout.

Andrea Nelson Mauro | Dataninja.it

unread,
Sep 27, 2016, 10:14:09 AM9/27/16
to opendatasicilia

Totò: non ho in effetti idea!
Cristiano, domanda pertinentissima ovviamente, e anzi grazie per averla fatta :)
nei terms di facebook al punto 2.4 c’è scritto:

When you publish content or information using the Public setting, 
it means that you are allowing everyone, including people off 
of Facebook, to access and use that information, 
and to associate it with you (i.e., your name and profile picture).

quindi direi che la risposta è sì.

c'è qualcuna/o che ne sa di più?

grazie!



Per altre opzioni visita https://groups.google.com/d/optout.



--
Andrea Nelson Mauro - Datajournalist

Filippo D'Angelo

unread,
Sep 27, 2016, 10:16:09 AM9/27/16
to opendat...@googlegroups.com
grande!


Il Mar, 27 Set, 2016 alle 14:30, cristiano longo
<cristia...@gmail.com> ha scritto:

Ma facebook permette il riutilizzo di questi dati?

Per annullare l'iscrizione a questo gruppo e non ricevere più le sue email, invia un'email a opendatasicil...@googlegroups.com.
Per postare in questo gruppo, invia un'email a opendat...@googlegroups.com.

Visita questo gruppo all'indirizzo https://groups.google.com/group/opendatasicilia.

Giuseppe Reale

unread,
Sep 27, 2016, 10:40:34 AM9/27/16
to opendatasicilia
Se le policy di FB consentano il riutilizzo non saprei.. comunque OTTIMO lavoro!!!

G

Il giorno 27 settembre 2016 12:27, Andrea Nelson Mauro <andrea.ne...@gmail.com> ha scritto:
--
Sito: http://opendatasicilia.it
Facebook: https://www.facebook.com/groups/opendatasicilia/
twitter: http://twitter.com/opendatasicilia
Slack: http://opendatasicilia.it/slack/
Newsletter http://opendatasicilia.it/newsletter/
---
Hai ricevuto questo messaggio perché sei iscritto al gruppo "opendatasicilia" di Google Gruppi.
Per annullare l'iscrizione a questo gruppo e non ricevere più le sue email, invia un'email a opendatasicilia+unsubscribe@googlegroups.com.

Per postare in questo gruppo, invia un'email a opendatasicilia@googlegroups.com.
Visita questo gruppo all'indirizzo https://groups.google.com/group/opendatasicilia.

cristiano longo

unread,
Sep 27, 2016, 10:55:56 AM9/27/16
to opendatasicilia

Ma penso sia sufficiente. Quindi facebook è open!


andy

unread,
Sep 27, 2016, 10:59:28 AM9/27/16
to opendatasicilia

2016-09-27 12:27 GMT+02:00 Andrea Nelson Mauro <andrea.ne...@gmail.com>:

Il tutto si fa con dataminer (estensione di google chrome) usando questa ricettina very easy che ho fatto

Appena fai il mini tutorial su dataminer, io faccio quello con accesso via Curl.

___________________

Andrea Borruso
website: http://blog.spaziogis.it
38° 7' 48" N, 13° 21' 9" E, EPSG:4326
___________________

"cercare e saper riconoscere chi e cosa,
 in mezzo all’inferno, non è inferno, 
e farlo durare, e dargli spazio"

Italo Calvino

Totò Fiandaca

unread,
Sep 28, 2016, 12:14:47 PM9/28/16
to opendat...@googlegroups.com

Il giorno 27 settembre 2016 16:58, andy <abor...@gmail.com> ha scritto:
Il tutto si fa con dataminer (estensione di google chrome) usando questa ricettina very easy che ho fatto

​..OOps
sbagliavo ricetta, funziona bene;
unico problema è legato al dato, tutto attaccato; quindi non mi riconosce il file CSV!!!

saluti​

Andrea Nelson Mauro

unread,
Sep 28, 2016, 12:21:24 PM9/28/16
to opendatasicilia

Totò in che senso? Quale dato attaccato?

---
sorry for typos, sent by mobile
---
Andrea Nelson Mauro
dataninja.it
twitter.com/nelsonmau


--
Sito: http://opendatasicilia.it
Facebook: https://www.facebook.com/groups/opendatasicilia/
twitter: http://twitter.com/opendatasicilia
Slack: http://opendatasicilia.it/slack/
Newsletter http://opendatasicilia.it/newsletter/
---
Hai ricevuto questo messaggio perché sei iscritto al gruppo "opendatasicilia" di Google Gruppi.
Per annullare l'iscrizione a questo gruppo e non ricevere più le sue email, invia un'email a opendatasicilia+unsubscribe@googlegroups.com.
Per postare in questo gruppo, invia un'email a opendatasicilia@googlegroups.com.
Visita questo gruppo all'indirizzo https://groups.google.com/group/opendatasicilia.

Totò Fiandaca

unread,
Sep 28, 2016, 12:31:37 PM9/28/16
to opendat...@googlegroups.com

Il giorno 28 settembre 2016 18:21, Andrea Nelson Mauro <andrea.ne...@gmail.com> ha scritto:
Totò in che senso? Quale dato attaccato?

​mi riferisco al dato che 'gratta' ecco un record (è relativo ad un altro gruppo facebook)

Andrea BorrusoUniversità Di PalermoPersona iscrittaUtente aggiunto da Stefano Cek circa 11 mesi faEnrico BertonatiVigile del fuoco presso Ministero degli InterniPersona iscrittaUtente aggiunto da Stefano Cek circa 3 anni fa

se noti, ci sono due persone in un record; poi il cognome è attaccato alla parola successiva!!!

Andrea Nelson Mauro

unread,
Sep 28, 2016, 12:46:38 PM9/28/16
to opendatasicilia

Ah ok, beh si risolve con xpath, nella formula che ho linkato dovrebbe funzionare.

Domani faccio microtutorial video screencast e lo metto qui

---
sorry for typos, sent by mobile
---
Andrea Nelson Mauro
dataninja.it
twitter.com/nelsonmau

--
Sito: http://opendatasicilia.it
Facebook: https://www.facebook.com/groups/opendatasicilia/
twitter: http://twitter.com/opendatasicilia
Slack: http://opendatasicilia.it/slack/
Newsletter http://opendatasicilia.it/newsletter/
---
Hai ricevuto questo messaggio perché sei iscritto al gruppo "opendatasicilia" di Google Gruppi.
Per annullare l'iscrizione a questo gruppo e non ricevere più le sue email, invia un'email a opendatasicilia+unsubscribe@googlegroups.com.
Per postare in questo gruppo, invia un'email a opendatasicilia@googlegroups.com.
Visita questo gruppo all'indirizzo https://groups.google.com/group/opendatasicilia.

Andrea Nelson Mauro

unread,
Sep 29, 2016, 11:32:49 AM9/29/16
to opendatasicilia
Totò ecco uno screencast mini, se non si capisce lo rifaccio


per chi non l'avesse trovata, l'estensione di google chrome che ho usato per fare scraping è https://chrome.google.com/webstore/detail/data-scraper/nndknepjnldbdbepjfgmncbggmopgden

una volta installata, inserisce la funzionalità di scraping
è sufficiente selezionare un pezzo della pagina » tasto destro » data Data Miner

per personalizzare lo scraping (nel mio caso mi è servito per risolvere il fatto che i valori fossero tutti attaccati in un campo) è necessario studiarsi un po' XPATH

(per chi vuole approfondire, ci sono altri trucchi, se c'è interesse li aggiungo)


andy

unread,
Sep 29, 2016, 1:01:25 PM9/29/16
to opendatasicilia

2016-09-29 17:32 GMT+02:00 Andrea Nelson Mauro <andrea.ne...@gmail.com>:
Totò ecco uno screencast mini

Ed ecco lo screencast per ricavare l'elenco dei membri da riga di comando http://somup.com/cDQUDN56M

Senza alcune basi, non si può eseguire in autonomia. Ma ora non riesco a fare di più.
Queste le cose usate:
Baci

Totò Fiandaca

unread,
Sep 29, 2016, 2:41:29 PM9/29/16
to opendat...@googlegroups.com
Grazie alle due A (Andrea^2),
ma nonostante sia alto 190, non sono ancora alla vostra altezza!!!

grazie!!!

--
Sito: http://opendatasicilia.it
Facebook: https://www.facebook.com/groups/opendatasicilia/
twitter: http://twitter.com/opendatasicilia
Slack: http://opendatasicilia.it/slack/
Newsletter http://opendatasicilia.it/newsletter/
---
Hai ricevuto questo messaggio perché sei iscritto al gruppo "opendatasicilia" di Google Gruppi.
Per annullare l'iscrizione a questo gruppo e non ricevere più le sue email, invia un'email a opendatasicilia+unsubscribe@googlegroups.com.
Per postare in questo gruppo, invia un'email a opendatasicilia@googlegroups.com.
Visita questo gruppo all'indirizzo https://groups.google.com/group/opendatasicilia.

Per altre opzioni visita https://groups.google.com/d/optout.



--

andy

unread,
Sep 29, 2016, 2:46:23 PM9/29/16
to opendat...@googlegroups.com

Ma noi siamo più alti, solo perché uno sopra l'altro


Per annullare l'iscrizione a questo gruppo e non ricevere più le sue email, invia un'email a opendatasicil...@googlegroups.com.
Per postare in questo gruppo, invia un'email a opendat...@googlegroups.com.

Visita questo gruppo all'indirizzo https://groups.google.com/group/opendatasicilia.

Per altre opzioni visita https://groups.google.com/d/optout.



--
Salvatore Fiandaca
mobile.:+39 327.493.8955 
m: pigrecoin...@gmail.com

43°51'0.54"N  10°34'27.62"E - EPSG:4326

“Se la conoscenza deve essere aperta a tutti,
perchè mai limitarne l’accesso?” 
R. Stallman

--
Sito: http://opendatasicilia.it
Facebook: https://www.facebook.com/groups/opendatasicilia/
twitter: http://twitter.com/opendatasicilia
Slack: http://opendatasicilia.it/slack/
Newsletter http://opendatasicilia.it/newsletter/
---
Hai ricevuto questo messaggio perché sei iscritto al gruppo "opendatasicilia" di Google Gruppi.
Per annullare l'iscrizione a questo gruppo e non ricevere più le sue email, invia un'email a opendatasicil...@googlegroups.com.
Per postare in questo gruppo, invia un'email a opendat...@googlegroups.com.

Visita questo gruppo all'indirizzo https://groups.google.com/group/opendatasicilia.
Reply all
Reply to author
Forward
0 new messages