Veikiantis atvirų duomenų saugyklos prototipas

[Mantas]

Sveiki,

paleidau veikiantį atvirų duomenų saugyklos prototipą adresu:

http://atviriduomenys.lt/

Saugykla, kol kas yra labai nestabili, veikia derinimo režimu, todėl nenustebkite, jei gausite klaidos langą.

Saugyklos kodas:

https://github.com/atviriduomenys/spinta

Saugykla naudoja atvirų duomenų manifesto duomenų aprašus, visą ką matote saugykloje yra iš atvirų duomenų manifesto:

https://github.com/atviriduomenys/manifest

Kol kas, į saugyklą esu importavęs tik vieną nedidelį duomenų rinkinį, kurį galite pamatyti čia:

http://atviriduomenys.lt/politika/rinkimai/kandidatas/:source/gov/vrk/rinkejopuslapis.lt/kandidatai

Šis rinkinys manifeste aprašytas čia:

https://github.com/atviriduomenys/manifest/blob/master/datasets/gov/vrk/rinkejopuslapis.lt/kandidatai.yml

Duomenų saugykloje įgyvendintos funkcijos:

- duomenų importavimas iš xlsx, csv ir json šaltinių

- duomenų atsiuntimas html, csv ir json formatais

- duomenų normalizavimas pagal manifesto aprašą

- duomenų objektų vardų erdvės

- primityvus duomenų katalogo web ui

- asinchroninis web karkasas, kuris teoriškai turėtų palaikyti ilgai trunkančius klientų prisijungimus ir didelės apimties duomenų atidavimą ir priėmimą

Kol kas saugyklos API nėra stabilus ir gali bet kada keistis. Visi duomenys taip pat gali būti bet kada ištrinti, pakeisti ir pan. O pats servisas gali būti, bet kada išjungtas.

Artimiausiu metu planuoju pabaigti tvarkyti visus VRK duomenis (išskyrus kandidatų anketinius duomenis).

Sekantis tiekėjas sąraše yra VPT (Viešųjų pirkimų tarnyba), bet jų duomenis tikriausiai importuosiu kažkada balandžio mėnesį.

--

Mantas, http://t.me/sirexo