search

aidiss / opendatagovlt

For open data in Lithuania
2 stars 1 forks source link

opendata.gov.lt importas #8

Open sirex opened 9 years ago

sirex commented 9 years ago

Ši užduotis yra sudedamoji atvirų duomenų portalo dalis aprašyta skyrelyje opendata.gov.lt.

Priklauso nuo: #13, #14, #15, #16

Duomenys iš opendata.gov.lt turi būti importuoti naudojant duomenų sinchronizavimo robotą. Todėl turi būti įgyvendintos šios esminės dalys:

  1. Duomenų saugojimo dalis [#13]
  2. Duomenų surinkimo dalis (angl. crowler) [#14]
  3. Duomenų ištraukimo dalis (angl. scraper) [#15]
  4. Instrukcijų failas robotui, kuris apjungia visas kitas dalis [#16]
aidiss commented 9 years ago

Ar galime užduoties pavadinime paminėti, jog ši užduotis yra duomenų sinchronizavimo roboto užduotis?

sirex commented 9 years ago

Gal ir galima. Tik reikia atkreipti dėmesį, kad tokių duomenų sinchronizavimo robotų bus labai daug, iš esmės kiekvienas duomenų šaltinis, iš kurio importuosime duomenys yra duomenų sinchronizavimo robotas, todėl gal geriau tiesiog rašyti, kas tai per duomenų šaltinis iš kurio imami duomenys?