Data continue geactualiseerde datasets regelmatig ophalen

[CeesvanStrien]

We hebben een aantal datasets die vrij continue worden bijgewerkt. Echter passen we niet elke keer de metadata aan. In plaats daarvan geven we een publicatiedatum op en geven bij herzieningsfrequentie aan dat deze continue herzien wordt. Is het mogelijk de data waarbij in de metadata staat dat de herzieningsfrequentie continue is, regelmatig (dagelijks of wekelijks) op te halen zonder dat de revisiedatum in de metadata wordt aangepast?

[SandroNeumann]

@CeesvanStrien Wil je dat de dataset dagelijks voor een bepaald tijdstip wordt opgehaald of kan het willekeurig? Dus stel dat een dataset voor de eerste keer geïmporteerd wordt om 14:30. Dan kunnen wij een interval van een dag opnemen en wordt die vanaf dat punt elke dag om 14:30 opgehaald. Alternatief zou zijn om voor alle datasets die die herzieningsfrequentie hebben op een vast tijdstip (bijv. 02:00 uur) de data op te halen.

[SandroNeumann]

@CeesvanStrien Een andere vraag: Moeten wij wanneer er in de metadata bij herzieningsfrequentie dagelijks/wekelijks staat ook de revisiedatum aanpassen wanneer de metadata opgevraagd wordt in de GeoPublisher? Dan blijft in jullie metadata wel de oude datum staan, maar bij het tonen van de metadata aan de gebruiker wordt een aangepaste datum getoond o.b.v. de herzieningsfrequentie.

[CeesvanStrien]

@SandroNeumann De herziening zou ik 's nachts laten plaatsvinden. 02:00 uur is prima Het aanpassen van de revisiedatum wil ik graag nog even met een collega overleggen, maar die kan ik maandag pas spreken. Zelf zou ik de revisiedatum niet laten aanpassen, maar je krijg maandag van mij definitief antwoord.

[CeesvanStrien]

Hallo Sandro,

Nog even kortgesloten met een collega. Wat ons betreft blijft de revisiedatum ongewijzigd. Dus niet aan passen in de metadata als de data geactualiseerd is.

Groeten, Cees

Van: SandroNeumann [mailto:notifications@github.com] Verzonden: vrijdag 15 september 2017 10:11 Aan: IDgis/geopublisher-utrecht CC: Strien, Cees van; Mention Onderwerp: Re: [IDgis/geopublisher-utrecht] Data continue geactualiseerde datasets regelmatig ophalen (#15)

@CeesvanStrienhttps://github.com/ceesvanstrien Een andere vraag: Moeten wij wanneer er in de metadata bij herzieningsfrequentie dagelijks/wekelijks staat ook de revisiedatum aanpassen wanneer de metadata opgevraagd wordt in de GeoPublisher? Dan blijft in jullie metadata wel de oude datum staan, maar bij het tonen van de metadata aan de gebruiker wordt een aangepaste datum getoond o.b.v. de herzieningsfrequentie.

— You are receiving this because you were mentioned. Reply to this email directly, view it on GitHubhttps://github.com/IDgis/geopublisher-utrecht/issues/15#issuecomment-329713153, or mute the threadhttps://github.com/notifications/unsubscribe-auth/AFk9g6GdqZMuMXLO9pcQ_6LqD9mBq9M0ks5sijEagaJpZM4Mj9W0.

“De informatie verzonden met dit bericht is uitsluitend bestemd voor de geadresseerde. Gebruik van deze informatie door anderen dan de geadresseerde is verboden. Openbaarmaking,vermenigvuldiging, verspreiding en/of verstrekking van deze informatie aan derden is niet toegestaan.

Het is mogelijk dat tijdens het transport van dit bericht fouten zijn ontstaan zodat het bericht onjuist is overgekomen. Hiervoor kunnen wij geen aansprakelijkheid erkennen. Uitsluitend het door de bevoegde persoon dan wel het bevoegde bestuursorgaan ondertekende papieren document is bindend. Wij adviseren u om bij twijfel over de juistheid of volledigheid contact met ons op te nemen”.

[SandroNeumann]

Oké, bedankt voor de info.

[CeesvanStrien]

Hoe kunnen we dit testen? Welke waarden van de herzieningsfrequentie in de metadata worden gebruikt om dit te triggeren? Continu, dagelijks, wekelijks? Want het is de herzieningsfrequentie die dit triggert neem ik aan, niet status (die kan namelijk ook op continue geactualiseerd worden gezet).

[SandroNeumann]

Inderdaad, het wordt bepaald door de herzieningsfrequentie. Alleen dagelijks is geïmplementeerd.

Je kunt dit testen door een dataset met herzieningsfrequentie dagelijks te maken en dan kijken of het de volgende dag opnieuw is geïmporteerd. Te zien aan de datum en tijd die bij datasets staan.

[CoraPU]

Ik heb vrijdag twee brongegevens/datasets toegevoegd Themalaag bomen en Themalaag Bronhoudersgrens in de metadata staat de herzieningsfrequentie op dagelijks. De laatste import blijft van vrijdag 13-10-2017 toen de datasets zijn toegevoegd er is daarna geen nieuwe import uitgevoerd.

[CoraPU]

Nog een reactie op bovenstaande. Ik heb dit in de produktie omgeving gedaan maar dit is waarschijnlijk nog niet doorgezet naar produktie. ik zal een nieuwe test op acceptatie doen

[CoraPU]

Op acceptatie zijn de twee bestanden afgelopen nacht opnieuw geïmporteerd.

[SandroNeumann]

Dan kun je dit issue sluiten.