search

Staatsarchiv-Basel-Stadt / RDF-Pipeline

RDF-Pipeline Staatsarchiv Basel-Stadt
0 stars 0 forks source link

Running container auf altem Server (Replace scope virtual.properties) #16

Closed ktk closed 2 years ago

oschihin commented 2 years ago

@ktk : 

root@a101811488c3:~# /usr/src/app/cron/cron-materialize.sh

> staatsarchiv-ld@0.0.0 materialize /usr/src/app
> node shell/materialize.js

Could not execute request, got 401: Unauthorized
Could not execute request, got 401: Unauthorized
ktk commented 2 years ago

@oschihin da war in der Tat noch eine alte ENV-var definiert, die habe ich in https://github.com/Staatsarchiv-Basel-Stadt/RDF-Pipeline/commit/c936e834aa373a1b27e1f6cb2b0ffd040e835973 angepasst.

Die zweite Query funktioniert nun, die erste allerdings nicht. Ich vermute der virtuelle Graph auf Stardog ist nicht mehr aktiv. Mein Vorschlag ist allerdings, dies in der alten Stardog Infrastruktur nicht mehr anzupassen sondern das direkt auf dem neuen Server zu machen.

oschihin commented 2 years ago

@ktk Lässt mich nicht ganz los. Zwar sollte die neue Infrastruktur schnell stehen, aber wie schnell? Habe jetzt den virtuellen Graphen wieder erstellt:

./stardog-oracle-list
+-------------------------+-----------+
|     Virtual Graphs      | Available |
+-------------------------+-----------+
| virtual://scope-virtual | true      |
+-------------------------+-----------+

1 virtual graphs

versuche nachher mal, die Pipeline zu starten. Problem war ev. eine Änderung in der Domain

ktk commented 2 years ago

Ok dann sollten wir relativ schnell sehen, ob es klappt.

oschihin commented 2 years ago

@ktk materialize hat endlich geklappt, mit etwas Handarbeit. Don't ask, für die alte Pipeline ok. Morgen schauen, ob auch der Publish geklappt hat. Triplecount: 8503776

oschihin commented 2 years ago

@ktk Publish scheint nicht geklappt zu haben, Daten im Endpoint sind nicht aktualisiert.

ktk commented 2 years ago

Kann ich nach etwas bestimmtem suchen? Der generierte Dump hat im Moment 8503836 triples.

oschihin commented 2 years ago

:+1: schaut gut aus. Einfach: Aktuelles Set hat https, z.B. https://ld.staatsarchiv.bs.ch/Record/138430 Aktuell aber offensichtlich nicht komplett. Schaue am Montag

oschihin commented 2 years ago

@ktk nach gestern schaut es nun gut aus, die Zahlen stimmen. Im Endpoint ist dieselbe Anzahl Triples wie im Dump (8505883). https://s.zazuko.com/nFVun Intern sind es 62 3Triples weniger, das sind die Metadaten aus der Pipeline. Bin gespannt, können das Ticket am Donnerstag wahrsch. schliessen

oschihin commented 2 years ago

@ktk Updates von gestern liefen durch, Zahlen stimmen. Ist also mindestens zweimal gelaufen. Schliesse hier, danke