netzbegruenung / green-spider

Hilft Dir dabei, Deine BÜNDNIS 90/DIE GRÜNEN Website zu optimieren
https://green-spider.netzbegruenung.de/
Apache License 2.0
20 stars 7 forks source link

Reparatur und Aufräumen an der job execution #340

Closed marians closed 6 months ago

marians commented 6 months ago

Mit diesem PR funktioniert das Ausführen von Spider jobs (zumindest für mich) sowohl lokal als auch auf Hetzner Cloud.

Credentials müssen im Ordner ./secrets vorhanden sein.

Lokal:

# Image bauen
$ make dockerimage

# Eine URL testen, ohne das Ergebnis zu speichern
make dryrun ARGS="http://www.example.com/"

# Jobs erzeugen
$ make jobs

# Jobs abarbeiten
$ make spider

Remote:

$ devops/run-job.sh
marians commented 6 months ago

Habe etwas zu viel entfernt... muss ein paar Sachen rückgängig machen.