marktstammdatenregister-dev / feler

Inoffizieller Bugtracker für das Marktstammdatenregister
2 stars 0 forks source link

Gesamtdatenexportprozess deutlich verlangsamt am 8. Februar #28

Closed curiousleo closed 2 years ago

curiousleo commented 2 years ago

Beschreibe das Problem

Wenn die Zeitstempel in der Gesamtdatenexport ZIP-Datei korrekt sind, dann beginnt der Exportprozess morgens um 01:00 Uhr.

Der automatische Validierungsprozess für marktstammdatenregister.dev lief bisher um 04:00 Uhr. Wenn der Exportprozess mehr als drei Stunden braucht, dann muss der Beginn der Validierung auf später verschoben werden.

Wie kann man das Problem reproduzieren?

So kann man das Problem nachvollziehen:

  1. Gesamtdatenexport herunterladen (siehe Archivlinks unter "Verweise").
  2. unzip -l $EXPORT_DATEI | tail -n +4 | head -n -2 | sort --key 3 zeigt die XML-Dateien sortiert nach Zeitstempel.

Was hast du stattdessen erwartet?

Der Exportprozess sollte weniger als drei Stunden dauern.

Konsolenausgabe

Verweise

curiousleo commented 2 years ago

Relevante Änderung: https://github.com/marktstammdatenregister-dev/mastr/commit/98b2a5b12587fbc27650a4c05e1fa0294e691176

curiousleo commented 2 years ago

Support-Antwort:

Zu den genannten Terminen gab es eine ungewöhnlich hohe Belastung des Systems.