arkivverket / arkade5

Arkade 5 - testverktøy for arkivuttrekk
http://arkade.arkivverket.no
GNU Affero General Public License v3.0
12 stars 17 forks source link

Verktøy PRONOM filformat-analyse har ikke progress-bar uegnet for mange GB #157

Closed solfeggietto closed 1 year ago

solfeggietto commented 1 year ago

Arkade 5 v2.80 > Verktøy > PRONOM filformat-analyse

  1. Mappe på 380 GB med 266 mapper og 49 973 filer
  2. Startet PRONOM filformat-analyse (valgt mappen over og en målmappe med .csv fil resultat)
  3. Arkade 5 v2.8.0 Verktøy står uten indikator om den henger eller program kjører
  4. Oppgavebehandling viser fast minnebruk 81 MB og 0% prosessor

Det minste vi forventer er at programmet sier hva som skjer

No er det bare å vente, hvor lenge skal man vente før man anser at programmet faktisk henger/har krasjet?

Tilleggsinfo 1t seinere:

solfeggietto commented 1 year ago

Se vedlagt skjermdump av oppgavebehandling.

Startet Droid v6.5.2 som no kjører PRONOM-analyse av innholdet:

Arkade5_vs_Droid_pronom

solfeggietto commented 1 year ago

Etter å ha kjørt Droid PRONOM analyse, prøver jeg Arkade 5 v2.8.0 igjen. Denne gangen, etter nøyaktig samme kildemappe og målmappe med csv filnavn, så starter analyse dialog:

Denne klient skal få stå på og kjøre i helgen - oppdaterer resultat når ferdig her i tråden.

Arkade5_pronom_02

solfeggietto commented 1 year ago

Problemet er bare at ganske umiddelbart forsvinner progress-hjulet og tekst:

Hva betyr dette:

Arkade5_pronom_03

solfeggietto commented 1 year ago

Hva skjer med denne meldte feilen, som i praksis hindre bruk av Arkade 5 v2.9.0 for mange av de store uttrekkene?

Det er lite tilfredstillende at Arkade 5 tilsynelatende her ikke fungerer med PRONOM-analyse av en viss størrelse eller om der er andre egenskaper når det ikke virker?

Er det slik at store nok uttrekk faktisk ikke virker med PRONOM Filanalysen?

No har jeg 2 uttrekk på 2 ulike PCer som bare henger på samme måte, ikke noe skjer i PRONOM filformat-analyse => 0% CPU og 0% diskbelegge, så disse jobbene er no døde

  1. Innmeldt eksempel med mappe øverst på 360 GB med 266 mapper og 49 973 filer totalt 127 GB den mappen
  2. Eksempel PC1 her no har 343 097 filer i rotmappe DOKUMENT totalt 127 GB den mappen 89 filer > 100 MB, største fil = 744 MB, minnebruk Arkade er no 1.83 GB (typisk Documaster måten å ta Noark 5-uttrekk alt i en mappe dokumenter)
  3. Eksempel PC2 her no har 842 647 filer i rotmappe DOKUMENT totalt 628 GB den mappen 439 filer > 100 MB, største fil = 1.4 GB, minnebruk Arkade er no 1.65 GB

Et annet Documaster-uttrekk hvor Arkade 5 v2.9.0 utførte PRONOM filanalyse med suksess

solfeggietto commented 1 year ago

Hei, testet igjen =>

  1. Valgte katalog DOKUMENT i et Noark 5-uttrekk
  2. Valgte målmapper rapporter som andre steg etter klikket KJØR-knapp
  3. Det kom absolutt ingen teller - går rett i ferdig modus, 0 % CPU, 0 % disk, noe RAM
  4. Klikket LUKK og Verktøy dialog gikk ned

Dette ble prøvd etter å ha lukket tidligere kjørt Arkade, så ikke noe henge fra forrige kjøring.

Arkade5_v2 9 0_b02

lhSunde commented 1 year ago

Fikset i versjon 2.9.1