Gestire l'upload di file di grandi dimensioni

[gvaldambrini]

L'upload del file deve essere fatto usando le solite route (POST /files/ o PUT /files/), con l'aggiunta di un nuovo parametro offset che indicherà il byte di partenza del pezzo inviato. Il server dovrà creare un file temporaneo associato sia all'utente che al file in upload, considerando l'upload a pezzi completato quando l'md5 del file temporaneo corrisponderà con quello inviato dal client. In quel caso il file diventerà un file normale a tutti gli effetti eventualmente sovrascrivendo un file nello stesso path (nel caso della PUT).

Il server dovrà anche:

• [x] memorizzare l'md5 del file in upload, in questo modo se il client invierà un file con lo stesso path e nuovo md5 il server potrà eliminare il file temporaneo rimpiazzandolo con il nuovo.
• [x] avere un timeout oltre il quale il file temporaneo sarà considerato non più valido e ogni richiesta ulteriore verrà riposta con l'opportuno errore (408).
• [x] gestire con un opportuno errore il caso in cui la prima richiesta abbia offset != 0 e quello in cui, in un upload già in corso, offset != len(file temporaneo).
• [x] ritornare 200 se l'upload di un chuck ha avuto successo, 201 se ha completato l'upload del file.

Il client dovrà:

• [x] decidere se inviare il file in un'unica soluzione o in più parti a seconda della dimensione del file (configurabile)
• [x] gestire in modo opportuno gli errori del server e interrompere e ripartire con un upload a pezzi nel caso in cui un file di grandi dimensioni sia modificato.

[marco64bit]

• [x] creare il file per il cron che quando gira elimina tutti i file temporanei e i dati sul json solo per i file vecchi di n tempo stabilito
• [x] CLIENT: inviare all'inizio il numero di chunk totali
• [x] SERVER: se arriva un numero di chunk <= a quello salvato nel file dei temporanei 400
• [x] CLIENT: salvare ogni volta che finisco una request il puntatore al punto del file a cui sono arrivato su un file temporaneo e eliminarlo quando mi risponde 201 di modo da continuare l'upload anche se il demone muore
• [x] CLIENT: gestire la coda di eventi per upload grandi, di non eseguire ma aspettare se c'è giù uno in corso
• [x] CLIENT: quando viene mosso un file grande durante il caricamento ignora l'evento e modifica semplicemente la path sul cehckpoint file e in ivio al server specificando che la path è cambiata con ossi in path ci finisce la nuova path e in change_path quella vecchia

• [x] SERVER: individuare quando ho un change_path=old pathe andare a aggiornare il file dei temporanei con la nuova path

  -[x] STOP CON REINVIO: (408) = (1)cancello il file temporaneo (2) creo un evento di creazione su quel file lo metto in cima all lista cosi lo rimanda da capo

  -[x] STOP SENZA REINVIO = (400-409) cancello il file temporaneo

  -[x] STOP PER DELETED = (1) cancello il temporaneo (2) piallo il file su client

• [x] CLIENT: per gli eventi in coda, se vegono mossi cambiare la destinazione dell'evento,
• [ ] per gli eventi in coda, se vengono copiati, mettere l'evento in coda all'upload,
• [x] per gli eventi in coda, se vengono cancellati piallare l'evento