nächtliche Berechnung redesignen

[mrschtief]

Wir müssen die nächtliche Berechnung redesignen, da wir von IS24 nicht die shortcut methode zur Übermittlung einer Liste von ExposeIDs bekommen.

Momentan berechnen wir nachts jede Minute einen Benutzer und schaffen so nur 60*24 user am Tag. Das wurde so designed, damit wir write requests sparen, also den user nur einmal pro berechnung speichern müssen. Da wir jetzt aber wieder größere Limits haben, können wir es wieder neu gestalten.

Vorschlag: ExposeCronjob:

• pro Minute X Exposes holen deren lastChecked Datum mindestens 24h zurückliegt.
• Verfügbarkeit bei is24 checken.
• Wenn verfügbar, lastChecked Datum setzen
• Wenn vermietet, lastChecked Datum setzen und als vermietet Kennzeichnen

UserCronjob:

• pro Minute X User holen, deren lastCalculated Datum mindestens 24h zurückliegt
• Alle Exposes des Users holen
• Wenn noch verfügbar und lastChecked Datum innerhalb der letzten 24h ist, Miete addieren
• Wenn vermieted und lastChecked Datum innerhalb der letzten 24h ist, Provision addieren
• History Einträge setzen
• lastCalculated Datum setzen

Probleme:

• Cronjob idled wenn schon alle Exposes gechecked worden sind?
• Überschneidung der beiden Cronjobs
• nicht alle Exposes eines users wurden innerhalb der letzten 24h gechecked
• bereits positiv gecheckte Exposes sind zum Zeitpunkt der Benutzerberechnung schon vermietet
• Wohnung verschwinden, ohne das Historyeinträge für vermietung da sind
• ???

[mrschtief]

Lösung:

Provisionen werden schon tagsüber gutgeschrieben, es werden History einträge erstellt und der User geupdated

[mrschtief]

damit sich die Aufrufe des ExposeCronjobServlet nicht in die quere kommen, wird dieser alle 11 minuten aufgerufen, da das limit eines cronjobs 10 minuten ist

[mrschtief]

verflixt und zugenäht, die neue Berechnung und der cache vertragen sich nicht, ich musste das interne Transaktionsmanagement ausschalten

http://code.google.com/intl/de-DE/appengine/docs/java/datastore/jdo/overview.html#Disabling_Transactions_and_Porting_Existing_JDO_Apps

hoffe das wirkt sich nicht auf den Cache aus