maartenmarx
commented
2 years ago Hi @alhasha001 ,
Dank voor je notebooks.
- Misschien denk je dat ik een tovenaar ben, maar eerlijk gezegd kan ik niet erg veel met deze notebooks, met vrijwel geen output.
- In ieder geval lijkt me het percentage van .1 % totaal fout in je voorbeeld. De 19 heb ik niet nageteld.
- Je RQs zijn in ieder geval niet grammaticaal correct, en wel op een heel erg hoog niveau. Dat is best maar dan heb je concrete sub RQs nodig, en die zie ik niet. Terwijl je wel al van alles doet. Jammer, je maakt het jezelf zo erg moeilijk.
- Het data augmentatie verhaal is niet af. Je wilt dan toch zien hoeveel data je erbij krijgt, hoe die nieuwe data lijkt op de vorige, en of die nieuwe data zorgt voor hogere scores. Nu zegt het eigenlijk niks.
- Je haalt een accuracy van 93% wat geweldi lijkt, maar het is me niet duidelijk hoe groot de test set is, en is accuracy wel de maat die je wilt? Als er heel veel NIET zwart gemaakt is, is het best makkelijk een hoge accuracy te halen.
- PQ is echt zo geimpolementeerd hoor. Dat is heel makkelijk en intuitief. Ik had het in een half uur staan. Dan weet je wat je doet.
Dus, samenvattend, ik denk dat je goed bezig bent, maar ik zie heel erg weiniobg progressie en begin me nu echt zorgen te maken. Geef jezself structuur en laat eens wat zien aan vrienden/collegas, en daarna aan mij.
zet em op joh!! fijn weekend maarten
Goeiemorgen @maartenmarx
Ik hoop bij deze update geef ik een helderder beeld over waar ik mee bezig ben.
1 - Generating more images: https://github.com/alhasha001/thesis/blob/main/experiments/detect/Generate%20Images.ipynb
2 - Using DL / ML to detect redaction: https://github.com/alhasha001/thesis/blob/main/experiments/detect/Using%20CNN%20and%20or%20ML%20models%20that%20detect%20redaction.ipynb
3 - Count redacted area and calculate the total percentage: https://github.com/alhasha001/thesis/blob/main/experiments/detect/Redaction%20percentage.ipynb
Volgende stappen: 1 - PQ implementeren (in nummer 2 and 3)
2 - Andere DL / ML uitproberen
3 - Reden / Motivatie implementere (die getalletjes) als een supporting factor en niet een main factor want de ORC blijft helaas af en toe onnauwkeurige readings geven (zelfs met de OS versie zoals Fajar raadde).
4 - Een neiwue EDA schrijven met de nieuwe gegenereerde data/images.
Graag, laat mij wete of mijn RQ fijn is (hij is in de links van de punten 2 en 3 ) .