emkarcinos / AITech-flats

Projekt magisterski AITech - klasyfikacja stylu wnętrz mieszkań i transfer stylu
Apache License 2.0
2 stars 0 forks source link

Protyp modelu ML do transferu stylu #8

Open emkarcinos opened 1 year ago

emkarcinos commented 1 year ago

Podstawowe pytanie: jakie podejście chcemy zastosować?

  1. CycleGAN – podejście unsupervised starające się znaleźć mapowanie między dwiema domenami, bez wykorzystania podanych na tacy mapowań 1:1. Jeżeli klasyfikator działałby nawet w przypadku kilku stylów, to pewnie można by wykorzystać go jako discriminator obrazów tworzonych przez generator.
  2. CycleGAN lub jego poprzednia wersja wykorzystująca maski segmentacji – treningowe dane w postaci obrazów i ich posegmentowanych odpowiedników, czyli bardziej supervised. Obraz na wejściu wpadałby w segmentator, ten wyrzucałby maski, następnie takie maski wchodziłyby do generatora z dodatkową informacją mówiącą w jakim stylu pomieszczenie ma być wykończone → na wyjściu powinniśmy otrzymać obraz o takich samych elementach, ale odmiennym charakterze
  3. Można pewnie jakoś podpiąć EditGANa i na sztywno określić jakie modyfikacje ma wykonywać
MatOgr commented 1 year ago

Wszystko zostanie wyłonione podczas realizacji #39 i #38