Полученный алгоритм принимает на вход изображение и текст, по тексту определяет категорию, по категории генерирует скелет человека, далее находит фотографию из датасета, у которой скелет наиболее похож на сгенерируемый, и транслирует позу из полученного изображения на входное.
- сначала производится детализированная сегментация изображения человека, которая включает в себя сегментацию изображения человека и выделение одежды и лица
- по тексту определяется категория и с помощью условной GAN генерируется поза в рамках данной категории
- далее выбирается наиболее похожая по позе фотография человека
- два полученных изображения подаются на вход модели для трасляции изображений, которая возвращает исходное изображение с измененной позой
| Link | Comments |
|---|---|
| SieveNet | Try-On |
| Virtual Try-on with Detail Carving | Try-On |
| Init Photo + Pose + Clothes | Try-On |