일반세미나20200710 [Rotate-and-Render] Unsupervised Photorealistic Face Rotation from Single-View Images

황세례
2021-03-19

일시: 2020.07.10.10:30-12:00

장소: 국제협력관 제2회의실

발표자: 홍제형 박사님

주제: [Rotate-and-Render] Unsupervised Photorealistic Face Rotation from Single-View Images

개요: 복합인지기술과제에서 필요한 얼굴정면화 기술 관련 최신 논문이며, 기존의 다수 방법이 채용한 end-to-end 방식의 image translation이 아니라 3D 기법을 중간에 활용하고 image impainting을 하는 단계형 방식을 적용한 논문으로 이에 대해 공유하고자 합니다.

고민사항: 공개된 코드를 간단하게 실행해본 결과 이전과 비슷하게 학습된 데이터셋에 의존하는 양상을 보이며, 75~90도 등의 많이 틀어진 각도에서는 첫단추인 3D모델링이 잘못되면 이후 결과가 모두 틀어지는 모습을 보이고 있는 것을 볼 수 있어, 이에 대해 고민하고 있습니다.

* 논문: https://arxiv.org/abs/2003.08124
* 코드: https://github.com/Hangz-nju-cuhk/Rotate-and-Render