マスクをした顔から素顔を推定
概要
外ではマスクが必須で素顔を見ることが滅多になくなった未来のための画像変換
CycleGANを利用して、マスクを着用した顔画像から、マスクがない時の素顔へ変換するモデルを構築する 特に有用性はない
10/29
WIP
→おそらく正面画像のみの変換しかできなさそう
音声データを元にfacekeypointを抽出し、そこからpix2pixでfacekeypointとbackbone画像を元に口を生成する論文
自分の顔のみを利用して学習
nomaskの顔画像にバリエーションが少ないから、同じ方向の顔しか現れていない
https://gyazo.com/41d76df52b431b2a3d847be3298d71cb
画像追加
口元が生成されるようになってきた
https://gyazo.com/f58791b30ef897d574471d30be8750df
初期学習
200epoch
顔のパーツを生成しようと黒ずんではいるが、生成することができていない。
https://gyazo.com/a34259759f49a813e04329ddd1158af4
100epoch
マスクは外れたが口などのパーツがまだ構成されていない。
マスクの影部分がまだ残ってしまっている。
https://gyazo.com/3a5266a0a2a8863d45396e42e03bd5cd