ITニュース速報

ITを中心に、政治・経済・ガジェットの話題についてまとめています。

広告

ジョジョのキャラクター風に顔写真を変換する「JoJoGAN」 1枚の画像からAIが学習 [156193805]

2022年01月06日 21:32 コメント(0)

1:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:50:45 ID:6ehE2mvL0●

https://img.5ch.net/ico/monaazarashi_1.gif
米イリノイ大学アーバナ・シャンペーン校の研究チームが開発した「JoJoGAN: One Shot Face Stylization」は、入力した1枚の顔画像を漫画「ジョジョの奇妙な冒険」のキャラクター風に変換する機械学習フレームワークだ。「空条承太郎」など、作中のキャラクタースタイルに似せた顔に変換する。このフレームワークは、大量のペア画像データセットを使わず、1枚の顔画像から学習できる特性を持つ。

画像をスタイル変換するモデルは、大量のペア画像データセットを必要とするが、そのデータを準備するにはコストがかかる。数枚の画像からスタイル変換する研究も報告されているが、詳細なスタイルや多様性を捉えきれず、画質も不十分だ。

この手法では、1枚の参照画像から近似するペア画像データを先に生成し、それを学習に使用する方法でこの問題に取り組む。具体的には、1枚の参照スタイル画像をGANで反転して実写に対する潜在変数を取得し、Random Style Mixingを行うことで近似のペア画像データセットを作成する。

得られた近似のペア画像データセットには、さまざまな色特性を持つサブセットも含まれる。ペア画像データセットを生成した後は、事前に学習させたStyleGANを微調整する

変換した顔画像を評価するために、先行研究の類似手法(StyleGAN -NADA、BlendGAN)で出力した画像と比べた結果、他の類似手法よりもこの手法の方が、入力画像の顔のアイデンティティーを保持したまま、目の形や線の太さなどの詳細な特徴を捉えた画像を生成できると分かった。

Webブラウザ上で任意の顔画像をジョジョ風などに変換できるデモサイトも公開されている。試してみると、以下のような結果が出力された。

https://www.itmedia.co.jp/news/articles/2201/06/news037.html




32:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:23:23 ID:nDWKVmdn0

>>1
外側だけで中身を考慮してなくて草
やっぱヲタが作っただけある

31:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:21:08 ID:b7br8SpO0

>>1
これはできるんじゃ?

2:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:52:31 ID:ycxf26yw0

何でもかんでもAIAI言う今の社会に違和感
ただのマスデータとアルゴリズム処理だろ

3:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:53:41 ID:HovNJ27a0

岡くんはアレッシーかな

4:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:54:12 ID:wHAXh0XQ0

クオリティが低いジョ

5:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:54:20 ID:DMYemjhF0

アメリカ風味が入ってる

6:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:55:23 ID:34qGEQYU0

でもこれ表情を似せてるだけで写真の顔立ちには似てないよな

8:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:56:43 ID:1ZoLSfLW0

仕上がり微妙だな。有料なら金返せとか言われるレベル

10:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:58:23 ID:6is5Srbm0

ペッシや重ちーみたいに変換されないのか

12:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:58:41 ID:NDQW1JLR0

アメコミ入ってるぞ

13:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:58:46 ID:OjbJQSmc0

進撃風だが

15:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 18:59:25 ID:nDLG2SJo0

あいつら漫画版の存在知らんの?

16:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:00:57 ID:MB7EjCqG0

カイジ風も頼む

18:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:01:31 ID:gstdNTov0

なんか目がギラギラしとるな

20:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:03:47 ID:khiuYLCb0

思ったよりつまらなかった
もうちょっと、こう…

21:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:03:58 ID:LcLFwsrA0

あの人今でも手書きやからAIで設定されるのはコレジャナイ感が

22:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:05:19 ID:lrhBiXn90

顔のパーツを認識して、絵をベースに角度やサイズを調整してるだけだなこれ
こんなの俺でもプログラミングできない

25:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:10:22 ID:0BvfxvLv0

目がワンパターンじゃあないか

30:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:19:53 ID:HJQRzoQ+0

全然ジョジョじゃない件

34:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:26:29 ID:UAig/RHT0

ジョジョではないな

35:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:28:10 ID:Y9easdkl0

一枚目の右は美味しんぼの山岡栗田

36:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:34:11 ID:YA1ZduzDq

髪と骨格以外ほぼ同一じゃねえか

37:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:39:13 ID:3tn6HZ/EG

無駄ぁぁぁああああああああ!!!!!!!!!!!!!!!


やれやれだぜ

38:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:36:24 ID:A+OKK5KI0

漫☆画太郎風になるやつが欲しい

39:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:44:20 ID:+W7bRRrd0

モデルになってるのが美男美女で顔立ち整ってるやつばっかりやん
もっと癖のあるやつをサンプルにしろよ

40:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:44:52 ID:6Wn5Idnj0

オインゴボインゴ風味が足りない

42:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:54:10 ID:ir0iF4VF0

ディズニーがギャグ枠だと初めて知った

44:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:55:31 ID:SWDEVTlL0

ポーズは?

45:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:56:06 ID:Tn+TWXz90

カイジ風になったら起こして

46:おれんじーず(SB-iPhone) [CN] 2022/01/06(木) 19:56:36 ID:uWcEtuqr0

目が一緒なのがコワイ

引用元: http://hayabusa3.2ch.sc/test/read.cgi/news/1641462645/


コメント