【AIコラ】fakeapp その13【革命】

2020/03/08(日) 21:28:26.92

deepfakesの技術交換スレです。

前スレ
【AIコラ】fakeapp その12【革命】
https://phoebe.bbspink.com/test/read.cgi/ascii/1580015540/

テンプレに書いてない質問はok

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2020/12/01(火) 19:46:45.63

まず知り合いに似てるAV女優や好きな顔したグラビアアイドル探すんだよ
それが見つかればあとは根気次第で素敵なオカズが作り放題だ、まあそんな顔した人間見つけるって前提が難しいが

2020/12/01(火) 20:05:18.90

恥かくだけだからあり得ない妄想で語るなよ

2020/12/01(火) 20:33:56.10

ある程度iterの伸びたDF系modelを流用すれば写真数枚でも結構出来るぞ
素材が豊富ならliae系だと髪型や輪郭の齟齬も巧い事trainで馴染ませてくれる

2020/12/01(火) 20:41:35.25

その程度じゃ正面以外はクリーチャー
はい論破

2020/12/01(火) 21:26:54.01

普通知り合いとハメ撮りした映像srcに使うよね？

2020/12/01(火) 21:49:11.93

>>718
そんなキレイに撮影出来るものなの？

2020/12/01(火) 21:52:41.28

Gigapixelで高画質化まではした

2020/12/01(火) 22:08:03.61

意味あるの？

2020/12/01(火) 22:10:57.93

劣化するだけで特に意味は無い

2020/12/01(火) 23:25:13.05

DFL の XsegEditor の使い方で教えてください

右上から「緑」(HotKey[2]) を選んで顔を囲うことでマスクが出来ているようなのですが、「赤」「青」は何のためにあるのでしょう？
まさか、RGB の色ごとにマスク作ることなんてしないですよね？

「緑」で顔を囲うのではなく、障害物の方を囲んで自動的に避けるよう train することは出来ないのでしょうか？

2020/12/02(水) 00:05:16.68

色は関係ないから好きなのどうぞ
左上の実践のがマスクで、その下の点線が障害物

**723** (ﾜｯﾁｮｲ 4ee5-l3pW) · 2020/12/02(水) 12:34:10.91

>>724
ありがと！（やっぱり赤緑青は区別ないのか。。。

左の点線の使い方がわかってなかたのですが、そうか、これが障害物マスクなんですね。助かります
早速やってみよう

2020/12/02(水) 13:31:28.16

>>716
枚数少ないときはliaeの方がいいって過去スレで見たんだがdfのほうがいいのか？

2020/12/02(水) 13:56:37.91

>>713
一緒に飲み食いできる仲ならみんなの様子を撮ってるフリをしてスマホで撮れば済む話だ
食事中なら今でもマスクはしてないしな

2020/12/03(木) 08:02:37.35

似てるとかは何も考えず5人別の顔で同じアングルの動画を5秒ずつ切り取ってtrainしたら
輪郭もパーツも全然違うのによく似る人と輪郭とかが近しいのに全然別人ってのが出て来た
ほんとに合わせてみないと分からんねこれ・・・

2020/12/03(木) 14:23:29.82

いろんなオプションがあるけど
それらを試行錯誤するより実際に一番効果的なのは素材選び

でも、元々の目的は好きな顔と映像をくっつけたいってことなんだから
素材選びで縛れられるのだったら本末転倒だよね

2020/12/04(金) 09:12:25.99

素材厳選でちんこ萎れるのが難点

2020/12/04(金) 11:35:10.52

>>705
eyes pri　入れっぱなしでは？

2020/12/04(金) 13:07:06.10

俺もこさかなちゃんのVRDFにチンコ入れっぱなし
VRは見つめあえるから良いね

2020/12/05(土) 10:36:24.36

仕上がりは別として、みんな、最大でどれくらいのイタレーション数回したことがあるんだろ？

2020/12/05(土) 16:49:20.16

初めてDFL使ってるんだけど最後の静止画を動画に戻す工程だけができない。
↓のエラーが出るんだけどこれってどういう意味だろう？
Error initializing output stream 0:0 -- Error while opening encoder for output stream #0:0 - maybe incorrect parameters such as bit_rate, rate, width or height

2020/12/05(土) 19:03:42.53

元動画のパラメータがおかしいって書いてるな
ビットレートかレートか縦横の画像サイズ
他のソフトでmerge後の画像を連結して動画にしたほうが早そう

2020/12/06(日) 16:39:07.06

いま生きてるのってこのスレしかない？

2020/12/06(日) 17:15:56.92

>>736
最近始めたからわからないけどそうじゃない？
前はもっとあったの？

2020/12/06(日) 17:18:21.40

ついでに聞きたいんだけど、色味を合わせるためにはマージの設定変えたらいいのかな？
素材選びの段階で決まっちゃう？

2020/12/06(日) 17:23:03.87

trainでも寄せられるけどpreview見てもいまいち分からんから
自分はtrainの段階ではnoneでmergeでしか合わせてない
よっぽどかけ離れた色じゃなければ問題ないんじゃないかな
ただ背景の色に引っ張られるときはあるね

2020/12/06(日) 17:24:19.33

みんなは抽出した画像が逆さまになってる時どうしてる？
反転で戻すのか削除するのか

2020/12/06(日) 17:26:47.37

なるほどー
始めたてだからいろいろ悩みながらやってみるわ。

2020/12/06(日) 17:32:43.35

>>740
alignedのファイルは画像ファイルに見えるけどいろんなデータも入ってるから、いじるのはNG
マニュアルでRE-EXTRACTしないとだめ

2020/12/06(日) 18:08:30.26

顔画像抽出の時って似たような画像が何十枚もできるけど
これ全部あったほうがいいの？

2020/12/06(日) 18:33:09.70

srcは削ってもいいけどdstはぱっと見同じでも各フレームに対応してる
消すとそのフレームは元のままになるのでdstは残しましょう

2020/12/06(日) 20:26:41.83

この手の子は説明しても無駄

2020/12/06(日) 21:13:48.72

>>744
ありがとう！
dstは各フレームに対応していたのか！
消したのでやってみたらなんかおかしいと思ったら・・・

2020/12/07(月) 11:45:16.47

srcを500枚でやってみたけどほぼ正面の動画に限れば意外と納得行く形になるな。

2020/12/07(月) 18:16:55.40

srcの角度が足りてるかが重要だよな

2020/12/07(月) 18:18:22.47

自分で作って自分で見るなら正面だけでもいいもんなあ
シーン選びがめんどくさくはなるが

2020/12/07(月) 18:18:57.58

変顔集みたいなsrc継ぎ足したら表情の追従が劇的に改善した
行為中の顔は変顔だった？

2020/12/07(月) 18:34:06.83

枚数も大事なんだろうけどワンパターンじゃだめってことか。
変顔探すのって実は大変じゃないか。。。

2020/12/07(月) 19:22:43.82

>>751
有吉ゼミの激辛料理食いに出てくれたら解決するんだが
難点は字幕が顔にかぶりやすいことだな

2020/12/07(月) 20:27:13.17

face type hの範囲外であれば5%程度までの数の障害物有り画像(唇下までのマイク等)も収束に影響ない
ってmrでiperovが書いた、と過去スレに書いた気がする

2020/12/07(月) 20:28:50.38

本人じゃなくても雰囲気の似てる子を先に覚えさせてそれをベースにすれば
100枚くらいの写真でも主観ものならいい感じに出来る

2020/12/07(月) 21:02:58.42

>>745
それメンス

2020/12/07(月) 23:04:45.15

RTX3090期待してたんだけど、顔抽出がwf-512-100の設定で
1.4ｓ/it でめっちゃ遅い。なにか間違っているんだろうか。バッチ数は
同じモデルで確かに２倍まで上げれたんだが。

2020/12/07(月) 23:38:35.75

結局128とかに画像を縮小してるからgpuでの推論にかかる時間自体はそんなにかからなくて他はcpuでの処理だからな
ssdの書き込み速度も大事

2020/12/08(火) 03:53:55.45

学習結果を再利用するときってmodelフォルダの中のデータをどれかコピペすればいいのかな？
みんな再利用してるのかな？

2020/12/08(火) 06:50:50.30

目を閉じてるシーンにtrainすると殆ど薄目開けた状態になるんだけどこれって目を閉じたsrc不足？単純にtrain不足？

2020/12/08(火) 08:20:45.12

>>759
src不足じゃない？

2020/12/08(火) 10:51:30.64

>>693モザイク破壊と高画質化ってどうやってやるの？？

2020/12/08(火) 12:02:44.18

>>761
高画質化はこれか
https://github.com/AaronFeng753/Waifu2x-Extension-GUI

2020/12/08(火) 15:06:45.88

>>759
目を閉じてる画像は瞬きしてる場面から抽出できる

2020/12/08(火) 17:28:59.05

>>756
RTX3090なら顔抽出、4多重くらいで起動できるはず
多重数上げて早く終わらせることは可能（CPUコア数にもよるけど）

2020/12/08(火) 18:56:29.95

<<764
756ですが4多重とはdflを4つ立ち上げてdstを4分割にして顔抽出するということでしょうか？

2020/12/08(火) 19:21:26.28

>>765
そうですね
DFLの解凍フォルダを4つコピーしてdstなりsrcなりのフレーム毎ファイル群を4分配して
各作業フォルダ内の目的の.batを実行します
自分は3多重まで試しましたがVRAMの余り具合から4多重はいけそうでした

2020/12/08(火) 20:09:49.49

src画像が多かったから瞬きしてる前後を中心に選んだところ、イメージより目の細い子に仕上がった
対応力も求められるが、好きな顔を多く残すのって大事

2020/12/08(火) 20:13:36.36

そうね
自分の脳味噌が本人と認識している画像を多く残した方がよい

2020/12/08(火) 20:38:42.05

srcの名前と画像を隅っこに乗っけると脳みそがより補正しやすい説あるな

2020/12/08(火) 20:57:55.35

半目、白目、ギョロ目はsrcの質と言うよりDFLのaiがバカって部分が大きいと思う
dst×dstで馴染むまでtrainすると補正されやすい

2020/12/08(火) 21:00:00.67

wikiに書いといてよ

2020/12/08(火) 21:00:52.16

srcのインタビュー映像でも隣に表示しながら見ればいいんじゃないか

2020/12/08(火) 22:04:30.12

>>766
なるほど、それは確かに速そうだ。ありがとうございます。

2020/12/08(火) 22:20:58.64

wikiで前回のtrainを参考にするってあるけどalignedフォルダの中身を入れ替えれば
前回の学習を引き継いでやってくれるのかな？

2020/12/08(火) 23:19:14.53

それでいい
けど使いまわす前のプレーンなmodelデータのバックアップは取っておいた方がいい

2020/12/08(火) 23:25:36.48

deepfake関連スレがここにしかないから聞く

質問なんだけど、trainって何時間使うのが良いの？

2020/12/08(火) 23:55:49.61

自分が納得いく時間

2020/12/09(水) 00:04:40.89

似たら終わり

2020/12/09(水) 01:38:28.34

質問まとめてきた

1
例えばウインクしてるDSTだとしたら、ＤＦＬは目を閉じてるＳＲＣと目を開いてるＳＲＣから合成してウインクさせることはできる？

要は感じてる時のしかめっ面がＳＲＣになければ、DSTには応用して使えないの？
イメージとしては、使える部分だけを切り取って貼っていく

2
似てる似てないの結果はどの要素が一番になる？
骨格や歯並びなど

2020/12/09(水) 03:21:16.08

何日かtrainしてるけど全然似ないな
グラフが交差したらOkなのん？

2020/12/09(水) 05:30:04.77

グラフが交差ってどれのこと？

2020/12/09(水) 07:16:24.25

試しにmergeしてみれば？
意外と似てたりするぞ

2020/12/09(水) 09:55:58.56

初心者というよりガイジだらけになったな

2020/12/09(水) 10:08:26.74

>>783
上級者さんかい？
たまたまやり始めの人たちが揃ったんだろうよ。
そんな事言わずに仲良くするなり、もっとレベルの高い話をするなりしようよ。

2020/12/09(水) 10:24:44.19

先月グラボ買ってやり始めたんで色々参考になります…

2020/12/09(水) 10:33:46.95

ちなみに俺は3日前に始めた

2020/12/09(水) 11:18:27.68

>>779
に答えられる人いない？

2020/12/09(水) 12:16:47.17

ここで親切マン待つよりガイド観て試行錯誤するのが近道
いやマジで

2020/12/09(水) 12:19:50.12

>>787
ウインクは寄せはしてくれる片目開け片目瞑り～薄目みたいな
完全再現するにはウインクしてるsrcあれば可能
要は～以降は何言いたいかわからんけどRWtrueでsrcに無い表情を生成しようとする

似る要素は輪郭とパーツの配置が大きいと個人的には思う

2020/12/09(水) 12:37:27.91

髪型も同じじゃないとダメくない？

額を出してるdstと眉まで前髪なsrcでやると、眉の上に変なちょんまげが生えてるresultが出来上がる（涙

2020/12/09(水) 13:06:22.72

xsegつけて0.01くらいまでtrainして通常train中もある程度loss値落ち着いたところでlearnmasktrue
mergeのmask選択をlearned-prd*learned-dst*Xseg-prd*Xseg-dstにすれば前髪問題両津眉問題は回避できる
それでも駄目ならfacetypeの設定がおかしいwfとかでやってないか？

2020/12/09(水) 13:11:07.70

普通にマスク処理してないだけだろ

2020/12/09(水) 13:24:47.08

>>779
1.出来るだけ色んな表情と角度がある方が良いよ！そっちの方がリアルに近づく

2.相性次第
骨格というか輪郭ね

アイドル作成するなら髪型も結構重要だよ
女優なら色んな髪型するけどアイドルは髪型固定が多いから
歯並びは関係ない

**790** (ﾜｯﾁｮｲ a7e5-kNbH) · 2020/12/09(水) 13:50:29.45

>>791-792
わかってないのでよければ教えて。。。

今、色々と設定変えながら試している段階なんだけど、XSegでのマスクは、障害物がないsrc(眉まで前髪)ではやってなくて、
障害物が顔の前に入り込むdst(おでこ出し)のみでやってます。XSegのtrainは62万itr・0.02台まで。
その後本train中。face_typeはf(XSseg、本trainともに)。

本trainで30万itrくらい、ロス値はsrc 0.55・dst 0.25ってところなんだけど、プレビュー見る限り、うまく行きそうなところもあるけれど、
おでこに突如前髪登場、というのもある。
前に試したときはXSegせずで、おでこに前髪がたくさん、でした。

やり方間違ってるかな。。。？

2020/12/09(水) 15:01:17.98

狭い方の範囲に合わせて反対もmask処理してみて
今の場合dstが眉まで前髪かかってるならsrcも眉下で線引き

mergeの時interactive merger使ってる？画像確認しながらmask選択すれば問題ないはず
あとはV押してmask範囲見ながらblur mask modifierを100-150くらいあげれば大抵馴染む

2020/12/09(水) 18:43:16.92

ガイドって言われても英語表記、英語音声だしなあ
まともな解説サイトが無いってのも駄目だわ

2020/12/09(水) 18:50:32.81

俺も質問まとめて来た

1、SRCが髪、手で隠れていてもそれは残したほうがいいのか
残すなら顔の隠れている割合の条件も教えてほしい

2，DSTで顔に髪がかかっているものは採用対象にしないべきか

3、SRCで上下逆さまになっているものがたまに見かける
これはなにもしなくていいの？

4、workが多すぎるんだが、使うおすすめを教えてほしい

5，顔を学習させるのって、あくまでもパッチワークみたいな切り取って貼っていく感じではなく、マシンに顔を記憶させて応用も効かせるっていう考え方であってるよね？
ってことは2つの動画の明度が違っててもいける？

2020/12/09(水) 19:19:38.16

1.消せ
2.消せ
3.消せ
4.？
5.白人→黒人みたいなのは違和感しかないだろうけどある程度はいける

2020/12/09(水) 19:22:05.54

>>797
1 ちゃんと顔が見えてないのは削除
2 dstの髪はxsegとかで大体何とかなるけど邪魔なものはないほうがふさわしい
3 失敗してるので絶対に削除
4の意味はわからない
5 明度の違いぐらいは問題なくやってくれてるけど、仕組みはわからない

2020/12/09(水) 19:26:41.08

1.学習の邪魔になるので削除

2.xsegでマスクして学習させてみる、もしくは違うフォルダに退避させてマージ時に戻してみて上手くいくか探る

3.顔と誤認識してるので削除。横顔の場合角度つきすぎてたら何かおかしいので削除

4.？

5.差が酷すぎなければだいたいいける

自分はこんな認識

2020/12/09(水) 19:35:57.35

>>796
翻訳使えよ

2020/12/09(水) 19:52:37.09

ちょっとひどすぎんな
教師気取りのやつは別に場所作ってそこでやれよ
お前等が構うから他がスルーしてても意味ねえじゃん

**名無し募集中。。。** (ﾜｯﾁｮｲ 7f8b-kHb6) · 2020/12/09(水) 20:21:07.58

いやもうこういうスレなんだよ
日記が来てからかつてのスレは死んだんだ諦めろ

2020/12/09(水) 20:32:08.43

>>802
総合でここでやれって言われてるからな
しかも先月グラボ買った輩が教えてるから教師気取りにも程がある

2020/12/09(水) 21:17:45.78

質問スレが無くなったのは痛い

2020/12/09(水) 21:21:43.80

どうでもいいわ
こちとら文字の書き方を知らんっていうほどの未熟者なんだからシャーペン買う場所教えてくれるだけでも普通に有り難い
あんたら不満だけの奴らは一生レスしないでくれ

2020/12/09(水) 21:36:18.95

逆に昔はどうだったのか知りたい。
結局こういう質問・回答だったんじゃないだろうか？
まさか作品上げあってたなんてないだろうし・・・

2020/12/09(水) 21:40:07.42

5chに質問書いて返ってくるかわからん返事を待つより
その前に過去スレ読んだり"DeepFaceLab"で検索した方が役に立つのに

2020/12/09(水) 22:44:41.97

>>784
上級者っていうかググったりgithubの説明から理解したらこうはならんやろ

2020/12/09(水) 22:49:26.43

>>779
1可能、元ネタ次第。例えば過去スレに説明があるとおり、dst同士で学習して、srcに入れ替えたら楽。少し品質は落ちるけどな。
2表情のパターンと眉かな、そのキャラクターがしない表情は似たところで違和感がある、その次に輪郭。

2020/12/09(水) 22:51:10.17

>>802
酷いのは調べもしないお前だ。過去スレを順番に読むだけでいいんだぜ。馬鹿でもわかる。

2020/12/09(水) 23:03:46.66

普通にGit調べりゃ基本的なことは書いてるし、youtubeにもあるし
まずそこ見てくれ、後は自分で試す
そんなこともできないようじゃ無理

2020/12/09(水) 23:09:46.75

言ってることはよく分かるが、このスレ質問しか書かれないじゃん
過疎スレで自治してても楽しくないよ