【AIコラ】fakeapp その13【革命】

2020/03/08(日) 21:28:26.92

deepfakesの技術交換スレです。

前スレ
【AIコラ】fakeapp その12【革命】
https://phoebe.bbspink.com/test/read.cgi/ascii/1580015540/

テンプレに書いてない質問はok

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2020/10/26(月) 18:31:39.68

>>392
いまいち状況がわかってないが、resultから顔抽出して動画にするのと何か違うん？

2020/10/26(月) 18:42:47.48

>>394
mergeするときのdata_dst\alinged\のjpg群は
同じく
mergeするときのdata_dst\の母体画像から抽出したものでないと上手くmergeできないですよね
jpg側に母体画像のどこの座標から切り取ったかの情報が埋め込まれているはず

なので1回目の成果物から顔アップのFAKE動画を作ろうとなると上のようになるかと
まだ構想段階なので間違ってるかもですが

2020/10/26(月) 18:56:41.91

>>394
ごめんなさい
再mergeすらいらないんじゃない？
という意味では、ある意味そうですが、
例えばRes448で学習させたものを、1回目のmergeで大き過ぎたり小さ過ぎたりな顔で出力したresult.mp4の映像を再利用するよりかは
512x512で均等な顔の大きさで作ったdata_dst.mp4(2)から2回目のmergeをした方が、高品質な顔アップFAKE動画が作れるかな、という期待です

2020/10/26(月) 19:19:03.69

>>396
成果物としてはDSの脳トレにでてくる
顔だけのオッサンみたいなものかい？
そもそもFAKEになってるのかそれはｗ
一回作って揚げてみせてくれと言いたいところだが
共有できんのが痛いな。

2020/10/26(月) 19:27:08.45

>>397
そうですね
アルファマスクを活用すればその脳トレおじさん風にもできそうですね
共有はできないですが上手くワイプ化できれば見栄えは良くなりそうです

2020/10/26(月) 19:32:16.95

そういえばだれか教えてほしいけど。
fake動画の題材にしてもいい人っているんかな？
（もちろんヌードなし真面目な内容で）
トランプとかプーチンとかが何の遠慮もなく使われてるけど
あれも大丈夫なんかな。

2020/10/26(月) 19:48:12.69

ちなみに、
脳トレおじさん状態にして、音声を著作権フリーにしたFAKE動画は法に問われるか？
が興味深いw

2020/10/26(月) 20:07:01.00

既に鬼籍に入った人を題材にした場合はどうなるの？家族とかに訴えられる？

2020/10/26(月) 20:07:50.99

ソースコードいじれる方でしたら
通常のmerge処理のついでに、顔アップ版のmerge画像を出力させること、難しくは無さそうですね

2020/10/26(月) 20:57:31.31

もうやってる

2020/10/26(月) 21:09:20.78

>>393
ありがとー。でもやってみたけどtrain始めてしばらくしたらsysnc errorみたいなの吐いて落ちる。
環境かなぁ　1.0のopenCLなら問題ないからこっちで頑張るか…

2020/10/26(月) 22:07:43.86

>>404
train自体は始まるけど暫くしたら落ちる感じ？
設定を軽量にしても落ちるなら原因わからんね。
そもそも始まらないならインストールの手順がおかしいかもと思うけど。

2020/10/27(火) 01:03:44.68

>>405
Quick96もSHADEも始まるものの数分で止まりますね。Vramも余裕あるけど
エラー吐いて止まるっていう。やっぱ環境すかねぇ…
1.0使いながら正式対応版期待してまっときますｗ

2020/10/27(火) 16:20:03.15

同僚とか近くのコンビニの店員で作りたいけど写真手に入れるハードルが高すぎる
ばれたらえらいことやから盗撮は出来んし‥

2020/10/27(火) 16:32:25.77

顔認証システムのAIを作ってるエンジニアです
1万円支払うので協力願えませんか？
色んな角度から動画撮影を行いますが他では使いません！

2020/10/27(火) 16:36:30.46

一万で手に入るなら払うけど怪しすぎるわwww
snsとかやってたら簡単に手に入るんだろうけどなぁ
あと10年もしたら卒アルから作れるようになったりしてな
法律が進んでディープフェイク作成ソフトの公開が違法になるかもしらんが

2020/10/27(火) 16:45:21.53

上を向いた顔を集めるのが大変だわ

2020/10/27(火) 20:32:08.75

あんがい写真だけでも数あれば割と作れるもんだね

2020/10/27(火) 20:46:34.87

はあ？
エアプは黙ってろよ

2020/10/27(火) 21:34:33.00

10万回以上回したモデル流用して、正面に限るけどね
正面だけならほぼ問題ないぞ

2020/10/27(火) 22:56:48.00

友達の結婚式のコメントを集めてるけど
友達が少ないから友達のフリをしてコメント動画を撮らせて下さい
お願いしますっ！！┏〇
台本考えて3パターンくらい撮らせてもらえば尺もクリア

2020/10/27(火) 23:26:15.84

推しとのオンライン握手会であっち向いてホイw

2020/10/28(水) 00:28:16.33

自分用でシーン集められるなら別に正面だけでもいいしな

2020/10/28(水) 15:03:18.86

DFLってグラボのSLIに対応してる？

2020/10/28(水) 16:30:57.16

前出のRadeの者ですが、2.0でお聞きしたい事がもう一点あります。
コンバート時の色合わせって、現バージョンでは何か進展してますか？

1.0のクローズまで色々オプションパラが追加されたけど、どれも使いもんにならず、
結局は初代のOverlay＆rctが一番マシって状況が続いてました。
（idtだと一番マシなOverlayでも、極端なダイナミックレンジで白飛び・黒飛びが出るし、
HistmachやSeamlessを使用すると、erodeやBlurで範囲拡張する場合、周辺の色が交じる上
障害物があるとFan-X使っても混じってしまい完全に破綻するし、常に色が暴れる）

Overlay＆rctではカラーレンジが狭く、逆光や片側光源では陰影が一致せず、
アルファ吐きで動画編集ソフト上にて手動補正でなんとか色・陰影合わせするしか無いけど
一番仕上がりがマトモって状況が続いてました。

均一光源のDst使えば良いんですが、そういう映像だからFake動画がつまらん絵になるワケで
美しい印影の動画で作ると、かなりエロい高級なのが出来るんです。

っつーワケで、最新版での色・陰影合わせ・色ブレ対策はどんな感じになってます？

2020/10/28(水) 19:06:46.98

>>417
してる、ただメモリが倍になるだけで
trainが早くはならないので注意。
（でもface extractは倍速になるので
結構気に入ってる）

2020/10/29(木) 12:37:14.74

>>398
普通にmergeする時にmodeをraw-predictにすれば近いものは作れますね
train時のプレビューが出力されるみたいでdstの背景は反映されませんけど

2020/10/29(木) 14:37:07.96

>>420
ありがとうございます
実はソースをいじり始めいて、確かにrawモードってやつだと背景をmergeせずに、学習した顔だけ出力しているようでした
Pythonは未経験でしたが、前後のソースを参考にmergeのコア処理後の顔アップ画像が保存できるようになり、ワイプ化（ここは動画編集ソフトで）できました

2020/10/29(木) 14:41:37.31

ちなみに
この手法で顔アップ動画をつくると、現状の顔抽出ツールの不連続さから、かなり動きがカクツクのですが、連結した後の動画を手ブレ補正系の変換を強く効かせたところ、かなり滑らかなものにできました

2020/10/29(木) 19:34:20.11

質問です
dstの輪郭や目鼻口の位置を無視してsrcをそのまま被せる
もしくはそれに近い設定ってありますか？

2020/10/29(木) 20:11:50.20

GAN上げてみたらどうかな
ただやる前にmodelのバックアップはしておいた方がいい

2020/10/29(木) 21:02:42.69

>>423
mergeでrawを選択したらいんじゃないのかね
ｔｒａｉｎのプレビュー画面の枠全体が置き換わるはず
ただしｔｒａｉｎをしっかりしないと枠内の背景がモヤッとしちゃうが
的外れだったらごめんよ

2020/10/31(土) 00:47:23.27

>>424
ありがとう
GANて解像度が上がるものだと思ってるけど。
それで顔の形変わったりしますか？
>>425
ありがとう、それもやってみます

2020/10/31(土) 23:12:05.58

PCI-E x16スロットがグラボを認識しなくなって、
代わりにx4にさしてるんだけど
これボトルネックになるかな？
特に遅くなってる感じがしないけど。

2020/11/01(日) 10:58:30.22

~pack.batみたいに無圧縮でファイルを纏められて、高速で展開できるツールってなんかないですか？
数千、数万のファイルを操作するのが地味に手間なんで

2020/11/01(日) 14:37:39.08

>>428
.tar形式なら無圧縮なのでそこそこ早いし、フリーツールも沢山あるけど
固めたままでの中身参照はできないんじゃないかな？
自分はSSD→HDDへバックアップ保存や別PCへの転送時に使ってる

2020/11/02(月) 00:51:48.62

>>429
ありがとうございます
試してみます
中身の参照は特に考えてなかったので問題ないです

2020/11/02(月) 09:44:43.49

グラボのメモリが重要なのはわかったけど、2080tiと3080だとどっちのほうがいいの？
メモリとかグラボの性能での違いって時間だけで仕上がりのクオリティには影響ないの？
あとグラボ以外のスペックはどんくらいあったらいいんだろ？

2020/11/02(月) 12:32:20.03

>>431
少なくともDFLが完全に対応したら3080のが上だと思う。
train速度はあくまでCUDAコア数に比例するからメモリ増加で直接的に早くはならない。メモリ倍なら最大バッチ数も倍になるけど、倍速には程遠いというのが所感。バッチ数はクオリティに影響するらしいけど俺は違いわからん。どっちかっていうと高解像度にしたい時にメモリがネックになるから欲しい。

2020/11/02(月) 12:37:21.30

>>431
CPUは6コア6スレッドの9400Fで常に100%。
RYZEN3700xで8コア16スレッドで50%くらい
6コア12スレッドくらいがちょうどいいのでは。

2020/11/02(月) 12:52:34.95

Google ColabのPro版契約でいつでもVRAM16GBが使えるから、trainはそっちに任せて、CPUはmergeの高速化優先でより多コアなものを、っていう選択肢もあるかな

2020/11/02(月) 14:04:26.56

>>432サンクス
CPUは10世代i7で十分そうか
グラボが悩むなぁ‥3080tiも一部で聞くけど公式発表じゃないもんね
radeonに対応してくれたらいいのにね

2020/11/02(月) 15:17:45.32

i9-9900kだけどtrainは25%～30%くらい
ただmerge to mp4の時は100%に張り付いて爆音爆熱で簡易水冷でも98℃まであがるわ

RTX3000シリーズは現状コスパで3080かなあ
3070はCUDAはいいけどvRAMが足りなさそう

2020/11/02(月) 15:31:20.88

>>436
～.bat の中からffmpegに動画エンコードのコーディック指定するところで
コーディック名をNvidiaグラボのハードウェアエンコードを示すものに書き換えると、CPUの負荷、かなり減るはず
ビデオレートに充分余裕がある場合は仕上がりの品質に差はないんじゃないかな

2020/11/02(月) 15:53:55.91

>>437
おおありがとうやってみます
こんなん絶対過負荷やろと思いながらやってたから助かる

2020/11/02(月) 16:35:32.54

メモリは16gあれば十分？32あったほうがいい？

2020/11/02(月) 16:40:47.13

>>436
空冷9900KF
mergeで100%にはなるけど90度は超えない
51以上でOCしてるならmerge中はやめたほうがいいような
50で十分だし36でも対して変わりないよ

今からなら金あって待てるなら100%　3070よりは3080だね

2020/11/02(月) 16:51:20.82

温度上がりすぎるときって部屋はエアコンガンガンなん？真冬に窓開けててもそんな熱なったりする？

2020/11/02(月) 17:17:37.77

>>434
colabは課金して試して見たが、V100でもめちゃ遅だったよ。すぐ切れるし使い物にならなかった。

2020/11/02(月) 17:20:44.35

>>441真夏にエアコンかけず1日放ったらかしでも何とかなったよ。もちろんいる間はエアコンかける。

2020/11/02(月) 17:22:21.92

>>439
メモリは16で余裕

2020/11/02(月) 18:05:57.25

>>442
Pro版ならうちは最低半日は連続train、可能だけどなぁ
なしかしらのPCブラウザ、立ち上げて接続を維持させておかないと切られる仕様である点はクリアしないといけないけど
夏場、外に出かける時は低電圧のタブレットPCを画面OFFの起動しっぱでColabにたんまり働いてもらった
確かにtrain速度だけなら自宅PCでやる方が速い

2020/11/02(月) 18:15:26.35

真夏とか導線溶けそうだなｗ

2020/11/03(火) 00:41:31.88

DFLで作成しようと思い、素材等準備したんですが、最初からエラーで躓いてます
お力添えよろしくお願いします
【使用ソフト】DFL CUDA9.2SSE
【使用モデル】GeForce GTX 1060 6GB
【スペック】
【内容】' internal\setenv.bat'は内部コマンドまたは
外部コマンド操作可能なプログラムまたはバッチファイルとして
認識されていません
続行するには何かキーを押してください

というエラーが出ます
よろしくお願いします

2020/11/03(火) 00:58:34.58

まずは同じフォルダ内にinternalってフォルダが有るかどうか確認
なければ解凍に失敗してる

2020/11/03(火) 01:46:22.05

>>448
internalというフォルダはあります。
その中にsetenv.batは見当たりません。

とりあえずいったん全部入れなおしてみます

2020/11/03(火) 02:04:15.62

再インストールしたら>>447のエラーは出なくなりましたが、
input_file not found.
Done.

というエラーが出ました。

dstとscrに素材の動画放り込んでるんですが、何がいけないのでしょうか。
お力添えよろしくお願いします。

2020/11/03(火) 02:14:04.74

いろいろ間違ってると思う
ここ読みながら、そのとおりやれば何とかなる
https://www.deepfake.xyz/make_deepfake/how-to-use-deepfacelab/

2020/11/03(火) 03:33:14.00

>>451
ありがとうございます

ずっとそれを見て画像も見比べながらやってるんですが・・・
　Operating System: Windows 10 Home 64-bit
Card name: NVIDIA GeForce GTX 1060 6GB
Manufacturer: NVIDIA
Chip type: GeForce GTX 1060 6GB
これであればDeepFaceLabCUDA9.2SSEで合ってますよね？

2020/11/03(火) 07:53:05.53

>>450
dstとsrcフォルダにいれるのは静止画。
動画はworkspace内にdata_dst、data_srcにリネームして入れる。
バッチファイルを実行したら自動的にフォルダが作成されて動画が静止画に分割されて保存される。
そこからさらにバッチファイル実行して顔抽出。
かなり端折って説明したから詳しい操作はググってね。

2020/11/03(火) 10:53:11.00

>>453
それは理解してます。
書き方が悪かったですね。正しくはdstとscr「の」素材の動画

必要なツールすべてＤＬして、あとはバッチを実行すれば動画から静止画を抽出
してくれてalignedに入るはず・・・なんですが実行しても
input_file not found.
Done.
で終わってしまいます

拡張子は.mp4を入れています。

2020/11/03(火) 11:29:14.77

素材のファイル名をちゃんと書き直してないか
extract imagesを実行してないか、かな

2020/11/03(火) 11:36:55.52

最初のsrcのextractをやってるとしたら、エラーの意味は
workspaceフォルダ内のdata_src.*（拡張子は何でも良い）が存在しない、という意味

2020/11/03(火) 12:02:39.04

>>454
scr→srcかな？

2020/11/03(火) 12:53:07.93

ありそう
✕data_scr.mp4
○data_src.mp4

それかファイルの場所がworkspace直下じゃないか
workspaceフォルダ内のスクショ貼ってくれれば原因わかると思う

2020/11/03(火) 16:57:35.68

動かす前からこんな感じじゃ動いたあととんでもない質問してきそうだな

2020/11/03(火) 22:12:55.11

ちゃんと「JUST DO IT !!」のチュートリアルからやってみようd(￣￣)

2020/11/03(火) 22:49:09.01

そろそろ荒らしか正義マンに転生する頃だ。

ところで「エラ張りAV女優」を教えて欲しい。
有益な情報をくれたらベストマッチ情報をお返しします。

2020/11/03(火) 23:58:21.14

どの程度のエラがいいか分からんけど
吉川あいみ
巨乳エラ

2020/11/04(水) 00:37:32.86

30XX正式対応版きたか！？

2020/11/04(水) 07:50:03.80

また、解説すら読めない奴が沸いてきたなあ

2020/11/04(水) 12:37:29.01

1070から3080に変えたけど明らかにはやくなったわ
部屋もあったまって丁度いい

2020/11/04(水) 18:08:34.34

>>642
吉川あいみの若い頃ってすげぇ可愛いよねー素でそこらのタレントをぶっちぎってる。
ヒンニュー教徒の俺でも、唯一好きな巨乳ですわ。
・・っが、今回は真○よ○子とか深○絵○等の「貧乳エラ」用を探してます。

2020/11/04(水) 18:09:39.80

失礼。
>>462
でした。

2020/11/04(水) 18:19:51.38

伏せ字にする必要あるんか…？

2020/11/04(水) 18:36:17.98

半角は板が無くなったのかよ

2020/11/04(水) 19:30:21.00

3090.300.80.30バッチ6で回し始めた
もっと上げた方が良いかな？
正直この辺の数値良く分からないんだよね

2020/11/04(水) 23:25:24.68

スレストと突然の過去ログ化
>>470
3090ってRTX3000シリーズ？CUDA11
Tensorflowがまだ未サポートなのでは？

2020/11/04(水) 23:54:42.01

過去スレにあったdst x dstの学習で前髪、舌、笛マスク不要になりそう
liae-ud res:128
Xsegマスクした方が速いかも

2020/11/05(木) 01:04:16.00

>>472
自分もdst x dstでやってみて
その後modelを使い回して同じsrc、別のdstでmergeまで
またmodelを使い回して同じsrc、別のdstでmergeまで
と繰り返してると、最初の方はいいけど、そのうち
mergeしても全然dstに似なくなってくる
dst x dstしてるから、当たり前だけど

2020/11/05(木) 01:14:40.34

RTX_3000_buildが問題なく動くようなら俺もそろそろGTX1080ti卒業するか…

2020/11/05(木) 01:36:21.77

Mega.nzに普通に上っていましたね
来年第一四半期にVRAM 48GBでるのでは？なので
BTO PCで80万以内とかだったら買ってもいいな
RTX2000シリーズより安いですよね

2020/11/05(木) 10:26:01.52

>>472
dstを同一人物の範囲でやってみたらどうかな？やってみます

2020/11/05(木) 11:12:26.28

dstA × dstA → srcX x dstA の手法は作品Aの演出、質感を如何に高品質でFAKEとして再現できるか？を目的としていて
これで作ったmodelを更にdstBに流用して似る/似ないの議論は違うんじゃないかな？
もともと過去スレでは、BUKKAKE系の再現方法として紹介されてたはず
海外のBUKKAKEのFAKE動画はホント凄い

2020/11/05(木) 14:36:12.54

海外のあれはそうやって作ってたのか、汁っぽさがあそこまで再現できてるの凄いとは思ってた
dst×dstはsrcが戻ってくるまでけっこう時間がかかるんだよね
でも角度と微妙な表情がよく出るし目線(白目や斜視)もそれで改善されるからわりと必須かもしれない

2020/11/05(木) 15:05:50.83

元々srcごとのモデルはほぼ完成しているような気がして、
dst×dstも0から学習するより速いだろうと言う事で、srcのモデルからdst×dstを学習
また別dstにする場合は、srcのモデルからdst×dstを学習し、
dst×dstを学習したmodelは使い回さないつもりでしたが

2020/11/05(木) 16:01:01.83

dst×dstでLRD trueまで回してから本src入れたら表情出る？
どうしても高画質な悲哀系の表情集まらなくて真顔っぽいのが直るならやってみようかな

2020/11/05(木) 16:17:16.20

そんな。。似ないdstは諦めて、1人似たdstで違うsrcでやっていますし
src 18人までいますし。分かりません
srcの表情は中立顔と笑顔のみですかね
泣き顔dstなんてありませんし

2020/11/06(金) 02:40:54.34

dstxdstで十分に回した後、srcxdstでGAN0.1、batch10で500回程度で眉や口角反映させたまま似せられるね
ただやっぱりsrcに変えてから数回せないのでそもそも似てる人物じゃないと難しいのが難点

2020/11/06(金) 02:44:47.62

顔が似たav嬢とかの真顔、笑顔以外を集めてこの方法でsrc用の表情を稼ぐとかもできそう

2020/11/06(金) 23:21:41.30

3090だとRTX_3000_buildでも顔抽出の途中で「3090が応答しなくなり、止めました」的なエラーが表示されて必ずエラーになる

2020/11/06(金) 23:29:20.19

>>484
顔抽出だけでなく、マージでもエラーになるから3090だと修正版が出るまで何もできないわ

2020/11/06(金) 23:42:12.92

3000シリーズはまだできる環境できない環境あるみたいやな

2020/11/06(金) 23:51:06.02

うちも3090だけどtrainでGAN power使うと異常終了した
有志さんの暫定対応版なら問題ない

2020/11/07(土) 02:01:02.93

なんでRTX3000に対応できるのですかね？
Tensorflow未サポート、Bazel未サポートとか見ましたが
新しい版にならないと未対応の気が
CUDA11、Cudnn、Tensorflow、Bazelとかの対応表は見かけませんが

2020/11/07(土) 02:58:34.08

とりあえず、
抽出はtest版でできる
ほかは11/3版でできる
ほぼ普通に動かすのに1ヶ月くらいは最低かかるっぽいね

2020/11/07(土) 11:51:02.47

RTX3000に対応する気満々で、買っておいても損は無い訳ですかね
しばらく待つつもりですが
CUDAコア多いみたいで速いのかな？RTX2000より安くてありがたい気が

2020/11/07(土) 13:52:37.60

俺の3080はtest版、正式(?)版どっちでも動くんだがtest版の方が早いよねこれ？
正式版はそのうち早くなると期待していいのかな。
test版で問題ないからしばらくはこれでやるけど。
>>490
vram増量版がでるかもしれないし、ラインナップされるまで待ってもいいのでは？＿

2020/11/07(土) 18:47:48.59

>>491
来年第一四半期にでも、AMDへの対抗として、VRAM増量版が出るのでは？
とか噂はあるみたいですね
3080とか2080TiよりCUDAコアが増えていますが、DFLが速かったりしますかね？

2020/11/07(土) 19:11:42.55

箱の外にいる人間がダメになるくらい発熱するならCPUの方が先に逝くよねと独り言