【AIコラ】fakeapp その13【革命】

2020/03/08(日) 21:28:26.92

deepfakesの技術交換スレです。

前スレ
【AIコラ】fakeapp その12【革命】
https://phoebe.bbspink.com/test/read.cgi/ascii/1580015540/

テンプレに書いてない質問はok

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2020/11/12(木) 09:28:19.51

5800xと3080で作ろうと思ってたけど3080tiのうわさも出てるし中々買えんな
2080tiと3070だと2080tiのほうがいいのかな？

2020/11/12(木) 09:44:00.29

>>576
フォーラムにXsegマスク済の顔画像があるので、
それを利用してXseg Trainしている(顔はWFが多いけど、Fで)
(9)の最後のやつでMergeしている
srcのモデルに対し、dst×dstでTrain、笛、舌、前髪などがはっきりとプレビューで見える様になるまでTrain
顔の部分にかかった物のみが見えればいいと思います
srcとdstを混ぜて、yaw、pitchでsortして
srcにはあるが、dstには無い、上向き過ぎ、俯き過ぎ、右/左横顔過ぎの顔画像を退避
srcが減って学習が速くなると思います(liae-ud)
dstにあってsrcに無い角度が出てきたら、素材不足なのでsrcをつべから足しています
素材が足りたら、srcを類似でsortして、コピーしたdstを削除して通常srcとdstでtrain

2020/11/12(木) 10:23:49.66

DST探し疲れたら、とりあえず吉良りん使ってみ。
かなり汎用性高いから。
>>572
最近のバージョンって過学習防止とリソース有効活用で、片側トレインオフ付いたんじゃ無いの？
因みに、浮くリソース分って丸々片方のトレインに割り振れるんだろーか？

2020/11/12(木) 11:35:04.74

基本的な質問ですみませんがsrcは複数の動画から作るより一つの動画から作る方が似やすいんですか？

2020/11/12(木) 12:22:41.75

>>580
あまり関係ない
dst動画の顔の角度や表情に合った顔がsrc動画にあれば良い。複数の動画から抽出すれば素材が取れやすくなるかもって話

2020/11/12(木) 12:39:09.90

>>568
今は亡きTwitter界隈の投稿者達の作品見返してたら肌の粒状感？とか目尻の細かいシワまで表現できてるのとかあるけど、GANとかTrueFaceとかでやってんのかね
それともそもそも素材と学習の解像度が高いのか

2020/11/12(木) 12:39:30.15

ごめんアンカーミス

2020/11/12(木) 15:33:14.43

head悪くないな
髪色と長さが合えばまんま本人を作れることもある

2020/11/12(木) 17:06:43.92

皆学習何万回くらい回してるの？

↓くらいの前提だとして
・モデルはpretrain済み
・バッチ数は4～6程度
・動画は3分程度
・resは256

正直自分は1日以上待てないから、10万回くらいで止めてしまうんだけども

2020/11/12(木) 17:27:14.44

>>585
回数じゃなくてloss値が0.2切るまでやってる

2020/11/12(木) 18:06:54.12

>>586
返信サンキュー
lossってresを上げるほど下がりにくくなってくと思うけど、res256とかでも0.2まで待ってる？

2020/11/12(木) 18:25:20.92

>>578
そんな早口で言ったって伝わらないだろ
dstとｄｓｔでtrainみたいな邪道を誰もがやる作業みたいに書くのは、なんか違うと思う
普通にXSegで出来るから、ちゃんとXSeg育てるのが基本

2020/11/12(木) 19:13:45.86

>>587
うん、待つよ。
こないだ作ったやつはres388で1.8くらいまで学習させてたよ。大体一日半くらいかかったかな

2020/11/12(木) 19:31:16.40

>>589
ちゃんと時間かけて待ってんだなあ
てかres388が1日半で0.18までいくのか、グラボは自分のより速そうだ
どうも自分がせっかちなだけなんだな

2020/11/12(木) 19:48:04.57

>>589
ついでに聞きたいんだけど、random warpってどこで切ってる？
大体「lossが下がらなくなったら」てどこでも言われてるけど、下がらなくなるの基準が人によって違いそうだなと

2020/11/12(木) 20:06:17.98

>>590
まぁスリッパ3960xとRTX3090だからね(笑)
コア数も多分速度に関係してるんだと思う。

random warpは触ったことないんだわ。
loss値が前回の保存ポイントの値より高く保存されたときが3,4回続いたら一回止めて、GAN1.0で再学習してる。
それでしばらくほっといたら2.0切ってるからこの辺で終わるか～って感じ

2020/11/12(木) 21:03:20.62

>>592
RTX3000台か、それは速いはずだね
自分は2080tiだからさすがにそれよりは時間がかかる

なるほど、ほんとにlossが横ばいになるまで待ってからGANに移ってるんだね
参考になったわ、サンクス

2020/11/12(木) 21:34:00.85

別にGANも必須じゃないし
むしろ設定してない人の方が多そう

2020/11/12(木) 22:19:58.98

結局どの程度のもの作ってるかもお互いわからない状況での議論には無理があるよね。

2020/11/12(木) 22:49:49.73

一年前にもしてたような話や質問がループしてる

2020/11/12(木) 22:52:07.08

>>576 >>588
XsegはFANSegと違って、作者が作成したモデルは無いからTrainが必要
で、フォーラムにXsegマスク済の顔画像があるから、それをありがたく使わせてもらって、Train
それで、笛、手などは結構いけるかな。舌出しが少ないかも知れない
dstのXsegマスクも、明らかに顔の角度とかが違うコマ数枚程度Maskしてもいいらしい
dstの向かって左側の眉に、前髪とかがかかっていれば、srcの前髪Maskも兼ねるので、なお良い
で、1000回程度Xseg Trainして、モデルにアプライ
それでMergeして見て、うまくいかなかったコマとかの代表をXsegマスクして、またXseg Train

2020/11/12(木) 23:19:32.68

山口偽草レベルで作りたいのですがどうやれば出来ますか？

2020/11/12(木) 23:28:19.66

あのレベルは普通にやれば作れるよ

2020/11/12(木) 23:28:42.82

>>576
Xseg Trainは、(FANSeg Trainと同じく)プレビューを見ると、Random Flipしてるっぽいので、少し左/右横顔どちらでもいけるのでは？
舌出し、前髪ありdstとか優先的にMaskすれば、笛もあるでしょうし
dst×dstの学習は、顔ぶっかけとかやりたい時に、海外勢はそれで作成していたらしい

2020/11/13(金) 14:26:58.55

自分も　res256でやってるけど、
loss値　0.2以下はすごいなあ　50万回以上やってもせいぜい　0.4台です
0.4台で十分精細になっていて満足いくレベルなので、res256だとこんなもんかと
思っていました

2020/11/13(金) 14:35:51.12

0.4って何かしら間違ってると思う

2020/11/13(金) 15:10:57.98

masked_trainingやlr_dropoutのオンオフでloss値は変わるんだし
どんな設定でTrainしてるのか明記せずにloss値だけ書かれても
その数値が良いとも悪いとも言えないし参考にもできないのでは…

2020/11/13(金) 18:13:33.36

むしろ解像度高い方がloss値低くでる

2020/11/13(金) 20:01:53.29

>>601
顔の前に障害物があり、Maskしていないとか？前髪、笛、舌、手等
dimsは？
最新版とかはmasked_trainingオンのみのはず

2020/11/13(金) 20:26:09.99

最新版とか、HDアーキが無くなった代わりに、-udとかで
R/W ON→R/W OFF→lr_dropoutオンにしてくれ
それで似るとか、Loss値が下がるとか
lr_dropoutオンにできない設定だとまずいでしょう

2020/11/13(金) 20:54:46.03

>>605
たぶん、ｓｒｃの枚数が多いからだと自分では思っています　２万枚ほどあるから
そのせいかなと。
設定は　df-ud wf res256 dimsは　320-96-96-22　pretrain済で
もちろんrw off ir-dropout on 　マスクtrain はｏｆｆ（xseg-dst で十分なので）
障害物はないです。

2020/11/13(金) 21:30:49.17

Srcに素材追加したい場合って最初からやり直す他方法ってない感じですか？

2020/11/13(金) 21:37:24.22

残したいsrcのalignedのファイル名を変えるか他に移しておいて
新しいの作ったらそこに足せばいいんじゃないの

2020/11/13(金) 23:09:40.45

>>607
srcは最大でも15,000枚程度とかあったような。。
BestでSortしてはどうでしょうか？もちろんバックアップしてから
自分はsrcのフォルダにdstをコピーして
srcにはあるが、dstには無い、上向き過ぎ、俯き過ぎ、右/左横顔過ぎの顔画像を退避
srcが減って学習が速くなると思います
学習効率を上げる仮説
【初期学習】src画像／dstは適当に1枚
randomwarp/learningmask/lrdropout/trueface等はOFFにして処理速度を上げる
ある程度（数万回？）trainする
【本番】dst画像を作りたいものにして通常trainする
これをsrcごとに行ってそれぞれの学習を進めていく

2020/11/13(金) 23:15:06.67

>>607
wfと言う事は、Xseg Train必須とかありましたね
srcの前髪、おでこのMaskが少なくて、XsegモデルのTrain不足とか？
Xsegモデルを5.XSeg) data_src trained mask - apply.batするとか？

2020/11/13(金) 23:30:25.90

>>610,611
ありがとうございます。
ｓｒｃはなにもソートせず、順番考えず、そのまま使っているので（もちろん、障害物や、
ぼけているやつや、ミスっている不要なのは削除済）
確かにそのせいかもしれませんね。整理してやってみます。
xsegモデルはこのスレで何度かあがっている完成したモデルをそのまま
流用するやりかたをしているので結果としては十分にマスクできているのですが、
今のdstモデルではトレーニングしてないことになるので確かにそれもあるかも
しれないなあ。

2020/11/13(金) 23:57:15.29

>>612
ぬぬ。。
SAEHD_default_options.dat→XSeg_default_options.dat
SAEHD_data.dat→XSeg_data.dat
SAEHD_src_dst_opt→XSeg_256_opt.npy
SAEHD_inter_AB.npy→XSeg_256.npyまたは
SAEHD_decoder_dst.npy→XSeg_256.npy
って事？

2020/11/14(土) 00:02:11.48

masked_trainingがoffだとプレビュー画面で見えてる四角内の全部（顔＋背景）が学習対象になって、loss値の評価も四角内全部になるから絶対値が大きくでる、っていうことじゃないかな？
自分も経験してるけど、間違ってたらごめんなさい

2020/11/14(土) 00:21:24.16

Dstマニュアル顔抽出で2つの顔指定することってできない？vrで片方の顔だけ自動抽出できなかった時に手動で治したいだが片方しか選択できない

2020/11/14(土) 00:53:13.09

masked_trainingがoff/on切り替えられる昔の版で、Onにしておかないと
最新版とかではmasked_trainingがOnにならない(モデル流用時)
新規モデル作成とかだと、無条件でOnになるはず
masked_trainingがOffのままだとまずいのでは？
旧版持っていないですか？

2020/11/14(土) 00:55:38.11

昔、dfhdとかでやっていたので、df-ud、liae-udで無条件に新規Trainしましたね

2020/11/14(土) 01:00:01.64

DFL RTX 3000 Testが動かんくなった
Readyドライバー入れたくらいだけど原因それかな？
戻しても全然始まらんようなった

2020/11/14(土) 02:13:49.31

最新版でもwfとheadはmasked_training好きにオンオフ設定できるよ。
自分はdstの顔の輪郭内に収める時は最後までmasked_trainingオンで回して
輪郭も修正したい時は学習が進んだ最後の方でオフにしてる。

2020/11/14(土) 02:33:14.42

>>612
aligned_xsegフォルダを、dst、srcフォルダの下に置いておけばいいのかな？
> xsegモデルはこのスレで何度かあがっている完成したモデルをそのまま
> 流用するやりかた
どゆこと？

2020/11/14(土) 06:51:24.74

whole faceとfull faceとheadって出来にどういう変化が出るんですか？
とりあえずwhole faceでOK？

2020/11/14(土) 11:58:08.44

>>621
自分の体感だとheadがやっぱり一番違和感なく顔作れると思う。前髪ありdstでもけっこう自然にsrcに入れ替えられてる

2020/11/14(土) 13:01:47.18

>>613
>>620
フォーラムにある　完成されたxsegモデル
（xsegから始まる5つのファイル）をmodel フォルダに置いてすこしxsegトレーニングする
mergeのときに　maskを　xseg-dst にすれば
自分の所感だが、十分に満足できるレベルにあうよ。お手軽でおすすめ。
この見本のedit画面みたけど、境界線の引き方とかすごく丁寧で感動したよ。

2020/11/14(土) 14:03:07.91

日本人モデル向けに眉下で設定したX-segテンプレートほすぃ

2020/11/14(土) 14:11:46.64

modelもそうだけどxsegがeditされたaligend画像が欲しいわ
フォーラム見たけどそれだけまとまってるのは見当たらなかった
翻訳しながらだから見つけられてないだけかもしれないけど

2020/11/14(土) 15:56:18.81

すまん、説明がわるかったかもしれません。
xsegモデルの件だけど、まさにそのeditされたaligned画像があったはず
2.1 [SFW] [NSFW] [GUIDE] [SHARING] - DFL 2.0 XSEG MODEL GUIDE AND SHARING THREAD
にあると思うんだけど。

2020/11/14(土) 20:04:19.37

https://mrdeepfakes.com/forums/forum-guides-and-tutorials
ね

2020/11/15(日) 07:59:48.94

素材スレがスレストされてるな
サポートセンターみたいな真似してると此処もやばいんじゃね
更新や動作環境の話までに留めておけよ

2020/11/15(日) 09:03:15.43

芸能人や女優の名前を書いてただけでアウトだから内容はあんま関係ないな
おそらくdeepfakeってスレタイで消すか決めてる

2020/11/15(日) 14:51:32.00

全く問題ないんだけどもう少し目立たないスレタイにしろって事かもな

2020/11/15(日) 17:10:10.48

【AIコラ】fakeappはまずいと思う
DFLとか略語では？
Google検索にひっかかるけど、上位は関係無いものばかり

2020/11/15(日) 17:15:11.59

Deepfake総合はスレストだけど新スレ立てたな

2020/11/15(日) 21:43:56.55

最初に停められたのは半角の技術スレな
コラの普及に5chを使われるのが嫌なんだろうから
此処で解説や相談はしない方がいい

2020/11/16(月) 01:49:51.49

目立つとかそういうことではなくて、10月から施行された改正著作権法でリーチサイト問題が発生したから、問題あるサイトへのリンクを貼りまくる所が閉鎖されてると聞いてるが…
（書いた本人ではなくて、サイトが罰則を受ける）

半角はそういうサイトへのリンクを貼りまくってる所だから、板ごと閉鎖。スレの問題では無いでしょ。

「成果物」や「素材です」とか言って著作権違反物にリンクを貼ったらアウトだと思うよ。

2020/11/16(月) 11:04:23.47

技術スレも素材スレもそんなことしてなかったろ

2020/11/16(月) 16:56:16.74

5chも簡単に日本の法律に従うようになったんか？

2020/11/16(月) 18:56:10.10

私日本人ニダ
うそじゃないニダ

2020/11/16(月) 19:49:22.39

まだFansegバージョンのままでXsegに移行してないのですが
Xsegって、他の人がtrainしたXsegモデルをもらってコピペすれば使い回しできるようですが
そのXsegモデルが顔前の障害物を十分trainされたものなら、再tranせずにdstにいきなりapplyするだけで
それなりのマスクが適用されるのでしょうか？
またsrc・dstをすでに f でtrainしている場合に、wf のXsegモデルって使えるのでしょうか？
よろしくお願いします

2020/11/16(月) 20:16:30.58

mercury.bbspink.comだと大丈夫とか？

2020/11/16(月) 22:00:04.45

>>638 >>626
フォーラムにあるXsegマスク済の顔(WFが多い？)をFull FaceでXseg Trainしたら
それなりのFull FaceのXsegモデルができました。Batch数も多くできるし、学習は速いです
笛、手などは上手くいくが、舌、前髪などは、自分でXsegマスクが必要かも

2020/11/16(月) 22:14:16.38

学習させてて、人間の目から見たら目立つとこが超最後の方でしか学習されないことあるよね
全体の肌の質感は面積が広いから学習遅くても仕方ないとして、まつ毛と唇の光沢の学習の遅さが毎回気になる

特に唇の光沢が弱いとのっぺりするから優先的に学習してもらいたい

2020/11/16(月) 22:16:40.84

単にピクセル誤差を埋めるように学習するんじゃなくて、人間の目から見て重要なとこを
優先して学習するような仕組みをDFLにも取り込んでほしい

2020/11/16(月) 23:36:01.49

eye priority改造すれば出来るよ

2020/11/17(火) 12:11:41.91

それも大事だけど目鼻口の相対位置を反映させる機能があれば革命的に良くなるのになぁ。

2020/11/18(水) 08:36:41.57

今までフェイスタイプをｆｕｌｌで利用しておりＷＨＯＬＥに挑戦してみようと思いまして。
6) train SAEHDの設定画面でフェイスタイプをｆｕｌｌからＷＨＯＬＥに変更するにはどうしたらしたらいいんでしょうか？
ちなみにＤＳＴとＳＲＣはＷＨＯＬＥ用に細工はしています
一度ＦＵＬＬでやったら変えれないんでしょうか？

2020/11/18(水) 09:08:15.36

facetypeってmodel毎に持ってて初回しか設定出来なくない？
もし変えたかったら新規で作るしかないのかな

2020/11/18(水) 10:50:51.58

まずはwhole feceでextractし直さなきゃ
srcもdstも両方とも
modelも新規に作成してfece typeを選択
pretrain済みのものを拾ってきて利用してもいいけど

2020/11/18(水) 18:32:48.85

whole faceは日本人には意味ないって言われて、やったこと無いな

2020/11/19(木) 00:06:05.88

何時間もCPU&GPU100%で放っておくとすぐPCぶっ壊れそうで怖いな

2020/11/19(木) 01:22:39.91

確か、fullでやっとけばそれより狭い範囲は共用できたでしょ。つまり全部fullでやっとけってこと。

2020/11/19(木) 02:12:53.98

範囲で言えば
head > whole > full
だぞ

2020/11/19(木) 07:17:05.73

>>649
この時期で壊れるなら熱排気が駄目すぎだろ

2020/11/19(木) 08:47:22.71

RTXは3000のbuildあるけど、RX6800XTも対応したbuild出ないと使えないんかな
あの値段でVRAM16GMは魅力だから欲しいんだが

2020/11/19(木) 13:38:01.85

>>653
OPENCL版が過去はあったけど、今はcudaだけ
あきらめろん

2020/11/19(木) 14:30:26.24

もうAI系のソフトにRADEONは使えないだろうなぁ
Video enhance AIもRTXの方が速いし

2020/11/19(木) 15:27:49.81

アイドルも被害「ディープフェイク」まとめサイト管理人を逮捕。芸能団体は「違法なまとめ行為」を批判
https://news.yahoo.co.jp/articles/84edf77306b0e6385ed1819b60b1ca5a4262c839?page=1

まとめサイトにリンクを載せてた管理人が逮捕だって。
損害賠償金もアダルト業界+芸能事務所から来る可能性あるから金額えぐいだろうね。

2020/11/19(木) 15:49:30.49

>>656
これがダメなら袋とじで紹介してた男性誌はどうなるんだよ

2020/11/19(木) 16:16:37.33

今もやってるの？

2020/11/19(木) 16:33:41.42

CPUの多コア化が加速してるし、またopenCL対応しないかな

2020/11/19(木) 16:48:54.67

>捜査幹部は「作ることも拡散することも許されない。摘発を続けて被害を防ぎたい」としている。
ttps://www.asahi.com/articles/ASNCM3RKRNCKUTIL059.html?iref=com_latestnews_01

作るのもだめだってさ

2020/11/19(木) 18:00:34.39

国家の無知っぷりがやばいな
こんなもん誰が見てもフェイクバレバレなのに
「違和感なし」とか「本人そのもの」とかAVの売り文句みたいなのだけ聴いて
悪用されたらめっちゃやべえ技術じゃんとかジジイ達は本気で思ってるんだろうな

2020/11/19(木) 18:19:06.07

>>654
やっぱりそうか…ありがとう

RTXは3080でもVRAM足りないし3090は高すぎるし
噂されてるVRAM20GBの3080Tiを待つしかないな…

2020/11/19(木) 20:52:36.94

むしろ国は利用する方なのにな、証拠捏造で誰でも有罪にできる

2020/11/20(金) 05:18:47.41

1080tiを2000系とか3000系に替えたとして現状のDFLでパフォーマンス差ってどのくらいなんだろう。

2020/11/20(金) 11:48:21.63

雲泥の差

2020/11/20(金) 12:40:08.29

>>664
参考までに、
2080ti→3090に替えたら、解像度倍にして学習時間は半分でできてるよ

2020/11/20(金) 12:48:40.78

>>664
1080ti→2080tiはそんなに変わらないと思う
TENSORコア使わないからCUDAコアで比較してコスパ悪い

2020/11/20(金) 12:51:17.00

まあ寝ている間に学習させているから、倍といっても二十万だす気にはならんなあ
しばらく2080tiでいこうかな

2020/11/20(金) 16:53:29.34

>>666
参考情報ありがとう
買い替えたくなるなぁ

2020/11/20(金) 19:53:48.60

これはいけると思っても微妙に似てない
マッチング難しい・・・

2020/11/20(金) 21:22:18.95

>>651
ごめんheadの間違い

2020/11/20(金) 21:24:19.25

ところで、3000シリーズの3Dベンチマークスコアだと
メモリクロックも重要になるって話を聞いたけど(VRAMじゃない普通のメモリね)
DFLも影響するかな。
わかる人いる？

2020/11/20(金) 21:50:28.64

なんで影響あると思ったの？

2020/11/21(土) 00:42:20.95

3000シリーズの性能高いから安いメモリだと足引っ張るかもと思った。根拠はない。

2020/11/22(日) 07:07:48.29

繋がり眉毛問題だけどsrcの前髪が眉にかかってる画像だけxsegで髪のかからない部分をマスクしてtrainすれば解消する？

2020/11/22(日) 07:38:06.54

dst×dstの学習で有効なのはliae-hdとかみたい
df-hdだと前髪の残骸の黒い物が。。