【質問】dfl【その4】

**名無しさん＠お腹いっぱい。** · 2022/02/12(土) 17:06:21.44

DeepFaceLab(以下、DFL)の質問&回答スレです

・質問について
日進月歩、モデルやオプションが多様化しているにもかかわらず、局所的な意見が散見されます。
必要に応じて自分の使ってるソフトやモデル、パラメータ等の詳細も書きましょう。

・エラーについて
エラーが出て解決できない場合は、なるべく詳細な情報(環境やどうしてそうなったか)を書きましょう。
特にエラー文は1番のヒントです。ググれば解決することも多いです。自分で解決できない場合はログを全文コピペしましょう。

・ソフトはどれ使えばいい？
利用者が多く情報が多いのはDFL。FSも英語圏では情報が得やすい。他は更新していない。

・必要スペックは？
VRAM容量6GB～が推奨スペック。GPU性能は高い程いい。

・RTXシリーズでも動くの？
FS、DFL共に動く。

【質問】dfl【その3】
https://egg.5ch.net/test/read.cgi/software/1607860934/

**名無しさん＠お腹いっぱい。** · 2022/02/12(土) 17:06:33.82

ほ

**名無しさん＠お腹いっぱい。** · 2022/02/12(土) 17:06:38.26

し

**名無しさん＠お腹いっぱい。** · 2022/02/12(土) 17:06:41.25

ゅ

**名無しさん＠お腹いっぱい。** · 2022/02/12(土) 21:07:34.92

いちょつ

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 11:07:19.37

sage

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 11:07:54.44

初心者からの質問ですいません。
ウィンドウズ10でdfl-colabをインストールしようとすると

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 11:09:36.23

ERROR: pip's dependency resolver does not currently take into account all the packages that are installed. This behaviour is the source of the following dependency conflicts.

WARNING: The following packages were previously imported in this runtime:
[numpy]
You must restart the runtime in order to use newly installed versions.

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 11:12:06.53

と、

ERROR: pip's dependency resolver does not currently take into account
all the packages that are installed.
This behaviour is the source of the following dependency conflicts.
albumentations 0.1.12 requires imgaug<0.2.7,>=0.2.5,
but you have imgaug 0.2.9 which is incompatible.

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 11:12:16.10

が出てきてしまい、インストールがうまくいっていない様子です。
cmdでも、個別に指定されたものを
インストールしようとしてもエラーが出てしまいます。
素人すぎて根本的に何か間違っているようです。

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 13:05:45.98

可能な限り質問へはお答えしたいと思いますので、どのようにすればよいのか教えてください。

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 16:10:07.78

colabはLinux環境を利用するものなので今は忘れて
win用のdflを探してください

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 16:47:23.09

ColabでDFL使った事無いから詳しく分からないけど
1つ目はColabページの一番上のバーにあるランタイム押してからランタイムを再起動でどうかな
2つ目のエラーは表示されても問題無く動くから無視して次の工程進めば良いらしい

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 17:35:40.22

まず返信ありがとうございます。ちなみに、
デバイス名 DESKTOP-32LQILH
プロセッサ Intel(R) Core(TM) i5-6500 CPU @ 3.20GHz 3.20 GHz
実装 RAM 8.00 GB
プロダクト ID 00325-80115-71473-AAOEM
システムの種類 64 ビットオペレーティングシステム、x64 ベースプロセッサ
gpu geforce indexes GTX 1050

を使用してます。win用のdflだと、dfl2では、学習もままならない(dfl1でも)ので残念です。
また、ランタイム再起動でも同じメッセージが出るか、動かなくなります。

漫画喫茶で有料のパソコンを使っていたのですが、出費がバカになりません（泣

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 22:42:59.92

質問

①眼鏡、サングラスかけてるシーンは入れたら悪影響になる？（結果は裸眼にしたい）

②目が画面外に切れてて口元だけ、これは悪影響になる？

③顔の一部に手や物がある、これは悪影響になる？

**名無しさん＠お腹いっぱい。** · 2022/02/13(日) 22:48:04.86

悪影響ってのが何なのかわからないけど、ちゃんと顔が抽出できてるかどうかが鍵
顔の前の障害物はXsegでマスクすれば何てこと無い
体感的には口があれば何となく抽出できるが、目が認識できてないと厳しい

**名無しさん＠お腹いっぱい。** · 2022/02/14(月) 01:04:21.10

目が画面外は無理だよね
障害物に隠れている場合であれば、
予測でランドマークが当たってくれる

**名無しさん＠お腹いっぱい。** · 2022/02/14(月) 14:40:24.24

音声のディープフェイク作れるソフトって公開されてないよね？

**名無しさん＠お腹いっぱい。** · 2022/02/15(火) 08:41:20.66

今のところはないな

**名無しさん＠お腹いっぱい。** · 2022/02/16(水) 00:23:28.23

どうしてもうっすら目を開けてる半目状態が出る
train不足？
dst画像は閉じてるのに

**名無しさん＠お腹いっぱい。** · 2022/02/16(水) 01:03:58.43

src不足

目を閉じてる画像何枚か入れるよろし

**名無しさん＠お腹いっぱい。** · 2022/02/16(水) 03:34:31.92

ありがとう
やってみます

**名無しさん＠お腹いっぱい。** · 2022/02/16(水) 21:58:29.78

今まで古いbuild_04_15_2020でやってたんですが、
RTX3060を買って、新たに
DeepFaceLab_NVIDIA_build_04_15_2020
をダウンロードして、
今まで使っていた、workspaceフォルダ一式を移して6) train Quick96
でトレインしてみようと思ったんですが、モデルがないと言われできないです。
バージョンがだいぶ違うとモデル等流用できないんでしょうか？

**名無しさん＠お腹いっぱい。** · 2022/02/16(水) 22:43:46.44

使えるときもあるけど変な結果になることが多いから基本やり直してる

**名無しさん＠お腹いっぱい。** · 2022/02/17(木) 05:32:39.00

アプデしたらモデル使えなくなることはよくある
といっても3060ならquick96は一瞬で作れるし、練習用にしか使わないだろうし
解像度256以上も余裕をもって作れるから今までのモデル使えなくても大したことなさそう

**名無しさん＠お腹いっぱい。** · 2022/02/17(木) 11:29:19.85

できるだけいい作品を作ろうと思うと、まずはちゃんとしたsrc集めからなんですが、その前提としてこのソフトがどういう仕組みなのかちょっとわかってないところがあるんで詳しい人教えてください。
srcの画像とdrtの画像に入れ替えるときに、表情や方向などが一番似ているsrcの画像をそのまま選んで貼り付け処理するというものなのでしょうか。
それとも、目や口や方向、輪郭など、顔のパーツ部分ごとに、一番似ているのは00005の目で001254の口でという感じに割り振ってはめ込んでいるのでしょうか。
前者だと、同じ向きを見ている画像があっても、ちょうど目を閉じているのがない場合には、目が開いてしまうとか、目を閉じたの優先だと少しずれた方向の輪郭のになるとか、という不具合が起きてしまうかもしれません。
後者だと、割と自由が利くのかと思います。
サンプルは映画の元画像を他の映画に置きかえる的なのが多く、ともに目を開けているシーンがほとんどということになりますが、やりたい組み換えの場合、実際にはsrcは映画とかyoutubeとかからの普通の表情＋目開け映像が多いですが、drtはもだえ表情＋目閉じ映像が多いので、実際にマッチングするパーツはかなり少ないのではと思います。
やはりsrcの画像選びはかなりそっちに寄せてしないと結局は似てこないのでしょうか

**名無しさん＠お腹いっぱい。** · 2022/02/17(木) 12:00:02.69

長い

**名無しさん＠お腹いっぱい。** · 2022/02/17(木) 12:05:12.28

①まずDSTはDSTを再現 SRCはSRCを再現するトレーニングをする
②そして↑の情報を使ってDSTをSRCで再現しようとするのがディープフェイク

だからDSTで再現する角度と表情を再現するにはSRC側でそれを再現する十分なフェイスセットを集める必要あり
勿論なくてもある程度は再現するが、SRC不足するほど再現力も不足する

表情自体は完全一致する必要はなくて、単に再現できるための多種多様な表情があればいい
だからこそ正面からちょっと角度つけて表情豊かにインタビューされてる動画が素材によく使われる

**名無しさん＠お腹いっぱい。** · 2022/02/17(木) 12:18:05.89

勿論DSTでしている表情を同じ解像度角度表情でSRC側も用意できたら再現度はかなり高くなる
逆に言うとDSTがSRC側の普段しないような表情してたらそれだけでもう似ない

**名無しさん＠お腹いっぱい。** · 2022/02/17(木) 14:32:23.53

勉強になるな
そういう知識はエロ系動画作成サイトではなく
ディープラーニングのサイトとかで学べそう

**名無しさん＠お腹いっぱい。** · 2022/02/18(金) 05:07:53.67

20です
src30000枚の内、1000枚ほど目を閉じてる画像を
追加してみました
そこからtrainでプラス10万ほどまわしましたが
若干の効果は見受けられました
ただ、30000の内1000枚って少ないですかね？

**名無しさん＠お腹いっぱい。** · 2022/02/18(金) 10:12:14.02

似ないならその部分のSRCを追加が鉄則
DSTが悶えて目つぶっているのばかりなら1/3の1万枚くらいDSTと同じ角度で同じ表情追加できればガンガン似てくるけどね

ただ、だからといって複数ソースからSRC用意するとフェイスセット内での平均顔がずれてきて自分の理想とズれてきがちだからその辺はまじでバランス

**名無しさん＠お腹いっぱい。** · 2022/02/18(金) 10:32:53.68

まぁSRCの整理選定レベルの段階ならquick96で練習した方が楽

**名無しさん＠お腹いっぱい。** · 2022/02/18(金) 21:00:12.90

ありがとうございます
更に追加してみました

ちなみにどうしても苦手な表情があり
(大口を開けて咥えている顔など)
そういう表情も、他の表情と比べて
画像の比率などを再確認してみます

**名無しさん＠お腹いっぱい。** · 2022/02/18(金) 21:20:31.19

3060でがんがん回してたら先月の電気代がえらいことになってた
batch12がまずかったかな

**名無しさん＠お腹いっぱい。** · 2022/02/19(土) 05:28:38.87

src3万枚は大杉

**名無しさん＠お腹いっぱい。** · 2022/02/19(土) 11:16:03.28

200W～を24時間31日ツケッパだからなぁ
とはいえ数千円～でちょい昔のスパコンで遊ぶようなことができるから高い安いは人それぞれだが

**名無しさん＠お腹いっぱい。** · 2022/02/20(日) 14:02:40.39

数千円か？1万以上飛ぶぞ

**名無しさん＠お腹いっぱい。** · 2022/02/20(日) 14:32:39.10

＋5千円ぐらいだよ

**名無しさん＠お腹いっぱい。** · 2022/02/20(日) 19:32:40.09

src多過ぎくらいの方が表情豊かになるから良くない？いつも2万から3万くらいでやるわ

学習済みのデータを流用してるからかもだが新規の人でも5分尺動画バッチ10解像度256で5000くらい回せば形になるわ。気に入ればそのまま継続