【質問】df 【その5】
■ このスレッドは過去ログ倉庫に格納されています
DeepFaceLab (以下、DFL)の質問&回答スレです http://egg.2ch.net/test/read.cgi/software/1644653181/ http://egg.2ch.net/test/read.cgi/software/1607860934/ ・作るのにどれくらいかかる？ https://github.com/iperov/DeepFaceLab https://mrdeepfakes....commended-up-to-date https://mrdeepfakes....brity-datasets-guide https://www.deepfake...-to-use-deepfacelab/ https://seesaawiki.jp/dfl/ リクエスト禁止 動画制作のおおまかな流れ 乙です trainを終わらせる感覚がどうも掴めない ちなバッチ8です dst src双方0.35切ったら良いことにしてる eyes_mouth_prioを切って、random_warpをonで google colab proに入れば今でもdeepface使えるみたいだな >>14 ほぼ正面向きだと問題はないんですけど mergeでerodeを-20~70ぐらい?、 blur maskを100~250ぐらいにして >>18 3060で我慢できなくなってTUF 3090が16万切ったから買っちまった 今から3060買おうとしてる俺がいるっていうのに iperovは4000の電力は批判してたけど常に動向は追ってるみたいだから結局対応するんじゃないかな 3090は350wがネックでさすがにお金だけでは 前も書いたけどほんの数%の性能のために限界まで電力使おうとしてるだけだから カードにもよるっぽいんだよね Aシリーズは元から制限かけてるような低電力だから厳しいのかね 機械学習の部分は良いんだけど顔認識の部分がウンコなのはどうにかならんのかね 口がないと予測変換もかなり酷いしね 変な結果になるのは顔の抽出で起きたミスがほとんどだから確かにね 今流行りのイラストAI試してる人いるかな？近い雰囲気を感じるからなんかに使えそう。 試してはいないけど、絵師さんで色々試している人がいるね 308010GBと12GBどっち買うか迷う >>33 バックプレート側にも12枚VRAMが載ってる90よりはマシじゃないかね X-segを使いまわすといつの間にか口の中まで X-segは一度学習させるとはぶく物を覚えて いや3回目が何を指してるか分からないって話なんだけど もうちょっと説明が必要だね 追加学習続けてるとって話なのかただmergeのときに使ってるだけでって話なのか 一枚だけ除外ポリゴンし忘れたのが混じってたときにそんなことになったことがある 有識者の方いたら教えてくれ 一回ちゃんとやろうと思ってMVEでlandmark修正をチマチマやってたら一ヶ月かかってしまった…疲れた >>46 DFLも戦争始まってから更新しなくなったし何か代わりが欲しいね gtx1070で細々と頑張ってましたが潮時かと思い始めて数か月 4000シリーズが近いからアレだけど3060のほうが後悔は少ないだろう 性能としては2060ノーマルに12g載せた感じ そろそろxsegに挑戦したいんですが、前スレでいただいたすごいxsegってとりあえずどこにつっこめばいんでしょうか？ Mr.で貰って来たmodel使ってみたけど1から学習が始まってしまう パッと見た目はわからんけど >>58 >>60 正直作るのめんどい 似てる素材を使うのがいいんだけどね srcを増やすときって、どうやってますか？ 前からあるやつの名前変えて、あらたにextractし直せばいいってことですかね？ 俺はsrcの別のフォルダ作って一旦そこに入れちゃう ①alignedに顔画像がある状態でdata_src(dst) util faceset packを使ってfaceset.pakファイルに顔画像をまとめる ae_dims, e_dims, d_dimsって解像度に対してどれぐらいに設定すればいいの？ 眉のしたからdstの眉出てくるの対処出来ないかな？ そうか、xseg使えるようpc買い替えないとダメだな 前髪のせいで目のところに眉毛のポリゴン来てるとかじゃなくて >>75 modelを再利用できるっていうのは、どういうことでしょうか？ >>76 >>77 >>65 >>81 dst変更してもmodel流用はできるってことで合ってますか？？？ 合ってるよ >>54 とすごいxsegくれた人、ホントにありがとう すごいxsegって、自分が使ってるxsegを置き換える形でいいんですよね？ modelをコピーして名前変えて、別のmodelとして使うことってできますか？？？ modelを色々いじくってブラッシュアップしたいけど、旧modelも出来が悪いわけではないから残しておきたい そりゃコピーすれば残しておけるよ 唇超えてたら除外するけどケースバイケース ベロチューとかベロベロさせたい時は舌除外は必須だな xsegの笛とかベロチューのやり方動画ないですかね？ 質問です 質問 >>95 >>96 >>96 >>97 >>97 >>98 質問なんですが、safhdのtrainが始まりません https://i.imgur.com/Xcf57Wd.jpg 少し待ってから押したらこんなのが出ました https://i.imgur.com/T0m5giI.jpg 直撮りおじさんさぁ… archiまさかのheadか どうもありがとうございます 2にしたらこうなりました、、、 メモリエラーの表示があるから仮想メモリを増やす あと、マージやろうとしたのですが https://i.imgur.com/OYPWcjh.jpg プレビューウィンドウでtab押して1枚目表示されたらパラメータ調整 前髪除外について質問です trainについて質問です そろそろ、RTX4090で使えるかの報告が上がらんかな 3000用DFLで普通に使えるみたいだけど xsegについての質問です >>122 dstの枚数が10万超えるとビデオ化失敗するわ とりあえずフォルダ内を99999枚までに減らしてなんとかしたわ。もっといい対処方法あったんだろうけど。 novel aiちょっといじってみたけど、絵に興味ないとあんまりだな。df使いこなせてる人はローカルnovelaiもすぐ導入できるから遊んでみるのはおすすめ 単に5桁の数字で切り出してるってだけ >>131 つまりdをXに変えるとはわわわになるんですねわかりません srcの人物を変えたいのですが、modelを使いまわした方が良いでしょうか？それとも新しくmodelを作った方が良いでしょうか？ sortを使うと画像番号が狂ってしまうのですが うーん、番号が狂うとaliged_debugと合わなく ただのjpgに見えるけど、内部にデータを持ってるから そうだったのか… dfl使いの方から視てfaceswap はどうですか？ すごいxsegつかってるだけで満足してるレベルでトレインもエンター押しっぱで始めちゃってるけど、トレインsaehdするときにここの数値は変えたほうがいいよってとこあったら教えてくださいm(_ _)m resとバッチは自分の使ってるグラボとの trainの間ゲームできないからPCもう一台欲しくなってきた H256で書き出すのって何を弄れば良いんだっけ？ [17:30:01][#515305][0369ms][0.1327][0.1702] loss値の下がり幅かな 調べないとだけど、とりあえずloss値からですね。ありがとうございますm(_ _)m tacotron2（音声df）試したかたいます？ RTX3060でVARMは12288MB、ドライブの容量には凄く余裕があります。 英語の解説サイトをグーグル翻訳して読むのがおすすめ 3060で32Gだとメモリ云々で困ることはなかったよ 俺も3060だけどメモリ16Gで問題出てないな 考えたこと無かったけどpretrainのときってrandom worpとかのオプション設定はデフォルトのままでいいのかな？ eyes and mouth priorityってどのタイミングで使えばいいんだ？ なんなら最初から入れててもいい 俺は最初から入れて目の瞳が綺麗になったり あー途中で切るっていうのもあるのか ごめん追加で質問なんだけどeyes and mouth priorityと同時に使っちゃいけないオプションってある？ eyesmousePriority入れると画質が制限があると別スレに書いてあった xsegが適用されるのってmergeの時ですよね mergeの時に使う方法と、TRAIN前にapplyして使う方法がある。 ありがとうございます 最初は髪が顔にかからないようなdstとsrcで練習するのがいいよ liae-udtでeyes and mouth priority試してみたけど大きな変化は感じなかったわ EMPって目口を優先的にtrainするってだけでしょ？ ganパワーやtruefaceやるくらいなら解像度上げてった方が結果は良い 最近気づいたけど、srcは画質優先にしたほうがいいね。多少手が写ったりしててもxsegでなんとかなる 結局modelのres設定次第よ 静止画のが画質良くなるからpinterest結構使えるな liaeからdfに変えてみたんだけどtrue face powerってこれはganと同時に使っていいのかな？ wfで笛動画って作れないですか？どうしても笛部分にsrcの口元が重なってしまいます、xsegは使用してます Xsegちゃんとやってるなら、mergeの時のmaskの種類を変えればいい 初心者質問なんですが、肌の色合わせってマージのときにwとsキーでの調整になるんでしょうか？ 質問スレはここで合ってる あと、trainでも肌の色を合わせるとこでrctとか選べるからそれもやっとくといいかも トレインとこでもrctにしといたほうがいいんですね。 Xseg の使い方がいまいちわかりません。 そんな難しいやり方してないから分からん trainのところでenter a name to create a new modelすると、以前のmodelは消えてしまいますか？ >>188 >>189 >>191 merge SAEHDが終わったら自動でmp4が出力されるようにしたいんだけどやってる人いないかな その辺はバッチファイルだから余裕でできると思うけど、PC初心者だと難しいかも merge to mp4で書き出しした時にresult.mp4じゃなくて、 >>192 >>195 batの統合、resultの名前の変更は比較的簡単。自動入力はものによってはハードル高い。 10秒程度の動画をなんとか完成できたけど結構大変やなこれ 1回作れれば、2回目以降はモデルも素材も使いまわせるし、多少時間長くても量産できるようになるけどね。 SRC揃えるのに楽しみを見出して何も作ってない俺みたいなのもいる 今さらmve使ってみたけどheatmap便利だね src角度揃ってもdstの横顔抽出失敗してる事多くて上手くいかないことが多い 特に奥の顔半分の目元とか 横顔抽出はめちゃくちゃ苦手だからdstにするのを避けるか、どうせ横顔なんて似ないから無視するか >>216 ココに貼るくらいなら、ツイでやれば他の作者とも繋がれていいと思うけどな。 >>199 だけどやってみたら自動化できた 左の眉毛だけ前髪で隠れてるsrcを使ってtrainしてたら眉毛ごと右目を反転して左目として使われてしまったのですがそういうものなんですか？ random flipとかをオンにするとそうなるかもね ここで素材集めろ MVEに挑戦してみたいけどMRやdfvfx以外で分かりやすい使い方ガイドがあるサイトありますか? 珍しく規制外れた >>227 dstのランドマークで目を閉じさせればtrain時に閉じ目で学習してくれるという認識であってますか？ ランドマークはXsegしてないときは顔の範囲決めに使われるけど、Xsegすれば位置決めにしか使われない。 それホンマけ？xsegのマスクってtrain範囲を指定するものだけどランドマークと関係ある？ Xsegとランドマークは関係ない。Xsegされてない時にランドマークの輪郭が範囲として代用されるってだけ。 あくまでsrc、dstの学習時に使われない。という話？train時の画面で言う左から２枚目と４枚目の画像。 >>229 >>231 233を書いたものですが、ランドマークで閉じ目判定できるのかなと思った理由が前スレのやり取り↓を見たからです >>176 >>240 mergeすると若干顔の位置がズレるんですが、mergerの設定等で修正できますか？ >>237 >>244 resolution128だと問題ないのですが、256にすると以下のエラーが表示されてしまいます https://imgur.com/5goqn52.png https://imgur.com/0e0I21O.png https://imgur.com/G5v0mbj.png https://imgur.com/dk1oFVI.png batch sizeちょい下げたら動くんじゃない？6とか >>247 グラボ変えたから2年ぶりくらいに復帰してDFLで動画作ってるんだけど、眼鏡かけてるsrcを上手いこと眼鏡かけてないdstに乗せる方法ってなんかあります？ LIAE使わないから分からんけどDFでは出来る。xseg使うなら障害物として認識してると再現されないから注意 >>250 Xseg使って眼鏡のあるsrcをtrainする時って全部のsrcを手動でマスクしなきゃダメなんです？ xsegは何枚か手動でやって、xseg trainしてからapplyすれば、全体が同じようにマスクされるって仕組み 日本人の善良性は良い事なんだよ いつもffでやってて、そろそろwfとかhead試そうと思ってるんだけど、 プレビューで赤い斑点みたいなのでが出てきたが headは頭丸ごと（髪の毛含む）入れ替えたいのだからhead用Xsegを用意する必要あり 俺も最近ffからwfに変えたけど、DFLについてるxsegは元々wf用だよね モデルのdecoderのdstとsrcを入れ替えてやり直すと違和感減るって裏技教わった。多少混ざる感じはあるけど馴染んだ気がする。 >>259-261 プレビューで顔にタイルが張り付いたみたいになったのってもうmodel崩壊しててどうしようもないんでしたっけ？ ちょっとしたノイズならワープyで他の素材学習させれば良くなること多い モデルの～inter.npyを消してからしばらく回してみればどうだろう 静止画を作れるのがあれば足りないsrcを補えるのに headでやってるんだけどPreviewの3番目と4番目の顔の大きさが微妙に違っちゃってない？ 前、ここで教えてもらった万能xsegなるものがある中華のサイト、よくわからんがなんか色々お宝ありそうだなあ。 GUIとか高解像度化とか高速顔検出とか顔素材とか。 日本向けに前髪ぱっつんとか汁トッピングに対応した万能xsegが欲しい 汁物（特化型）と万能（バランス型）じゃあ両立無理でしょ 表情を似せるのにface style powerって使えるんかな。 ここでもらった万能Xsegがめっちゃすごくて、手とか髪とか、汁も結構うまくいくから使っていたけど、おれはfでやってるのにwfのを強引に使っていたり、少し汁にも不満が出てきたから、ゼロから作ってみようと思うけど、やっぱめんどくさいかな？ ラベルの仕方分かっててaligned素材あるなら数十分あれば万能よりはマシなの作れると思うけどな。 今はすべてwfになっているけど、最初はfの方がいいという感じじゃかなったかな？ >>278 前髪込みでやってる なるほどね 前髪まで含める場合って髪のどのあたりまでを範囲にするの？ 俺も前髪込でやってるが、アイドルはこの方が断然似る。ただ境界に違和感出やすい。 wfのほうが横顔の範囲が広いんで斜め向きのときにfより違和感が少ない。 試しに前髪込みで作ってみたら意外と簡単にできた。囲むのも20枚くらいでも大丈夫そう >>278 正面の静止画とエロ動画とかじゃ難易度全然違うからなんとも言えんけどね >>278 がダメとか言うんじゃなくて >286 前髪までマスクってそうかdstのほうもやらなきゃいけないのか trainすると普通に動くんだけど25分毎のセーブで落ちる様になってしまった 俺もセーブで落ちる現象しょっちゅうあった 連休暇だから可愛いだけの動画作った https://i.imgur.com/Ph0RBv1.mp4 連休暇だから可愛いだけの動画作った② https://streamable.com/4cz0l9 耳やりたいならheadにして倍率弄るのが一番。それにしても上手いなぁ >>299 >>299 >>302 model使い回すときってGANのファイルとかもそのまま使うの？ >>306 https://streamable.com/25z9x5 耳出しするかどうかもwfとxsegでコントロールできるのか liae-udtって学習結構重くなりますか？ 重くはなるけど成果物の方向性がかなり違うからどっちが好みかで決めたほうがいいと思う 30人くらいの顔に置き換えて並べた動画見かけたんだけど、それぞれ学習したってこと？一括で出来たりしないよね？ srcが全部別人という意味なら、単に人数分モデル学習して別々にmergeしたんじゃない？ >>314 >>318 >>320 顔のランドマーク漏れを手動で抽出させる作業に億劫な思いしているんだが、pythonとか使ってあの作業をプログラムで実行させるとかってできないの？ 何ら認識に問題ない顔なのに数枚単位で飛ばされるやつなら俺も知りたい >>322 定期的に自動でランダムにマウスを動かしていくプログラムは簡単に作れそうだな pyautoguiとopencv使えばできそうな気がするが、そういう方法とっている人おらんの？ マジメにやるならretinafaceとかマシな顔認識組み込んだ方が早い >>328 画像一枚でfaceswapできる最新のソフトウェアがでた まじでやばい ローカルで環境作ってgpuでやったんだけど https://github.com/s0md3v/roop nsfwフィルターを無効化したい場合はcore.pyの 使ったけど学習モデルの解像度低いし微妙じゃない？ >>331 AI画像生成界隈で生成画像の動画化が次の目標って感じでそういうツールが色々話題になってる。 脈絡なしの唐突にトランスフォームする動画が出来てしまいそうではある >>331 DFLきっかけにAIの勉強を始めているんだが、一瞬話題になったfacejappのようなものを開発できるようになるのはいつのことやら >>331 xsegのeditを使おうとするとpluginが見つからないってでます。どうやったら解決できますか? CPU：i9 13900 >>344 と一緒の症状もあり。 >>345 src,dstとも1万枚くらいまで落とした方が軽くなるんじゃない？ 345だ >>346 >>347 >>348 >>345 で希望したパラメーターで動くようになった。 sage間違ってたなスマン >350 詳しく説明できないですが、ページングファイルはスペックのいいパソコンでも 必要な仮想メモリを知りたい時はタスクマネージャのメモリのコミット済みのところを確認 RTX4060Tiのメモリーが16Gになっていて、RTX3060よりちょっと多くなるけどまあコスパは3060の方がいいとして、もうちょっと解像度上げたいあるいは時間短縮したいなんかで >>351 >>352 >>344 も（多分一緒だと思うが）解決した。 学習時間をどれくらい短くしたいかにもよるけど、1日待てるならbatch 1とか2に下げて、resolution 出来るだけあげた方が幸せになれる。 rtx3060買ったからmodel作り直そうかなと思ってるんだけど モデルを再利用しようと思ったんだけど、設定を変更する画面に行く前に勝手にtrainが始まる >>356 >>358 最近ちょっと疎くて調べたけどよく分からなかったので教えてください。 >>332 MVE使いたいけどYouTubeだとUIやファイルの表示が小さすぎて何を弄ってるかわからないから日本語で分かりやすく解説してるサイトとかないかな？ディスコードだけじゃ理解が追いつかなくて ■ このスレッドは過去ログ倉庫に格納されています
