【AIコラ】fakeapp その13【革命】

2020/03/08(日) 21:28:26.92

deepfakesの技術交換スレです。

前スレ
【AIコラ】fakeapp その12【革命】
https://phoebe.bbspink.com/test/read.cgi/ascii/1580015540/

テンプレに書いてない質問はok

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2020/03/27(金) 05:45:58.97

liaeはdfにおけるtfの様なお手軽にsrcに寄せるパラメータが無いのが最大の欠点だから
作者も今そこを克服させるために試行錯誤して出してきてるのがliaechだったりliaeuhdなんだろうね

2020/03/28(土) 12:49:45.94

>>57
improvementか、具体的に何か機能を意識した言葉ではなかったのねサンクス

2020/03/28(土) 12:57:22.55

>>24
今さらながらwhole faceを試した
輪郭・前髪ごとガッツリ入れ替えることができてる気がする
髪の色が同じであれば前髪を消すより前髪ごと入れ替えた方が本人感が出る

ただXseg editorでマスクする範囲を手動指定しないといけないのはまあまあしんどい
輪郭・前髪が似てなくても何が何でもsrcに似せたいという気概がある時に使うと良いのかなと思った

2020/03/28(土) 13:16:17.36

>>60
adobeのａｆｔｅｒeffectを使わなくてもXseg editorでマスクすればいいんだよね？
前髪のマスクはかなり面倒だろうなあ
話は変わるけどLiaeuhdはrandom warpでloss値が0.4で頭打ちになる
数値の基準がこれまでと違うのかな

2020/03/28(土) 13:40:47.18

>>61
xseg editorでマスクしてxseg merge.batでマージすればxseg trainを動かせた
ほんで前髪の生え際からがっつり入れ替えられた

もう一つ思ったのは
dst中にがっつり下を向く角度がある時に前髪ごと入れ替えちゃうと、dstの頭頂部とsrcの前髪の継ぎ目が気になる
（正面だと継ぎ目があんまり見えないから目立たなくて綺麗に入れ替わって見える）

まだ試してないけど、頭頂部を含んで入れ替え可能ならより自然になるかもしれない

2020/03/28(土) 14:25:57.27

whole faceで前髪ごと全部入れ替えるってのは面白い
日本ならではの試みかも
前髪がっつりある場合ってそうやって使わないと利点が出てこないもんね

つべに上がってたfullとwholeの比較では
同じ解像度だと当然wholeの方が解像感不足が見て取れた

2020/03/28(土) 14:26:01.58

前髪の挙動はどうなんのよ
srcの前髪が揺れを再現したりするの？　イメージわかない

2020/03/28(土) 17:14:17.05

>>63
外出中だからID変わってると思うが

機会があればやってみて
whole faceの使用報告が少なくて、使ったらどうなったっていう事例は自分も知りたい

2020/03/28(土) 17:28:12.25

>>64
dstの前髪の動きまで再現するかについては正直まだわかってない
自分のデータで見えてる現象は、convert後の動画に前髪の動きはほとんどない

ただ自分のデータはsrcの顔もdstの顔も、もともと前髪の動きがない
だから今のデータだと>>64の疑問は確認できない気がする

2020/03/28(土) 17:35:09.27

whole faceでの前髪交換については↓が気になってる
①srcに複数の前髪形状(右流し、左流し、ぱっつん、デコ出し)の顔を設定した場合、convert後にどの前髪が再現されるのか
②dstの前髪形状に依存してconvert後の前髪が生成されるのか、dstの前髪形状とは関係なく生成されるされるのか

自分でも機会があれば試すつもりだけど、もし分かった人がいたら教えてほしい

2020/03/28(土) 17:35:25.06

facetype.mouth

2020/03/29(日) 11:45:32.71

顔に立体感が出ない時はGANとかで詳細を学習させればいいのかね？
merge後の顔がどうものっぺりというか平面的というか人間味がないんだよな
陰影とか部位ごとの細かな色の違いがない気がするんだよな

2020/03/29(日) 12:55:21.58

trainが動かない時、バッチ数を下げると動きだすが、GANもそういう事があるようだ
GAN 1.0で動き出さないから0.5にしてみたら動いた

2020/03/29(日) 16:14:30.59

>>69
大幅に変わるものでもないけど
GANで少しは改善するかも

2020/03/30(月) 00:35:27.38

口の動きを細かく追従させようと思ったらインタビュー映像とかを高fpsで切り取らないとだめ？
喋るシーンで腹話術状態に陥ってるんだけど

2020/03/30(月) 15:46:08.43

笑顔でほぼ動きないのとかオールカットだぞ

2020/03/30(月) 15:49:45.95

最初のインタビューまで再現したいのかよｗ

2020/03/30(月) 15:58:26.47

「オナニーは毎日してます」とか言ってるdstなら分からんでもないｗ

2020/03/30(月) 18:56:42.79

5fpsぐらいである程度入れておけばなんとかなるよ
dstとの相性もあるのかもしれないが

2020/03/30(月) 19:59:51.31

最近始めたんだけど、DFはデータの水増しとかできるのか疑問です。

2020/03/30(月) 20:39:22.15

俺はこう、ギリギリあり得そうなリアリティのある部分の方が脳が本人だと錯覚するタイプなんだｗ
後は会話シーン再現できたら感動しそうだなとｗ

2020/03/30(月) 20:40:41.42

>>76
サンキュー
目安5fpsぐらいでsrcの会話シーンを連続的にextractしてみる

2020/03/30(月) 23:19:16.55

xsegが拡張されて、fanseg削除になったみたいだけど
実際試してみないと使い勝手が分かんないな

2020/03/30(月) 23:22:48.76

== 2020年3月30日==

新しいスクリプト：

5.XSeg) data_dst/src mask for XSeg trainer - fetch.bat
XSegポリゴンを含む面を、aligned_xseg \ dirにコピーします。

ラベルの付いた顔を収集して他の偽物で再利用する場合にのみ役立ちます。

これで、SAEHDトレーニングプロセスでトレーニング済みのXSegマスクを使用できます。

これは、ランドマークから取得されたデフォルトの「full_face」マスクが、トレーニングされたXSegモデルから取得されたマスクで置き換えられることを意味します。

使用する

5.XSeg.optional）data_dst / data_srcのトレーニング済みマスク-apply.bat

5.XSeg.optional）data_dst / data_srcのトレーニング済みマスク-remove.bat

通常は必要ありません。障害物で 'face_style'と 'bg_style'を使用したい場合は、これを使用できます。

XSegトレーナー：顔のタイプを選択できるようになりました

XSegトレーナー：「オーバーライド設定」でトレーニングを再開できるようになりました

合併：XSeg- *モードをすべてのタイプの面で使用できるようになりました。

したがって、古いMaskEditor、FANSEGモデル、およびFAN-xモードは削除されました。

新しいXSegソリューションの方が優れており、シンプルで便利です。通常のディープフェイクの手動マスキングは1時間だけです。

2020/03/31(火) 09:30:06.53

日記避けの意味無かったな

2020/03/31(火) 10:00:27.66

一週間ngに出来る

2020/03/31(火) 13:06:30.98

新しいソリューションとか望んでないんだよね
顔切り出しの精度を上げるとか
フェラとかキスの舌を認識するとか
基本をレベルアップさせてくれないと

2020/03/31(火) 17:29:20.02

言えてる、オレも顔認識の精度はもっと上げられると思う
前後のコマで認識してて、なんでこのコマを取りこぼすかな？とかあるもんね

2020/03/31(火) 21:22:29.81

マスクの精度上げるだけで質上がるからね
現状キツい角度は手動でもちゃんとランドマークしてくれないことが多い

2020/03/31(火) 22:37:26.38

そうだね、キツい角度と言っても人が見ればすぐ判別つくようなものでも、手動でうまく決まらなくてイライラする

2020/03/31(火) 22:38:37.87

途中で書き込んじゃった
前後のコマから判別するとかのアルゴリズムは入ってないのかな？と思うわ

2020/04/01(水) 06:35:16.47

mask editorをもっと手軽に行えるパッチがほしいわ　現状１コマ１コマ手動とか非現実的すぎる

2020/04/01(水) 10:00:04.29

確蟹
複数フレーム一括適用したい

2020/04/01(水) 19:43:39.07

マスクエディタはちんぷんかんぷんだな
元々フェラは全然作ってないけど、作ろうと思ったら大変そうだった
結局、以前書かれてたdst同士でtrainして下準備するって方法に落ち着いた
https://i.imgur.com/qw7Bsn9.jpg

2020/04/01(水) 20:45:29.36

whole faceやってみたいけど、
liaechを使いたいがために03.07.2020バージョンで止まってて手が出ねえ

2020/04/02(木) 21:01:33.07

0330版でwhole_faceである必要がなくなったけど
XSeg trainでface typeがwfになってしまうので以下

Model_XSegのmodel.py 25行目のwfをfに変更
\workspace\modelにXSeg_default_options.datがある場合は削除

2020/04/03(金) 01:47:31.34

>>93
ほんとだバグってんね
ナイス情報

fanseg消えてしまうってんでなかなか試せずにいたけど
並行環境で試してみたら結構良いねこれ

マスクエディターは変な重さは無くなって比較的扱いやすい
dstもsrcもそれぞれ公式にxsegトレーニングが簡単に出来るのもいい

後はこのトレーニングしたモデルがどの程度汎用性あるのかだな
一度一通り学習出来たものがあれば、dst変えても以前のfansegレベルに機能するのかどうか
この辺を試していきたい

2020/04/03(金) 02:37:22.31

試していきたいって黙ってやればいいだろ
いちいち表明するんじゃねえ

2020/04/03(金) 15:40:50.04

ワッチョイの7e-がガイジなんだからNGするだけだろ

2020/04/03(金) 20:54:30.14

今週の日記
ﾜｯﾁｮｲW 037e-p0ll
ﾜｯﾁｮｲ 55ac-/I61

2020/04/04(土) 02:10:14.45

mask editorだけどマウス右クリでカットしたあとeでセーブ推して次のフレームいってそこからｒとe交互にずっと最後まで押してるけどもっとスピードアップできないものか

2020/04/04(土) 14:41:23.87

頭丸ごと交換キター！
これは面白そう

2020/04/04(土) 14:53:47.79

xsegはfansegでチラつくような場面でも上手く機能して精度はいい感じ
ただやっぱり汎用性はそんなに高くなくてdstが変わる毎にマスクしてトレーニングをしなければならない

fansegのお手軽さが無くなるので、この点はかなりきついと思う

あと旧環境で前髪を通常マスクしたsrcでtf・GANをかけるとマスクが変になったり、マージ後の色味が安定しなかったり変なことになった
原因はまだはっきりとは分からないんで要検証かと

という訳で、完全移行はあまりお勧め出来ない状況なので既存環境と並列して試すのがいいと思う

2020/04/04(土) 14:58:17.95

>>99の入れ替え例
https://www.youtube.com/watch?v=xr5FHd0AdlQ

2020/04/04(土) 17:08:58.77

どうなってんの？w
髪の毛の動きとかどうなんのよ

2020/04/04(土) 19:50:40.31

whole faceすごくいいな
そろそろ前髪問題を解決するアップデートして欲しいけど外人で前髪ある人って稀だからなぁ
日本人が製作者なら真っ先に解決するとこだろうな

2020/04/04(土) 19:58:50.93

>>101
最新のＤＦＬでできるの？？

2020/04/04(土) 20:55:58.56

最新の落としたらFANSEG無くなってて使えない
フルフェイス切り捨てるなよ

2020/04/04(土) 23:26:11.26

liaeuhdってliaehdと比較してsrcに似せる能力段違いに低くない？
他にliaeuhd使った人居たら感想を聞きたい

2020/04/05(日) 12:24:14.19

whole faceの例、男性短髪、正面、背景シンプというやりやすい条件。

女性長髪、横顔、複雑な背景でうまくいくんだったら画期的だけど、どうなん。

2020/04/05(日) 14:44:45.84

>>101
またバージョンアップしたの？
ついていけない

2020/04/05(日) 15:17:28.51

過去にうん時間かけて手動マスクしたのが使えないアプデは勘弁して

2020/04/05(日) 19:19:15.24

マスク時間かけてるやつって１枚１枚指１本からやってそうだよな(´・ω・｀)

2020/04/05(日) 20:33:42.19

full face なくなったのは衝撃だな
whole face ってそんなにええん？

2020/04/06(月) 08:07:58.80

と思ったら統合されとるだけやん

2020/04/06(月) 16:08:30.14

一つ前のバージョンに戻しました俺は

2020/04/07(火) 06:44:45.95

srcをマスクする方法ないですか。
srcの前髪を消したい

2020/04/08(水) 21:13:08.06

みんな家にいるのでcolabの割り当てが…

2020/04/13(月) 05:29:46.96

RTX3000がでたら買い換えようと思ってたけどコロナで遅れそうだよなあ
wholefaceがメジャーになったら1070じゃ厳しいな

2020/04/13(月) 08:34:19.92

2.0のFULLのSRCで何万回か学習させたモデルを別のSRCに使いまわしできますか？

2020/04/13(月) 08:41:50.79

FULLFACEで30マンくらいまわしたけど、尺八がうまくできない、口があきすらしないんだけどどうしたらいいんだ？
どうゆう設定で回したらいいでしょうか？

2020/04/14(火) 00:01:01.96

wholeみたいな頭部自体の挿げ替えは髪短い女性か男性ぐらいしか適用出来そうにない印象あるわ
まあ一応同素材同設定でfとwfでdfhd回してみたけど、fは割と目線反映したのに対してwfはやたら寄り目気味が多くなった

2020/04/17(金) 23:40:43.78

2.0でマージしたときにsrcの顔枠がくっきりするんだが、どの設定をいじればいいいんだ？
単純に学習不足？

2020/04/17(金) 23:47:03.29

blur

2020/04/18(土) 12:28:45.47

gifコラ作ること考えたら超お手軽ツールだよね(´・ω・｀)

2020/04/18(土) 16:54:51.47

DFLcolabで任意のver使えるようにならないかな

2020/04/19(日) 22:11:01.34

merged to mov lossless からダヴィンチリゾルブで調整やっている人いる？

2020/04/20(月) 19:16:04.50

2.0はまだ模索段階だから今すぐ飛びつかなくていいって感じかな

2020/04/21(火) 12:34:40.84

顔に大量ぶっかけのコラを作れてこそ職人

2020/04/25(土) 20:58:51.67

色の水増し機能があったのはどのバージョンだったかわかる人いる？
どうしても顔色が合わないので水増し試してみたいと思う。

2020/04/29(水) 22:09:34.45

日テレでフェイク動画講座やってたよ
GANって結構最先端な機能だったのね

2020/04/30(木) 06:43:29.26

別にそこまで新しいものでもないが

2020/04/30(木) 10:38:09.88

科捜研の女のGANに敵うものは無い

2020/04/30(木) 16:55:24.57

あかん何書いてもイチャモンしか返ってこない

2020/05/01(金) 20:54:29.72

もうDFLスレは死んだよ
目新しい技術もないし、議論もない

2020/05/01(金) 22:06:18.87

fanseg無くなってから新しいバージョンに移行できないな
今のバージョンで満足行くもの作れてるから問題ないし

2020/05/01(金) 23:28:25.80

何事も扱う側のレベルが低いと正しい評価はされない
なんであれをこうしないんだとかおれもよく思ったもんだけど
作者の方がよく考えてるって気付かされる

2020/05/02(土) 00:14:05.96

マシンスペックが足りなくてなあ
RTX30xxも控えてるから今買いかえるわけにもっていう

2020/05/02(土) 00:41:19.80

macで上手くできてる人いる？

2020/05/02(土) 16:14:47.63

乃木専の僕的には眉間V字カットが一番の技術革新ポイントや！

2020/05/02(土) 16:35:43.81

乃木じゃなくても眉間っていらないよね
俺もだいぶ前から切ってるけど特に問題ない

2020/05/02(土) 16:42:50.04

前髪率高いとね
V字ないと今でも両津になるのかね

2020/05/02(土) 21:08:09.77

LandmarksProcessor.pyを弄ってV字カットしたdebug作れたし、convert時にmask_modeをdstにすればそのdebugでmergeできるんだけど、
未カットsrc、dst、modelでそれをやる方法ってない？今あるのをextractしなおす以外に方法ない？
最近復活して、今更V字カットを知ったんだけど、今までのをまたextractするのはきつい…

2020/05/02(土) 21:14:25.70

>>134
iperovの案件とソース読めってノリだから一般人には厳しかったけど
Ver2チュートリアル板で疑問はほぼ解説されてる。
結局オーバレイかよって思ったけど

2020/05/03(日) 15:47:53.78

金正恩のAIコラすごいね。完璧な作品だ。

2020/05/04(月) 23:35:54.81

どこにあるの

2020/05/06(水) 16:56:46.10

坂道系ほぼ前髪固定で3800kだけど眉間も消えるようになったしどうゆう原理か常に隠れてる側の眉毛もある程度反映されるようになった

2020/05/10(日) 22:16:58.83

あほばっかりで見る価値ないな

2020/05/11(月) 17:55:00.66

アホのくせに構ってほしいゴミレスはオマエやｗ

2020/05/12(火) 19:43:33.85

すまぬ
一度編集したdstのマスクを全部リセットするのってどうやってやるのですか(´・ω・｀)？

2020/05/13(水) 23:08:43.84

>>147
5.XSeg) data_dst mask for XSeg trainer - remove.bat
以外でってこと？

2020/05/13(水) 23:09:31.15

2ヶ月ぶりぐらいにソフト更新したらなんかtrain速くなってるな

2020/05/16(土) 01:04:55.99

もしかして1660Tiの6GBってdfl2.0環境では全くスペック足りてない？
1.0だとSAEHDで動いてたのに2.0のSAEHDではバッチ2、ほか最低限動作するレベルまで落としてもメモリエラーで始まりもしない
おとなしく前のに戻るか、Quickとやらがどんなもんなのか試してみるか…

2020/05/16(土) 01:55:27.51

同じグラボ持ってないから分からないけどアーキテクチャ次第では動くかもしれない
dfhd選んでるようだったらdfとか他のにするといいかな
既にそうだったら無理かも
Quickはお試し用だからそれなら1.0使っておいたほうがいい

2020/05/16(土) 13:45:18.93

Xsagって、自分でマスク指定しないといけないの？

**276** (ﾜｯﾁｮｲW bf6d-xocK) · 2020/05/18(月) 00:59:56.33

このところのレベル低下すげえな。github読んでから来いよ…

2020/05/18(月) 01:11:23.35

さあここからレベルの高い書き込みのオンパレードだぞー！

2020/05/18(月) 02:31:35.42

情報欲しいのは商売してる業者と糖質と素人だろ
こいつらにやる情報はねえから絶対書かねえからな

2020/05/18(月) 04:08:40.15

っと言いつつ気になって仕方が無いチョン共
いちいちこっち見んなってｗ

2020/05/19(火) 19:56:06.73

xsegめんどくさそうだから0307でやってるけど何一つ不満ないわ