【超解像】画像拡大ソフト総合スレ6【waifu2x】

2021/03/14(日) 23:15:36.34

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。
※人工知能による動画の処理を行うソフトは、他に適したスレがない場合使い方も含めこのスレで扱われる事もあります

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・waifu2xのベンチマーク結果まとめ - Togetter
http://togetter.com/li/831437

・無料で二次元画像を人工知能が補完してハイクオリティで1.6倍/2倍に拡大できる「waifu2x」 (gigazinの記事)
http://gigazine.net/news/20150519-waifu2x/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

・Topaz Video Enhance AI (VEAI)
Topaz Labsによる豊富なAIモデルを用いて動画の超解像やノイズ除去、インターレース解除などが可能なソフト
※有償、ただし30日間のフリートライアル有
https://www.topazlabs.com/video-enhance-ai

・Flowframes
動画のフレーム補間を行えるソフト、複数のAIモデルを選べる、無料版は最新版より少し前のバージョン
最新版の配布はPatreonで月5ドル以上の支援者に対して行われている
https://nmkd.itch.io/flowframes

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2021/05/03(月) 13:39:56.28

>>304
超解像処理＋フレーム補間して後世に残すつもりか・・・・・・

2021/05/03(月) 15:27:00.34

>>284
これどうやって使うの？

2021/05/03(月) 18:45:13.24

>>304
突然自供してて草
お巡りさん～

2021/05/05(水) 00:41:56.97

VEAIってresize-barの効果あるのかな？

2021/05/05(水) 12:34:27.57

VEAIのArtemis Dehaloかなり綺麗になるね
実写はガイヤかと思ってたが、720ぐらいだとこれのほうがいいな

2021/05/05(水) 17:36:36.30

waifu2使って短い動画を高画質にしたいのですが
皆さん、どんな設定

2021/05/05(水) 17:37:11.87

途中返信してまいました

皆さん、どんな設定にしてますか？

2021/05/05(水) 18:54:14.30

どんな設定て言われてもね
元ソースとそれをどうしたいか次第なのでサンプル出すなりしてこれをこうしたいと書いてくれないとエスパーも難しい

2021/05/06(木) 21:10:14.27

初心者なのですが
VEAIのGAIAで処理かけると人間がみな剛毛ぽくなるのですが
仕方ないことでしょうか？

2021/05/06(木) 22:40:02.20

>>312
元ソースはmp4で動画内に人がいるんですが
もう少しはっきりした画質にしたいのです

2021/05/06(木) 23:43:17.73

>>314
一コマだけ↓を使って高解像度化したら
https://jpghd.com/
そのコマをキーフレームにして↓で加工する
https://ebsynth.com/

2021/05/07(金) 07:29:23.45

>>315
凄いの紹介してくれたな！
下のアプリ動画に出来るの？

2021/05/07(金) 11:21:06.72

png画像が連番で保存されるのでそれを繋ぐと動画になる。

2021/05/08(土) 21:49:32.38

>>313
ギガAIはソースの状態が非常に良いものだけだよ。
普通はアルテミスAIを使う。
ソースのS/N比の状態によってHQ-MQ-LQを使い分けね

2021/05/08(土) 21:49:51.94

ガイアだった　

2021/05/09(日) 00:38:42.40

なんかこれだけキレイに拡大できるなら、カメラ性能が良い高価なスマホいれなくなってきたな。

2021/05/09(日) 01:31:06.72

元の画像がキレイじゃないとね

2021/05/09(日) 08:58:48.62

ためしに全く同じ構図で低画質撮って拡大したのと高画質で撮ったのを見比べてそう思うなら用途によっては有りなんじゃない
多分ディテール潰れて比較にならんと思うけどｗ

2021/05/09(日) 11:09:08.80

最近VEAI1.8.1から更新したけどGaiaってまだV5のままなんだな
V6がまだ使えるからいいけどGaiaもテコ入れして欲しいな

2021/05/09(日) 12:37:39.87

俺もロリコンだよ

2021/05/09(日) 12:50:43.38

調べても出なかったので質問させてください
waifu2x-caffe ver1.1.8.4では動作するのですが、
最新のver 1.2.0.4では変換しようとすると「分割サイズが大きすぎます。致命的なエラーが発生しました」と出てしまいアプリケーションが落ちてしまいます。

分割サイズを低くしたりしても変わりませんでした。
グラボがよわよわなのが原因でしょうか？

Win10 64bit
Ｒｙｚｅｎ１７００
ＲＡＭ　１６ＧＢ
GeForce1050　ドライバ最新（Gameready466.27)

2021/05/09(日) 12:51:57.66

waifu2xはバルカン版のほうが安定してね？

2021/05/09(日) 14:23:42.78

>>313
逆にそれを利用して肌感の再現に使ってる
artemisLQとgaiaHQの両方で書き出してブレンドするのが最近好き

どうせ1本だとGPU使用率50%くらいで頭打ちするから2本同時に流しても対して処理時間変わらないしね

2021/05/09(日) 14:34:09.00

>>327
あとFHD→4kのときは

元ソースにartemisHQ9 200%
元ソースを50%にリサイズしてartemisHQ 400%

この2つをブレンドするのも結構好き

倍率で同じモデルでもかなり違いが出る
artemisHQ 400%はかなりデノイズしてくれるし質感も好み

結局ソース次第で適切な手法は変わってくるけど、
処理にはそれなりに時間かかるから面倒でも色々吟味するのが大切やね

2021/05/09(日) 15:47:12.35

ブレンドって？

2021/05/09(日) 16:01:00.54

フリーのオンラインアプリないかい

2021/05/09(日) 16:44:50.48

今までの自分の作業は、VEAIを2度かけしたり、リサイズ挟んだりです。
フレーム補間も興味あるのでダビンチやDAINを使ってました。
作業回数多いわ、時間かかるわです。
DAIN使うと音声の合成もいるし。

現在はFHDのモニターでフルスクリーンでキャプチャーしてます。
その際にラデオンの古井戸を使ってフレーム補間してます。
アップコンバートしてるので輪郭が薄くなったり、全体にぼやけるので
1度だけVEAIで100%で輪郭補強とノイズ除去して終わりです。

派手さや面白みはないけど、ブロックノイズや遠くの人の顔がのっぺらぼうや、
黒くならないです、いまのところは。

脱線話かもだけど参考までに。

2021/05/09(日) 17:03:31.78

>>327
ブレンドするってどういうこと？

2021/05/09(日) 17:13:39.95

直訳しても分からんのかな

2021/05/09(日) 17:25:55.43

>>331
キャプチャーてストリーミング動画とか放送録画？
フレーム補完前にデノイズ(アップスケール)しないと、フレーム補完に悪影響ありそうなもんだけどどうなの？

2021/05/09(日) 17:51:52.09

>>334
基本DVD、ストリーミングもできるけど稀に障害があるからしないです。
ストリーミングを落とすソフトあります。なんちゃらプライムやなんちゃらフリクス等。
自分は持ってますけど。

たしかに先にデノイズが先ですね。その方が効果あると思います。
ラデオンの古井戸は中間フレームが曖昧というか、ぼやけた感じのフレームです。
ないよりはあったほうがいいかなって感じ。
フレームが2倍増えるからVEAIも2倍時間かかりますね、いらないかもだけど。

自分は色々やって失敗したほうが多いからキャプチャーでアップスケールに
逃げたのかもだけど、それで出来た動画は良くも悪くも元動画と同等だから
良しとしてます。元動画次第かもしれないけど。

2021/05/09(日) 22:17:17.75

DVDリッピングしてVEAIかけるだけでいいんじゃなかろうかとも思うけど…フレーム補完は再生時にかけりゃいいわけで
あ、fluid motion使えない別の再生環境で再生したいとかなのかな？

2021/05/10(月) 01:40:37.96

古井戸は書出し出来ないからかけ撮りするしかない
もっと簡単に吐ければもう少し広まったかも知れんな

2021/05/10(月) 02:44:02.07

AsなんたらってソフトでFluidエンコードできた気がするが

2021/05/10(月) 07:25:00.48

>>336
色々作業やって出来が良くないとそれだけでいいかなって思うときある。
フレーム補間もその機能付きのテレビならそれでいいかも。
結局、古いお気に入りの動画（DVD等）を今の技術で少しでも綺麗にとか
してやろうと作業してる自分が好きなのかも。

2021/05/10(月) 14:40:50.79

知る限りのフリーソフトではaviutlの拡張編集で透過度設定して重ねるとかavisynthのoverlay関数使えば好きな比率でブレンド出来るゾ

2021/05/10(月) 16:26:57.54

>>306
ソースとモデル？ダウンロードして、Pythonとライブラリいくつか入れれば使えたよ。

2021/05/11(火) 07:55:43.00

VEAI2.2.0なんかわかりにくい

2021/05/11(火) 10:45:57.42

>>342
そうね、もうAIモデルはユーザーが好みで組み込んでリスト表示化するようにしないとカオスになっていくね

2021/05/11(火) 23:24:21.84

いまテレ東でストップモーション映画のメイキングやってるんだけど、これAI補完で簡略化出来ないのかな？

2021/05/11(火) 23:38:32.09

それストップモーションを否定しとるやん
全コマとるからいいんであって、手抜きするなら全部手抜きしてCGにするかってなっちゃいそう
つーかCGをストップモーション風にするフィルターはもうすでにありそうだし

2021/05/11(火) 23:40:21.62

Robocop (1987) - ED209 Malfunction Scene (AI-Smoothed Animation)
https://www.youtube.com/watch?v=l4r0NLoDdms

2021/05/12(水) 02:58:57.09

DaVinci ResolveにもストップモーションFXあるね

「補間」とは真逆の事（間引き）をやってるのでAIの入る余地ってなくね？

2021/05/12(水) 03:20:08.22

>>347
CGアニメをAIで間引いたり輪郭の線を自動的に曲げて高速移動の表現したりとかできないかなっては思ったりする。

2021/05/12(水) 08:41:25.29

どっちもAI関係なさそう

2021/05/12(水) 09:14:38.22

おや、GeForceのドライバアップデートでgigapixelとVEAIの最適化が入ってるね(スタジオドライバだけ？)

2021/05/12(水) 10:55:16.75

>>350
前の前のドライバから実装されてる

AdobeやTopazは問題ないがDxO系のアプリが全部二重に登録されてるのが謎

2021/05/12(水) 12:14:30.25

>>351
いや最適化のリストじゃなくて、アプデの内容に書いてあるってはなしよ
What’s New in the NVIDIA Studio Driver Version 462.59 WHQL
Applications
New AI features in top creative apps, running on NVIDIA RTX GPUs, are changing - and accelerating - the way we create. The May NVIDIA Studio Driver provides optimal support for the latest AI-powered features in creative applications including NVIDIA Broadcast app v1.2, Topaz Labs Gigapixel, Topaz Labs Video Enhance AI, AVerMedia CamEngine and VoiceEngine, and the latest NVIDIA Omniverse app and connector betas including Omniverse Machinima and Omniverse Audio2Face.

2021/05/12(水) 14:03:50.62

>>352
おー、それはすまん
早速アプデしてVEAI処理させてみたが体感ではわからなっかった・・・
ベンチタイム計測しておくべきだった

2021/05/13(木) 01:43:46.91

>>352
おおいいなーと思ったらstudioだけか。ぱんぴー品もはよ

2021/05/13(木) 06:12:56.71

別にスタシドライバは任意で誰でも入れられるけど…？

2021/05/13(木) 06:48:59.72

ドライバは両方入れていつでも切り替えられるんだぜ

2021/05/13(木) 09:33:29.48

するってえとなにかい？

2021/05/13(木) 16:55:29.56

GigapixelにもVEAIにあるフィルムグレイン欲しいな
まぁGigapixelはPhotoshopから呼び出せるのでひと手間加えれば同じになるけど

2021/05/14(金) 00:47:28.40

二次元画像だったらVEAI無理やり使うよりwaifu2xのCUnetの方が結果良いなぁ
加工時間は全然違うけど画像みたいに一枚一枚しっかり素材がしっかりしているものならwaifu2xの方が有利なのか…？
アニメ加工する時はVEAIの圧勝なのに

2021/05/14(金) 11:53:33.36

gigapixel使いなされ

2021/05/14(金) 22:56:21.83

>>360
もうしわけない、gigapixelも使ってる
あれって色の出力おかしいからかなり明るくなっちゃうんだよね
それとノイズ除去もVEAIより弱いから使いづらい……

**名無しさん＠お腹いっぱい。** · 2021/05/15(土) 17:02:29.02

waifu2x（バージョン 4.3.8）
https://i.imgur.com/zkaIhNS.png
https://i.imgur.com/ZCIpu20.png
https://i.imgur.com/akq4U1J.png
https://i.imgur.com/5sv16cH.png

2021/05/15(土) 17:38:51.97

VEAIで90年代辺りのエロアニメ拡大すんの楽しいわ、お手軽にHD化出来るってすごい時代だな

2021/05/15(土) 20:52:47.02

>>361
gigapixel（5.4.5）は色変わらんし、ノイズ除去もVEAIに負けないクオリティだよ
設定おかしいんじゃね？

2021/05/16(日) 04:59:41.86

アニメ作品に関してはかなりの量比較したが、正直言ってwaifu2xの利点はもはや無料であることぐらいしかないよ。
昨年くらいのバージョンのGigaPixelにならwaifu2にも勝てる要素はあったが、今のバージョンはもう無理。AIモデルの進化が速くて今のところこれに追いつけているニューラル系補間ソフトは皆無になってしまった。
Adobeも参入してきたが全然話にならないクオリティだった。
しかし市場原理を考えるとライバルがいなくなるのは色々問題が起きるのでどこかに頑張ってほしいもんだが。

2021/05/16(日) 05:06:59.40

ん？
静止画ならまだ waifu2x 一択？

2021/05/16(日) 06:54:52.40

イラストなら安定してるとは思うけど、他のエンジンでばっちりハマったときと比べると物足りない

2021/05/16(日) 07:36:38.33

今のgigapixalがどれぐらいなのかは知らないけど、2次元イラストはまだwaifu2x使ってるなぁ

2021/05/16(日) 08:37:14.61

waifu2xって元々アニメ得意じゃないしな

2021/05/16(日) 09:24:12.29

クオリティ云々言うなら文字だけじゃなくてサンプル画像を見せればいいのに

2021/05/16(日) 09:44:06.47

Youtube行きゃ比較動画色々あるだろ

2021/05/16(日) 10:20:06.63

サンプル画像見せて下さい、お願いしますと言え

2021/05/16(日) 10:21:37.46

もっと奥までおちんぽ下さい、お願いします。

2021/05/16(日) 11:02:11.90

そんなら無理してgigapixel使う事もないな
どっちがいい言うても分からん程度だろうしお疲れ様でした

2021/05/17(月) 01:39:51.12

無理して使ってるやつなんているのか？
便利なほうを使うだけだろ
何が言いたいんだ

2021/05/17(月) 01:44:31.62

つか体験版もあるんだから気になるなら自分で調べりゃいいだけなのにな

2021/05/17(月) 04:06:29.22

良いか悪いか自分で決められないんだろ、何でもレビュー頼りの現代病と言える

2021/05/17(月) 10:00:27.44

個人的にはまだwaifuのがいい
もう個人の好みと元素材にもよるんじゃないの？
ギャーギャーうるさいけど

2021/05/17(月) 13:29:49.15

俺も以前は色々試したが今はもうGigapixelしか使ってないや

GigapixelはPhotoshopのPluginから呼び出せるのがクソ便利
レイヤー単位での処理やバッチ（アクション）に組み込めるから単体で使うよりもより高度なことができる

2021/05/17(月) 21:38:29.85

1080pのアニメを4KにするならArtemisのmedium？HQ？とGaia CGのV6どっちがええんやろか

2021/05/17(月) 21:52:43.07

昔のVHSビデオをレコのAVCで取り込んだ物って
インターレースなのでアルテミスは使えないのかな

2021/05/17(月) 22:43:43.85

スタンドアローンでgigapoxel使ってるけど、はやくバッチ有効にしてくれ。１回ボタンポチッとしないといけない

2021/05/17(月) 23:33:28.21

https://help.topazlabs.com/hc/en-us/articles/360054979551-Video-Enhance-AI-Color-Handling

「Video Enhance AI」を使用すると、プレビューで色ずれのような現象が見られることがあります。また、画像出力を使用している場合は、出力でもこの現象が見られることがあります。入力の色空間によって、暗く見えたり明るく見えたりします。これは、Video Enhance AIが元の色空間を維持するための副産物であり、出力に影響を与えるものではありません。
Video Enhance AIは、ピクセルのカラー値を一切変更しません（画質を向上させる場合を除く）。

------------------------------------------------------------------
たまに色変わるってコメ見かけるけど、これ読むとどうやらプレビューで判断してる可能性がありそうだね。プレビューはカラーマネージメントされてないから色変わる可能性があるようだ。

2021/05/17(月) 23:43:13.77

>>380
プレビュー並べて比較して決めれ

2021/05/17(月) 23:47:56.94

>>380
ソースによって変えたほうがいいので、一概にコレ、というのは難しい
なので四分割プレビューで好きなAIモデル並べて比較するのがいいと思うよ
https://dotup.org/uploda/dotup.org2477051.jpg

2021/05/18(火) 00:57:48.01

>>385
わーお
早速アプデしてくる

2021/05/19(水) 01:01:30.70

VEIAで元VHS映像をDTV-3でFHDにしてみたら、綺麗になったけど音がズレた
dtd-3でやり直してる

2021/05/20(木) 01:23:18.45

VEAI2.2にアプデしたらGaiaCGv6が使えなくなってしまった…

2021/05/20(木) 09:31:57.88

最新VEAIで動画出力したら色合い変わったけど
今のとこ変化しないようになってて楽だわ
今まで画像に出力して動画にしてたもんなぁ

2021/05/20(木) 09:46:41.72

ちょっとスレチだけどDainとかRifeのスレってどこにあるの？

2021/05/20(木) 10:49:58.93

>>388
ダウングレードしてV6のモデルバックアップ取ればいける

2021/05/20(木) 12:00:27.14

>>390
動画のフレーム補間もこのスレでよく話題になるよ

2021/05/20(木) 14:13:57.59

>>392
じゃあ大体ここでいいのね

Rifeでmp4出力すると微妙に色変わっちゃうのってどうしたらいいんです？
png出力は遅すぎて断念しました

2021/05/20(木) 14:29:04.23

色の変化に関してはワカランがpng出力が遅すぎってことは無くね？

2021/05/20(木) 14:34:12.04

mp4だと30分もあれば終わるようなやつがpngだと100時間超えになっちゃうのよ

2021/05/20(木) 19:04:35.93

png出力は圧縮にめちゃくちゃ時間かかるからな
1枚だと実感しづらいけど動画レベルの枚数になるとすごい実感できる
bmpで出力した場合と比べても5倍〜10倍以上は時間かかる

2021/05/21(金) 05:28:08.41

pngは解像度が上がると指数関数的にかかる時間が増える気がする

2021/05/21(金) 08:09:28.78

>>393
DainとかRifeのことはわからんが元動画の色空間の再現に対応していないのが問題じゃないかな
元動画を一旦、一般的なRec709とかに変換してから試してみるとか

2021/05/21(金) 08:10:49.85

VEAIはProResの視覚的ロスレスに対応したのは大きいよな
よほどのことじゃない限り静止画出力は必要なくなった

2021/05/21(金) 11:19:57.87

レジュームが出来ないから静止画出力は必要

2021/05/21(金) 12:50:27.73

>>400
あーそれはたしかに。
PCが予期せぬ終了、或いはVEAIが終了する可能性もあるしね

2021/05/21(金) 13:23:25.94

>>401
上手く指定してくっつければ行けるのかもしれないけどね
ストレージ容量も余裕あるし自分は安全の静止画出力派

2021/05/21(金) 16:56:13.40

VEAIは自分のお気に入りのプリセットを複数保存できるようにしてほしい
AIモデルの選択肢が増えたことで一つでは不便になってきた

2021/05/21(金) 19:54:42.97

https://uploader.cc/file/tt1r4aafawa9nip206xjjsesmlwzgemsnvb6uf4edhoez51koz4visp55i8mfit0.mp4

ネットからDLした720x404pxの動画をVEAI（Artemis Low）でFHD化し、DaVinci Resolveで24fps→60fps化テスト。
トランジションの部分とかで映像が結構グニャってしまったけど、先にフレーム補間してからVEAIに持っていけば結果は変わったかも。