【超解像】画像拡大ソフト総合スレ6【waifu2x】

2021/03/14(日) 23:15:36.34

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。
※人工知能による動画の処理を行うソフトは、他に適したスレがない場合使い方も含めこのスレで扱われる事もあります

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・waifu2xのベンチマーク結果まとめ - Togetter
http://togetter.com/li/831437

・無料で二次元画像を人工知能が補完してハイクオリティで1.6倍/2倍に拡大できる「waifu2x」 (gigazinの記事)
http://gigazine.net/news/20150519-waifu2x/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

・Topaz Video Enhance AI (VEAI)
Topaz Labsによる豊富なAIモデルを用いて動画の超解像やノイズ除去、インターレース解除などが可能なソフト
※有償、ただし30日間のフリートライアル有
https://www.topazlabs.com/video-enhance-ai

・Flowframes
動画のフレーム補間を行えるソフト、複数のAIモデルを選べる、無料版は最新版より少し前のバージョン
最新版の配布はPatreonで月5ドル以上の支援者に対して行われている
https://nmkd.itch.io/flowframes

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2021/03/25(木) 17:09:43.20

>>102
コマンド入力が面倒くさいからwaifu2x-ncnn-vulkan-GUI-Edition使った事あるけど
こちらもwaifu2x-ncnn-vulkanと同じで、2倍までしか拡大できないので"使えない"。

例えば640×480の画像を8K対応 (長辺を7680×4320のどちらかに合わせる)
にするためには、12倍する必要があるので、たった1枚をアップスケーリングするのに
最低4回は使用せねばならず、その間の画像変質の危惧もある。

画像変質というのは例えばネットの
http://waifu2x.udp.jp/　でも高速で画像を無劣化拡大できるが
(ただし↑は制限がかかっていて最大長辺3000ピクセルまでしか拡大できない)
同じ元画像でもこれを3回使って8倍にしたのと、
waifu2x-caffeで最初から8倍に倍率指定して拡大したのとでは
仕上がりが全然違うという事だ。

2021/03/25(木) 17:28:37.18

Waifu2x-Extension-GUIでなら2倍以外もできるけど内部的にはどうなってるのかわからん

2021/03/25(木) 17:43:10.63

>>104
2倍にしてpngで保存してそのpngを更に拡大してるだけだよ

2021/03/25(木) 19:17:12.52

https://youtu.be/9UFNeISKN7g
スーパー解像度、Gigapixelに比べるとショボイなぁと思ってたが、この動画と同じように連続で実行させると結構いい感じになるわ。手間がかかるのが難点だが

2021/03/25(木) 19:42:21.55

星景写真とかにも使えるのかなもしかして
複数枚な合成ノイズ減らしはしてるけど

2021/03/25(木) 19:46:39.70

>>106
どこがいい感じなんだ？
確かにごく一部のアウトラインやエッジは多少精細化しているが
それ以上に画像全体でゴミやモアレが増えすぎて
画質がどんどん劣化してんじゃん

2021/03/25(木) 19:52:18.92

>>103
なるほど

2021/03/25(木) 20:03:28.10

拡大の間にpng保存を繰り返しても人間が知覚できるほど差は出ないと思うよ

2021/03/25(木) 22:41:22.09

画像圧縮の話じゃないんだよなあ

2021/03/26(金) 02:50:59.96

何か実写向けのAI超解像って粒子をマシマシにして誤魔化してる感があるよな
薄毛に黒パウダーかけてハゲを誤魔化してるのに似てる

2021/03/26(金) 03:14:29.64

AIによるふりかけ

2021/03/26(金) 04:17:14.13

Topaz Video Enhance AI 2.1.0きてたか

2021/03/26(金) 07:44:36.70

モデルのトレーニングって
DFみたいにtrainできるんの？
VIにおけるモデルの概念がわかりません。

2021/03/26(金) 07:45:39.53

あVEでした。

2021/03/26(金) 07:59:12.52

VEAIは学習させるツールじゃなくて結果を生かした超解像ツールなので育て方は公式フォーラムにでも聞いてみたら

2021/03/26(金) 08:01:33.15

>>111
スマン分かりにくかったけど110は>>103に対するレス

2021/03/26(金) 10:16:50.04

VEAI 2.1で何が変わった？

2021/03/26(金) 12:00:49.41

>>103
waifu2xは2倍を超える倍率には2倍にしたデータをソースに更に2倍にするを繰り返してソースより大きくなった場合はLanczos3で縮小する。みたいな実装だったはず。
ノイズ除去つけた場合は初回のみノイズ除去モデル、それ以降はノイズ無しモデル

2021/03/26(金) 15:29:01.08

Waifu2xってVEAIより勝ってる部分てあるの？
アニメに関しても今はVEAIのほうが処理綺麗だと思うんだけど

2021/03/26(金) 15:33:59.74

もともと動画用じゃないしな

2021/03/26(金) 15:49:56.51

動画と画像を同じスレでやると混同する人が出てくるよな

2021/03/26(金) 16:02:21.59

ああ、すまん、
んじゃGigpixelに置換で

2021/03/26(金) 22:48:58.14

リアルタイム補完か否かと画像か映像かで分けるとしたらスレ4ついるのな

2021/03/26(金) 23:49:46.44

もうVEAI専用スレ作ってもいい気がするけどな
だいぶ知名度も上がってきたみたいだから

2021/03/27(土) 01:19:53.08

確かにほしいかも
Topaz総合でもいいぞ

2021/03/27(土) 03:19:17.99

それなら動画拡大ソフト総合で良くね

2021/03/27(土) 08:49:40.80

VEAIは一年以上前から使ってるがこのスレ知ったのはつい最近
ググっても出なかったからスレは無いもんだと思ってた
たぶん他にも俺みたいな奴いるんじゃないかな

2021/03/27(土) 09:14:56.90

VEAIは聖子ちゃんの動画をAIアップスケールしたので
どっかの板でスレ立てされてて知ったわ

GIGAPIXELの動画版でのアップスケールだったけど

2021/03/27(土) 09:24:31.36

Topazスレでいいじゃん

2021/03/27(土) 10:26:02.79

VEAIよりよいソフトが出てきた時のことを考えると>>128の動画拡大ソフト総合で良いと思う

2021/03/27(土) 13:41:14.58

どうせスレ分けるのならフレーム補間ソフトスレが欲しいな

2021/03/27(土) 15:20:40.08

VEAIにAIでのフレーム補完機能はよ

2021/03/27(土) 17:50:51.12

画像ビューアのフィルタとして動作するようにならないかな
変換しちゃうとファイルサイズがね…

2021/03/27(土) 17:56:08.19

>>135
超絶重いビューアになりそうですね……

2021/03/27(土) 18:15:44.28

そうかな？
VEAIの動作見るに200%超解像でも0.1秒で出来てるしそこまでネックにならないんじゃないかな
まあグラボ酷使しそうと意味では重たいか

2021/03/27(土) 19:03:40.64

https://git
hub.com/GPUOpen-Effects/FidelityFX-CAS

の
reshade版
https://resha
de.me/forum/general-discussion/5581-fidelityfx-cas-to-reshade-help

は軽いよ

2021/03/27(土) 20:58:28.05

リアルタイム処理のツールでAI活用してるツールってまだないですよね？

2021/03/27(土) 21:20:56.05

>>139
DaVinci ResolveのOpticalFlowはスペックの良いPCならタイムラインでリアルタイムプレビューできるけど、まぁあくまでプレビューだし結局エンコ書き出ししないといけないからねぇ

2021/03/27(土) 21:21:22.70

あ、ごめんフレーム補完とごっちゃになってたわ、上のレスはスルーして

2021/03/27(土) 22:03:28.62

PNG-Upscale
About
AI Super - Resolution

https://git
hub.com/Araxeus/PNG-Upscale

2021/03/28(日) 13:00:01.16

VEAIアプデしたら文字化けやばいわ

2021/03/29(月) 07:59:06.25

>>119
素材が違うし、自分で試すしかないよ
おれもいつもそうだもん

2021/03/29(月) 09:12:04.48

デインタレース機能もしれっとver2から？追加されたし
フレーム補完も追加されんかな@VEAI

2021/03/29(月) 11:41:24.18

文字化けはないわ。
IFはよくなったし、フォーラムにも書いてる人が居たけど確かにアルテミスのMQ12はすごくよくなってる

2021/03/29(月) 13:25:38.04

>>146
アルテミスの9よりも良さげですか？

2021/03/29(月) 16:51:36.42

>>147
HQはバージョン11のままだけど、
MQは12になっててMQ11とMQ10よりは確実に良いと思った

MQ9は個人的にMQ11でもう要らないと思ったので、このあたりはやっぱし素材が違うからなんともいえん。。。

2021/03/29(月) 17:07:39.94

ピンぼけはTopazSharpness使って
ノイズはNeatImage
最終調整はLr
全部一本で済ませたいわ

2021/03/30(火) 08:13:36.03

PaintshopProのやつはそこそこ使える気がする
まぁメインで張るのは無理だけど、編集ソフトに付いてきたのは大きいと思った

2021/03/31(水) 22:22:08.01

デインターレスv3がなんかエラー出て使えないわ

2021/04/01(木) 14:57:14.09

Waifu2x-Extension-GUI使ってみたんだけど
動画出力がCRFじゃなくてビットレート指定だったり、waifu2x の冠してるのにノイズ除去モデルが入ってなかったり、途中で停止するとテンポラリが消されたり(消されなかったり)
拡大やフレーム補完が全部1個で完結するのはいいんだけど、作者もユーザーも本当にこれ使ってるのかなぁって疑問に思う点が多い。
ある程度自分好みに動かすには適当な言語でffmpegで画像出力してCLI版の各種アプリで処理した後元に戻す処理を書いた方が楽かもって思うぐらい。

2021/04/01(木) 15:53:52.86

文字の拡大はどれがいいかな？
今の所waifu2xとシャープネスが一番いい。

2021/04/01(木) 17:55:03.54

>>153
https://git
hub.com/ptrsuder/IEU.Winforms
https://upscale.wiki/wiki/Model_Database

2021/04/01(木) 20:20:57.40

Topaz実写はGaia HQ一択じゃないの？

アルテミスはぬり絵みたいなぬり潰し感があって
アニメ用かと思ってたら、真逆の意見の人がいて驚いた

2021/04/01(木) 20:24:33.95

ただ、GaiaHQを使った時に出る
遠くの風景や遠くの顔がチラチラするというかニジミ感というか
気になるノイズが乗るよね
あのノイズ後から他のソフトでエンコードする時に軽減できませんか？
できるなら一度TOPAZで無圧縮で出力して
最終的なエンコードは他でやりたいですが

2021/04/01(木) 22:06:16.88

>>155
俺も実写はガイアだろ、と思ったわ。

2021/04/01(木) 22:28:06.05

ガイアが良かったのはVer1.5くらいまでだった気がする

2021/04/01(木) 22:52:16.67

結局は元動画の素材次第なんかな

2021/04/02(金) 00:41:07.07

>>156の遠くの風景や顔がチラチラするノイズですが
今日試した動画を見る限りでは
AVIUTLのインターレース二重化で軽減されてるように見えますが
どう思われますか？

2021/04/02(金) 06:07:47.27

HQ MQ LQ は入力元のことだぞ
出来上がりがハイクオリティとかロークオリティとかじゃないぞ
HQはFHD→4K
LQはSD→FHD or 4K

2021/04/02(金) 10:43:19.52

Sharpen AIがGigapixel AIと比較して勝ってる点ってどこですか？

2021/04/02(金) 18:23:00.06

>>162
全然用途が違うでしょ
Gigapixelに手ブレを無くしてシャープにする機能は無いし、Sharpenに解像度補間機能は無い

2021/04/02(金) 22:04:11.12

Rife-App 1.73
試された方いますか？

2021/04/02(金) 22:15:12.15

Bitmapflow v1.0
ドット絵向け

https://github.com/Bauxitedev/bitmapflow
https://raw.githubusercontent.com/Bauxitedev/bitmapflow/main/examples/example.gif

2021/04/02(金) 23:35:36.32

TopazのAIが遠くにいる人物の顔に果敢に挑むのやめてほしい
ボケボケできれいに再現できる情報なんて無いのに果敢に挑むから
お化けみたいな顔になってる時がある
いや、そこは諦めてボケボケのままにしてくれよと

2021/04/03(土) 12:04:49.74

VEAIの出力動画形式、AppleProResだけじゃなくてCineformとかコーデック選ばせてほしい

2021/04/03(土) 13:18:40.59

画像出力して自分でエンコしなされよ
余計な機能付けるのに本体の開発遅らされても困るでな

2021/04/03(土) 14:48:38.18

Rife-app 480pソースのアニメならx2をリアルタイムより早く処理できる。凄い

2021/04/03(土) 16:18:57.45

アニメ向きじゃないフレーム補間がDAINだっけか？ワカンネくなってきた。

2021/04/03(土) 16:43:59.24

VEAIで動画作るとBTの関係か色合い変わるしね
ここで聞くもんじゃないけど、画像出力させた後みんなどの動画編集ソフト使ってるんだろ
未だに素人でも使いやすいaviutlのx265でやってるんだけど

2021/04/03(土) 16:47:43.89

aviutlで編集して無圧縮で出力したあと
splashプレイヤーのエンコード機能使ってる。

2021/04/03(土) 16:57:20.62

Rife-App 1.73
フレームが切り替わるところも乱れることなく処理されていたが
変換スピード早いですか？
設定は初期設定で行いました。

2021/04/03(土) 19:05:50.15

>>171
DaVinci Resolve Studioいいよ
最強のフレーム補完機能も付いてるしVEAIのアーティファクト修正もマジックマスク機能で簡単に指定できる

2021/04/03(土) 20:15:34.87

>>174
いいって前スレでも言ってたから7を使おうと思ってたんだけど
連番画像の読み込ませ方調べても分かんなくて結局またアンインストールしてしまった
勝手に連番ファイル読み込まれるって言ってる人いたからメディアプールに画像置いてもうんともすんとも

2021/04/03(土) 22:07:25.87

>>175
なぜググらないんだ
https://vook.vc/n/2009

2021/04/03(土) 22:10:07.55

おっとスマン上のURLは個別読み込みだった
連番画像は何もせずともメディアプールにドラッグすれば初期設定で動画として読み込んでくれる

2021/04/03(土) 22:39:43.40

>>177
いや>>175でも言ってるけど
メディアプールに000000.jpgの画像ドラッグして置いても動画として読み込んでくれないんだ
読み込めてる人がいるなら多分自分の環境が悪いんだろな
後でリネームしたりフォルダ名変えてまたやってみる

2021/04/03(土) 22:57:07.00

連番画像を全部選択してまとめてドラッグ＆ドロップ

2021/04/03(土) 23:24:08.68

前に全選択してやったんだけど読み込めなかったから今、2万Fだけやったらなんとか連番読み込めた
20万F一気に読み込もうとすると読み込めないから小分けにやるしかないんかな

2021/04/04(日) 00:36:48.24

VEAI2.1にしてから1080pへのアップスケーリングで、どのモデル選んでもVRAM不足になるなけと8gbじゃ足らないのか？

2021/04/04(日) 02:36:59.36

>>181
VRAM6GBしかないけど2.1.1で720p→1080pの変換普通に動いてるよ
月並みな事しか言えんけど設定周り見直したり、最近グラボのドライバアップデートしたなら戻してみたりとかで解決しない？

2021/04/04(日) 05:02:53.88

8GB必要なのは4Kから

2021/04/04(日) 05:51:01.27

>>161
入力品質は同意だけど、
私の場合、少し違うニュアンスで捉えてる。
解像度ではなく素材のS/N比で使い分けてる

2021/04/04(日) 07:58:07.05

VEAIでもHDR動画の書き出しは非対応なのな
TIFFがfloating pointサポートしていたらワンチャンあったが・・・

2021/04/04(日) 09:24:31.96

DaVinci ResolveでTimeWarpかけると映像全体にロゴが出ちゃうのは無料版のせい？
お金払えば消えるんだろうか

2021/04/04(日) 09:38:33.50

>>186
です

2021/04/04(日) 09:44:15.22

EDIUSではフリッカー消せないってところから入って、一昨年くらいからダビンチを使うようになったけど、フィルターの大半が無料では
使えないのでインスコした翌日には有償版に変更したのを思い出したわ

2021/04/04(日) 11:01:30.64

>>187
世の中お金ですね
教えてくれてありがとうございます

2021/04/04(日) 13:57:24.17

色々ためしてみてTecoGANが一番良さそうだからガンガン学習させてる
１ヶ月くらい学習させれば相当精度が上がりそう

2021/04/04(日) 14:57:20.43

アメコミ用のモデルはイラストのほかにもフォントとかもキレイに拡大できる

2021/04/05(月) 12:16:02.58

Video Enhance AIを以下の環境で使おうとした場合、どうなりますか？
os：windows10 home
CPU：Corei5-10400
メモリ：16gb
グラボ：asus gt1030
①エラーやフリーズで一切動かない
②動くがハイスペック環境に比べ、めちゃくちゃ時間がかかる
③※※の理由で辞めたほうが良い(※※には理由をお願いします)

2021/04/05(月) 12:31:57.68

>>192
④体験版使って自分で決めればいい

2021/04/05(月) 15:03:18.87

動かない環境ならそもそもソフトが起動すらしない
起動してもスペック不足ならクソ遅くなるだけ

2021/04/05(月) 15:27:23.93

>>192
処理時間はかかるだろうけど使用に問題はないと思うよ

2021/04/05(月) 16:43:06.31

>>192
②かな
自分の環境では
os：windows10 home
CPU：Corei7-10700k
メモリ：16gb
グラボ：asus RTX3070

1時間の動画の処理時間は3時間程かかります
1フレーム0.1秒

GTX 1660 SUPERで 1フレーム0.22秒ぐらいで
1時間の動画の処理時間は6時間40分ほどです

2021/04/05(月) 19:38:41.90

192です。
皆様、ご回答ありがとうございます

2021/04/07(水) 03:03:37.97

自分では判断せずに、他人の意見ばかり気にする。今時のゆとりの人ですね

2021/04/07(水) 07:12:06.66

>>182
クリエイタードライバにしたら動きました、ドライバ更新は慎重にしないとですね

2021/04/07(水) 12:52:21.05

waifu2x-caffeの横長UIが好みじゃないからいじってみた
https://i.imgur.com/T2BTI71.png
ダイアログの101を置き換えてぞうぞ

2021/04/07(水) 12:52:27.23

LANGUAGE LANG_JAPANESE, SUBLANG_DEFAULT

101 DIALOGEX 0, 0, 480, 338
CAPTION "waifu2x-caffe"
STYLE DS_CENTER | DS_MODALFRAME | DS_SHELLFONT | WS_POPUPWINDOW | WS_CAPTION | WS_MINIMIZEBOX
FONT 8, "MS Shell Dlg", 400, 0, 1
{
【TAB】CTEXT "入力パス\r\n(フォルダでも複数でもOK)", psh7, 12, 20, 85, 20
【TAB】EDITTEXT 1001, 100, 24, 308, 12, ES_AUTOHSCROLL, WS_EX_ACCEPTFILES
【TAB】PUSHBUTTON "参照", psh4, 413, 24, 54, 14
【TAB】CTEXT "出力パス", psh8, 12, 43, 83, 8
【TAB】EDITTEXT 1002, 100, 41, 308, 12, ES_AUTOHSCROLL, WS_EX_ACCEPTFILES
【TAB】GROUPBOX "フォルダ内の変換する拡張子", psh9, 13, 57, 125, 31
【TAB】EDITTEXT 1018, 17, 69, 116, 14, ES_AUTOHSCROLL
【TAB】GROUPBOX "出力拡張子", psh10, 144, 57, 68, 31
【TAB】GROUPBOX "出力画質設定(0～100)", psh11, 218, 57, 86, 31
【TAB】EDITTEXT 1020, 224, 69, 76, 14, ES_AUTOHSCROLL
【TAB】GROUPBOX "画質・処理設定", psh12, 7, 97, 336, 158
【TAB】GROUPBOX "変換モード", psh13, 13, 108, 326, 28
【TAB】AUTORADIOBUTTON "ノイズ除去と拡大", 1007, 21, 121, 70, 10, WS_GROUP | NOT WS_TABSTOP
【TAB】AUTORADIOBUTTON "拡大", 1006, 91, 121, 60, 10, NOT WS_TABSTOP
【TAB】AUTORADIOBUTTON "ノイズ除去", 1005, 157, 121, 60, 10, NOT WS_TABSTOP
【TAB】AUTORADIOBUTTON "ノイズ除去(自動判別)と拡大", 1008, 223, 121, 111, 10, NOT WS_TABSTOP
【TAB】GROUPBOX "ノイズ除去レベル", psh14, 13, 140, 326, 28
【TAB】AUTORADIOBUTTON "レベル0", 1023, 20, 152, 68, 10, WS_GROUP | NOT WS_TABSTOP

2021/04/07(水) 12:52:38.30

【TAB】AUTORADIOBUTTON "レベル1", 1010, 91, 152, 60, 10, NOT WS_TABSTOP
【TAB】AUTORADIOBUTTON "レベル2", 1011, 157, 152, 60, 10, NOT WS_TABSTOP
【TAB】AUTORADIOBUTTON "レベル3", chx15, 223, 152, 60, 10, NOT WS_TABSTOP
【TAB】GROUPBOX "拡大サイズ", psh15, 13, 172, 326, 45
【TAB】GROUPBOX "モデル", psh16, 12, 221, 128, 28
【TAB】AUTOCHECKBOX "TTAモードを使う", psh3, 186, 234, 108, 10
【TAB】GROUPBOX "処理速度設定", chx1, 347, 97, 124, 44
【TAB】GROUPBOX "分割サイズ", chx3, 353, 109, 54, 28
【TAB】COMBOBOX 1022, 359, 120, 43, 30, CBS_DROPDOWN | WS_VSCROLL | WS_TABSTOP
【TAB】PUSHBUTTON "cuDNNチェック", 1017, 412, 188, 54, 14
【TAB】PUSHBUTTON "キャンセル", 1016, 357, 239, 50, 14
【TAB】PUSHBUTTON "実行", 1013, 413, 239, 54, 14
【TAB】CONTROL "", 1015, "msctls_progress32", WS_BORDER, 7, 259, 466, 14
【TAB】EDITTEXT 1019, 7, 277, 466, 55, ES_READONLY | ES_AUTOHSCROLL | ES_MULTILINE | WS_VSCROLL | WS_HSCROLL
【TAB】GROUPBOX "入出力設定", psh6, 7, 7, 466, 86
【TAB】GROUPBOX "UIの言語", chx4, 396, 204, 72, 29
【TAB】COMBOBOX psh5, 402, 215, 59, 30, CBS_DROPDOWN | WS_VSCROLL | WS_TABSTOP
【TAB】GROUPBOX "出力深度ビット数", chx5, 310, 57, 76, 31
【TAB】COMBOBOX chx6, 314, 69, 68, 30, CBS_DROPDOWNLIST | WS_VSCROLL | WS_TABSTOP