【超解像】画像拡大ソフト総合スレ5【waifu2x】

2020/07/23(木) 23:18:39.57

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・waifu2xのベンチマーク結果まとめ - Togetter
http://togetter.com/li/831437

・無料で二次元画像を人工知能が補完してハイクオリティで1.6倍/2倍に拡大できる「waifu2x」 (gigazinの記事)
http://gigazine.net/news/20150519-waifu2x/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2020/10/10(土) 19:06:18.25

RTX3090と直接関係ないけど、調べたら仮に3090が対応しても、馬力不足の模様

海外フォーラムだと1080ti×1枚で50時間かかる動画があったら
TESRAV100×8枚の4万SP環境×128GBRAM環境のレンタ鯖でやっと5時間

こんな書き方されてるわ。3090×4枚で馬力だけなら互角だな
1080tiや2070sにたいして3090×1枚で2-3倍の速度あればいい方か？そんなもんだろ？

2020/10/10(土) 19:06:50.03

そういえば、Anime4KのUL設定ってどのくらいのシステムなら使えるんだろう

mpv+Anime4KでMからLに上げたら随分変った経験があるから、3080の驚異のパワーならULもイケるな！って試したんだけど...
まともに動かなくてしょんぼりなんだよね

まさか3080様が負けるとは思わなかった
あるいは性能ではなくて対応の問題なんだろうか

2020/10/10(土) 20:29:31.87

ソフトが最適化されてないだけだろうね

2020/10/10(土) 20:38:33.68

最適化されたところで動画のアプコンだけが目的ならコスパのいいGPUをたくさん使った方が速い
これはRTX30xxに限らない話

2020/10/10(土) 21:25:56.49

PCに入ってるのが2016年8月のwaifu2x-caffeなんだけど最新版に替えると結構変わるもんですかね？
（４年も使ってなかったのか・・・）

2020/10/10(土) 22:40:25.58

リアルタイムでウィンドウの超解像ができるソフトってないのかなあ
古いゲームなどを拡大したいが、自分でプレイするより
プレイ動画をmadVRのNGUで拡大するほうが綺麗なのがなんとも悲しい

2020/10/10(土) 23:02:27.85

>>207
TV使えば？
ディスプレイのアプコンよりはきれいだろう

2020/10/10(土) 23:34:51.63

エミュれとしか言えんわ

2020/10/11(日) 01:04:44.14

>>201
うわまじかありがとうございます…

2020/10/11(日) 06:33:16.40

>207
nvidiaのImage Sharpeningはエロゲとかの2D画面にも効くよ
そこまで強力ではないけど試してみるのが良いんじゃね

2020/10/11(日) 08:48:08.65

ありがとう、自分の用途にはあまり効果なさそうだけど有用そうなときに使わせてもらうね

NGUほどとは行かなくともNNEDI3とかで任意のウィンドウを拡大出来るソフトとかあればなあ
良くてバイキュービックやランツォシュくらいのものしか見つからない

2020/10/11(日) 09:09:34.32

>>207
reshadeとか使うしか無くね？

2020/10/11(日) 09:42:09.95

reshadeはポストプロセスなので原理的に拡大はできないんですよね
内部的に縮小してから4xBRZあたりで拡大し直すようなシェーダもあり場合によっては使えるのですが
使い方が限られるのと、ニューラルネットワーク系にはだいぶ劣るので探している次第です

2020/10/11(日) 09:52:59.24

テクスチャを高解像度化するMODとか使うくらいだな。

2020/10/11(日) 13:02:42.43

Topaz lab のユーティリティーバンドルセット買っちゃったけど、
アプリごとの UI がいまいち統一されてなくてとまどう

2020/10/11(日) 23:42:01.59

30ｘ0はアメリカでも入手困難なせいなのか
ソフトが対応して無くてもあまり騒ぎにはなっていない様子。

**名無しさん＠お腹いっぱい。** (JPW 0H82-TrO3) · 2020/10/12(月) 00:38:08.38

わざわざ日本のアマゾンから買うくらいだからな
日本はASK税で他国に比べて高額なので余ってるというw

2020/10/12(月) 08:59:58.26

TOPAZのために3000買うなら無難に3090買うか情報出揃うまで待つのが吉だぞ

いままでのカードだとSD→HDでGTX1080/RTX2070sが1フレーム0.4秒（1分動画に10分）、HD→8kに4秒にたいして
RTX2080tiでやっと1フレーム×1.5倍の2.4秒（1分動画に6分）で処理できる
すると理論的な処理速度は3090でやっと1フレーム1-1.8秒（1分動画に2分）の処理速度が妥当か？

RAMが少なかったり、GPU数の伸びが微妙な3070/3080の改善値はどのくらいかわからない
情報揃うまで待ったほうがいいコースだろう

3090がSD→HDで1分が2分なら時速30分の30分動画で1時間
HD→4ｋが1分が20分くらいの処理速度なら、時速3分の30分動画に10時間

これくらい速度あれば使えるけどな

**名無しさん＠お腹いっぱい。** (JPW 0H82-TrO3) · 2020/10/12(月) 11:03:44.93

1フレーム1秒なら60fpsとして1分動画に60分かかるんじゃないの？

2020/10/12(月) 11:16:12.17

そもそも日本語表現がおかしい

2020/10/12(月) 20:04:18.16

>>219

＞時速30分の30分動画
ワロタ

2020/10/12(月) 20:34:49.86

ジワジワくる

2020/10/13(火) 03:38:22.00

Dain齧ってると意味は分かるがなんか面白いな
作業速度と原本と完了時間の、全部の単位が時間だからか

2020/10/13(火) 09:31:47.13

waifu2x-caffe1.2.0.4使ってるけど
CUnetモデルで変換しようとするとＣＰＵなら分割サイズ128でも変換できるのにＣＵＤＡだと分割サイズ16でも致命的なエラーで落ちるんだけど
caffe1.2.0.4ってCUnetで変換すると落ちるバグって残ってた？
UpResNet10モデルなら分割サイズ256でも変換できたからメモリが不足してるわけじゃないと思うんだけど

2020/10/13(火) 10:06:36.55

>>225
1650では落ちて1660なら同じ分割サイズでも落ちないって報告あったから
ドライバなのかハードなのか分からないけどグラボ側の問題かも

2020/10/13(火) 10:15:19.44

1650で落ちるなんて報告あったのか
今使ってるのGTX1650だしドライバ入れ替えてなんとかならないかやってみることにする
情報ありがとう

2020/10/13(火) 11:00:17.15

同じくGTX1650でCUnet使うと落ちるけど普通にVRAM不足では？
タスクマネージャ見ると落ちるとき見事に使い果たしてるし
CPUなら動くけど余裕でメモリ4GB以上消費してる

2020/10/13(火) 12:09:20.34

>>228も書いてる通りVRAM不足だったっぽい
ＣＰＵで変換してるときはＣＰＵのスペック不足でどっちも遅いとしか思ってなかったけど
CUnetとUpResNet10でここまで負荷が違うとは思ってなかった

2020/10/13(火) 12:41:47.95

1個前までのverのcaffeならCUnetでもメモリそんな使わないぽいよ

2020/10/13(火) 15:35:03.34

VRAMがギリギリなのに加えて、変換してた画像が透過PNGだったのが原因っぽい
透過部分を埋めたら1.2.0.4でもなんとか無事に拡大できた

>>230
1.2.0.2はVRAMの消費が少なかったけど1.2.0.3は1.2.0.4とあんまり変わらないように見えた、cuDNNが関係してる？

2020/10/13(火) 16:29:39.73

>>231
1個前じゃなかったのね
1.2.0.3からcuDNNが同梱になってそこからCUnetだけやたらメモリ消費量多くなってるから
関係あるかも知れないけどCUnetそのものが変わってるのかも？

2020/10/13(火) 22:40:17.16

video enhance aiは海外フォーラムとか覗いてもうちょいスペックや変換する動画の条件ごとの性能比を調べてみると

SD→HD
RX570X（MAC） 1フレーム0.8秒
vega64 1フレーム0.5-0.6秒
GTX1070 1フレーム0.5-0.6秒
GTX1080/1080ti 1フレーム0.4秒
RTX2070s 1フレーム0.3-0.4秒
RTX2080ti 1フレーム0.2-0.27秒、HD→WQHDで0.65秒

くらいのランクわけだった。費用対効果が高いのは2070sと2080tiらしく、この2枚の変換データは充実してる

1080tiが伸びないあたりRAM8GBと11GBの違いはそこまで出ないのか？RTX3070/3080は公式のカミングスーンで続報次第

いまだアプデ更新ないのは、ドライバ仕様云々ではなく、理論性能とストレートな変換では伸びないから
ビッグコア向けのカスタマイズに挑んでるんだと思い込んでる

2020/10/13(火) 22:43:12.63

>>200
最新の1.2.0.4で動いたよ。
RTX 3090（EAGLE） HD→4k CUnet
cuDNN 1000ファイル 17:36.999（バッチサイズ 20）

https://i.imgur.com/6tvzvqx.jpg

比較対象
RTX 2080Ti（GAMING Z TRIO）23:21.935（バッチサイズ 12)

https://i.imgur.com/NSYyjl0.jpg

2020/10/13(火) 23:14:38.16

グラフィックカードの情報を追加して再テストしてみた

https://i.imgur.com/JpyT7Pk.jpg

2020/10/14(水) 06:57:24.57

あれRTX30XXでwaifu2x caffe実行できるんだ心配して損した?

**sage** (ﾜｯﾁｮｲ ab58-r5Z4) · 2020/10/14(水) 11:00:13.09

>>236
9月のアプデでCUDA11に対応したから動くっぽい

2020/10/14(水) 11:45:09.75

>>237
そうなんだありがとうございます。
これで心おぎなく買える!!(米尼で安くなったらw)

2020/10/17(土) 14:43:11.24

Topaz Video Enhance AI
新しいα版がリリースされて30x0シリーズに対応。

VRAMの使用量に制限があるみたい（最大使っても10GBまで）なので
3090だとVRAMだだ余りだけど、動作するのを確認出来た。

2020/10/17(土) 15:27:02.04

>>239
テストリリース来たのか
年明けには正式リリースされるかな

2020/10/17(土) 18:51:41.02

Anime4K(本家)の効果を適用した状態でエンコードする方法知ってる人居ない？
個人的に色々試してみたんだけど駄目だったから知ってる人いたら助言が欲しい

Anime4KCPPは追従してるバージョンが古くて微妙画質だったから断念
本家Anime4Kをmpv使ってエンコードする方法は↓のURLの見つけたんだけど
--vf=gpu="w=1280:h=720"のコマンドが動かなくて困ってる

github.com/mpv-player/mpv/issues/7193

2020/10/17(土) 20:01:31.61

Testing FidelityFX Contrast Adaptive Sharpening at the Command Line
https://gpuopen.com/announcing-cascmdline/

2020/10/18(日) 14:20:47.06

>>242
良いかもしれん
高解像度とかには向かないがディテールが戻る。

2020/10/19(月) 01:07:10.28

DAIN-Vulkan-GUI
https://github.com/Mar2ck/DAIN-Vulkan-GUI

2020/10/20(火) 15:57:42.89

3000番台対応のEnhance AIのテスト版てフェイスブックでどうこうってやつ？
体験版ユーザーはまだ使えないんだろか・・・

2020/10/21(水) 16:31:40.16

Adobeも周回遅れながら、ようやくAIを活用した領域に本格的に踏み出すのかな？

・Photoshopの新機能「ニューラルフィルター」を支えるNVIDIAのAI技術
https://pc.watch.impress.co.jp/docs/news/1284336.html

超解像もやってくれ
有料ソフトで超解像をやれてないのは痛すぎかと

2020/10/21(水) 16:37:59.46

映像も音楽も大手はなんでこう腰が重いんだろうな。最近やっと出てきたが

2020/10/22(木) 01:19:05.52

商業用は元から大きな解像度のデータ扱うし
無茶な大きさに引き伸ばすっていうことが少ないからだよ

2020/10/22(木) 12:45:58.34

商用ソフトはどうしても特許がらみで後手になりがち

2020/10/23(金) 12:44:08.10

海外フォーラムで3080はenhance ai で2080tiより数倍速いみたいなレスがチラッとある
まだ情報不足

2020/10/23(金) 22:37:30.48

ESRGAN Python Embedded
https://github.com/WalkerMx/ESRGAN_Python_Embedded

2020/10/24(土) 21:22:33.42

>>250
1080Tiと3090Tiの比較だけど
3～4倍程度速いな。

ソフト側の対応がこなれてなくてVRAM使い切るようになれば
さらに速くなるかもしれない。

2020/10/25(日) 22:10:36.17

Topazのトライアルって復活させる方法ない？
別のPCでやるしかないのかな
それかwaifu2xで十分？

2020/10/25(日) 22:18:53.31

>>253
買えよ

2020/10/25(日) 23:01:01.38

期限切れになる前に時計をいじくれば無限に使えたよ
バージョンアップしてからはよく分からん
バージョンアップしてからでもなんか使えたけどね

2020/10/25(日) 23:30:07.09

>>253
買ったほうが良いよ。アップデートも頻繁だし。
写真だったらrealsr-ncnn-vulkanて選択肢もある。
イラストだったらwaifu2xで十分。

2020/10/26(月) 07:07:54.06

実写を高画質化するには今のところTopazしか選択肢ないからな。

普通に買うのをお薦めする。

2020/10/26(月) 09:32:03.37

Topaz Video enhance AI ってやつですよね
200ドルかあ
高いな
他のGigapixelとかもセットかと思ったら単体でこの値段でしょ

2020/10/26(月) 09:59:26.35

アンインストールして最新版ダウンロードしたらトライアル期間リセットされてた
違うメールアドレスならいけるのかも

2020/10/26(月) 21:36:12.47

流石に3090は手を出せないけど3080で数倍早くなるなら2070sからの乗り換え考えたいなぁ
ほんとこのツール有能過ぎて色々超解像したいし

2020/10/27(火) 18:36:13.68

Topaz Video Enhance AI
Beta版出てたけど、なんか遅くなってる。

α版の2倍くらい時間がかかる。なんでだ。

2020/10/27(火) 19:55:14.67

Topazの製品はフォーラム確認しておいたほうが良いよ。いろいろヒントあるから。

2020/10/27(火) 23:31:27.93

>>261
遅くなったと思ったら、元の速度に戻ってた。

アルゴリズムをオンラインのものを使うこともできるようになったみたいだが
それが原因なのかね。

2020/10/29(木) 22:07:32.78

reminiみたいに荒い画像を鮮明化するwin10用フリーソフトはありますか？
画像処理ソフトのフィルターとかレタッチ技術を調べたほうがいいんでしょうか？

2020/10/30(金) 01:24:47.69

>>264
フリーソフトは無いな。androidをwindowsで動かすソフトでremini使うのが一番じゃね

2020/11/01(日) 11:10:11.21

実写動画系ソフトいろいろ試してきた感想
FHDからの拡大

Topaz video enhance ai
色が変わるノイズとディテールの区別が付かずあれやすい
アルゴにもよるが絵がかなり変わるためスーパーレゾリューションしてやった感はかなり強い

realsr ncnn vulkan
すごい時間かかるので動画にはTTAは現実的ではない
すごい時間かかる割には特別すごい画質というわけではない
もしかしたらModelがもっと低解像度向けなのかもしれない
とにかく時間がかかる radeon vii tta無しで１フレーム30秒以上かかる辛い

avisynth aiupscale
フォーラムだとHQ SharpがtopazやNGUより高スコア出してた気がする
リアルタイム処理はキツいがそこまで負荷高くないのでバランスいいかも
プログレッシブ化プルダウンなどの事前処理はどのソフトでも必要なので、まとめてavisynthでやれるのはかなりよい

色々試した結果
NGUsharpにadd grainに落ち着いたw
再生するだけだからマジで楽だわ

2020/11/01(日) 13:19:22.32

モザイク除去はこういうコピペだけで実行できるソフトないの？

2020/11/02(月) 13:43:27.25

ないと思う

2020/11/02(月) 14:05:57.66

このスレでTecoGANでないのって何でだろ
知られてないだけ？

2020/11/02(月) 14:16:29.99

>>269
ESRGANのほうが有名

2020/11/02(月) 20:17:20.01

TecoGanで高解像度とモザイク除去を楽しんでます
もう少しでAMDの新型GPUも発売されそれに合わせてPCを完全に1から作る予定です
コスパを見る限りAMDGPUにしたいところですがTecoGanが上記の昨日に対応してなくて高解像度はtopazでも代用出来るのかなぁと思ってます
モザイク除去についてもtopazで動くなら併せて買いたいんですがどうでしょうか？

2020/11/03(火) 00:58:57.50

>>271
javplayerはモザイク範囲自動判定と超解像の組み合わせだから他のソフトよりも進んでる
実用的？だし

javplayerの作者が一時gigapixelと組み合わせられないか模索してたが断念してたはず

専スレあるんだからそっちで聞いた方がいいぞ

2020/11/03(火) 19:44:10.81

>>272
おっしゃる通りjavplaye使用中ですが専用スレはどこにあるのでしょうか？誘導いただけると助かります
自分としては特にjavplayerに拘ってるわけではなく今は利用しやすいので使ってますが
AMDのGPUに買い替えた場合CUDAがない為Tecoganが使用できない事により持ち味の半分も活かせない
なのでtopaz等で代用ソフトがないか探していました

2020/11/03(火) 20:04:40.07

topazシリーズにはモザイク除去の機能はない

2020/11/03(火) 20:11:40.99

ラデは基本的にゲーム専用の存在だと思うべき

2020/11/03(火) 20:18:29.37

>>273
AV総合を無碼破解で検索したらほぼ専スレが見つかる
AV板なのにソフト版を軽く凌ぐ検証量と最新情報

2020/11/03(火) 21:19:21.88

いつの時代もエロにかける情熱の炎は熱いな

2020/11/03(火) 21:54:15.76

>>274
ありがとうございます。AMDにする選択が吹っ切れNvidiaだけしか見ない様にします

>>276
ありがとうございます。今拝見してきたらどうやら本体アップデートがされてないせいで3000シリーズが対応してないみたいですね・・・
3080買うつもりだったので危なかったです。2080tiに仕方なく変更して購入します。
諸費用は大幅に減りましたが悲しい気持ちの方が大きいですね
これからもアップデートないと2080tiを延々と使うしかないので

2020/11/03(火) 22:13:26.90

https://github.com/Mar2ck/DAIN-Vulkan-GUI
AI-Powered video interpolater (eg. 30fps -> 60fps) for Vulkan devices. Based on dain-ncnn-vulkan and ffmpeg

2020/11/03(火) 22:27:11.56

エロが産業を開拓してきたんだよな
PCもそうだった

2020/11/04(水) 03:41:48.12

>>266
NGU公開してくんねぇかなー

2020/11/04(水) 03:55:23.68

>>266
SRMD-ncnn-Vulkanも実写向けでしかも軽くね？

2020/11/04(水) 17:33:20.90

aiupscaleやっと動いたけどいまいちだった
https://imgur.com/f8e9e821-849b-4320-82ee-34716782bd8a

ちな設定
AiUpscale(clip,2,"HQ Sharp","Lanczos", "",848,1210,0,"Illustration","MPEG2")

2020/11/04(水) 17:34:42.75

リンクミス
https://imgur.com/y0uP1Ui

2020/11/04(水) 18:32:38.35

>>278
3000スレにモザイク破壊のために3090買ったとか言ってた人いたけど、対応してなかったのか…
3000の今の使い道はvideo enhanced aiかwaifu 2xなんかな？

2020/11/04(水) 20:11:28.84

topaz video enhance ai のトライアルってrtx 3080に対応してなかったりする?

2020/11/04(水) 20:16:26.26

Enhance AIで1日掛かるような動画だと大体クラッシュするな
GTX1080からグラボ更新したいわ

2020/11/04(水) 21:11:52.40

Topaz video enhance AI、最終βがリリースされたから
もう少しで製品版に反映されると思う

2020/11/04(水) 23:14:32.00

>>285
恐らく3090予約はしたけどまだ届かなかったんだろうな
仮に届いてもショックでもう書き込めないだろう

2020/11/05(木) 00:39:42.02

ごめん、よくわからないんだけどwaifu2xやvideo enhanced aiってcuda は使ってると思うんだけどDLSSとかな技術って使ってるの?要は3000シリーズを活かせるのかなと。

2020/11/05(木) 00:43:03.84

>>290
cudnnを適用すればテンサーコアを使うはず。
時間比較して速くなってるかどうかみてみて。

2020/11/05(木) 12:13:47.68

>>290
DLSSはとくに３Dゲーム用でゲーム側が「対応してます」「設定できます」って言ってないなら使わないんじゃね

2020/11/05(木) 12:31:44.57

caffe版の作者さんがちょうどそんな話(？)をしてる
https://twitter.com/mhhpnvu/status/1323699395175411712
https://twitter.com/5chan_nel (5ch newer account)

2020/11/05(木) 15:02:31.71

>>293
残念、tensorコア使ってもあんま変わらないのね。
この辺の超解像ソフト使うならどのくらいのgpuがいいのかねー。値段に比例してこういうものの性能上がるのかイマイチわからん。

2020/11/05(木) 16:04:38.65

ヌビは高いし負け組ハードになっていくのが見えてるから
AMD対応も進めてほしい

2020/11/05(木) 18:27:35.80

>>294
行列のサイズをテンサーコアに合わせないと駄目かもね。

2020/11/06(金) 00:34:11.08

tensorコア役に立ってないみたいだし、waifuやtopazとか使うために実際2080tiや3080買わなくても1660あたりで十分なんかな?

2020/11/06(金) 00:45:30.62

topazはopenvinoてのに対応してるっぽいが

2020/11/06(金) 01:27:02.48

topaz video enhance aiの1.7.0来たね
これでRTX3000シリーズも対応したかな？
ようやく3080使える
長かった…

2020/11/06(金) 07:15:09.34

>>299
お、3080使った変換速度はどうですか？

2020/11/06(金) 11:25:04.23

>>300
3080以外で使ってる2070sと比較
ﾌﾙHD→4K 200% Gaia-CG
2070s 0.96s/frame
3080 0.60s/frame
約10時間かかった動画が約6時間くらいで終わるから速くなったかな

技術的なことはわからないけどAMD対応で処理方法変わったのかな？
タスクマネージャー見るとCUDAじゃなくてGraphics_1てところが動く様になってるけど