【超解像】画像拡大ソフト総合スレ5【waifu2x】

2020/07/23(木) 23:18:39.57

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・waifu2xのベンチマーク結果まとめ - Togetter
http://togetter.com/li/831437

・無料で二次元画像を人工知能が補完してハイクオリティで1.6倍/2倍に拡大できる「waifu2x」 (gigazinの記事)
http://gigazine.net/news/20150519-waifu2x/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2020/12/27(日) 18:19:44.32

>>551
そもそもrealsrは写真向けじゃね＞realだし。

2020/12/27(日) 21:03:51.76

video enhance aiをegpuで使っている人いたら教えてください
問題なく使えていますか？

2020/12/28(月) 10:56:35.05

Topaz Video Enhance　ai の今のバージョンでアルゴニズムのArtemis HQ v9になってから720pや1080pの実写やアニメを4kにすると全てにおいてかなり高画質に生まれ変わるね。
ぼけた昔の動画でもくっきり綺麗になってノイズもとれるから最高です。ほかのアルゴニズムも試したがArtemis HQ v9以外ではTheia-Detail v3 もなかなかいいけど少しボケるかな。
グラボは3080だけど処理速度も最初に比べるとかなり速くなり待ち時間が少なくなった。

2020/12/28(月) 11:01:33.27

何一つ定量的な表現がない文章

2020/12/28(月) 11:46:48.15

主観評価がすぎるw
まあええやん

2020/12/28(月) 12:44:42.06

>>554
俺もこのモードでDVDのAVを4Kにアップしたらまるで目の前で行われているような動画になった！
感動した！

2020/12/28(月) 13:30:25.06

目の前で他人がセックスするのを見ながらオナニーってAV観るより悲しい

2020/12/28(月) 15:59:16.77

>>558
AVでも自撮りものならならいいんじゃないか？

2020/12/28(月) 16:03:06.97

アダフェスで取ったmp4で画像荒いやつを超高画質に変換したら、Oculusquest2でかなりリアル感が増す！

2020/12/28(月) 16:13:42.20

>>560
それをやってるんだが
まだ1本目の変換が終わらん

2020/12/29(火) 05:10:48.99

俺もAVを超解像することあるけど解像度の割に6000kbpsなどビットレート低いものばかりだからなにが良いのか苦労してる
一番画質良くなるのは依然としてGaia-HQだけどノイズのちらつき減らすにはartemisはやっぱり良いね
もうちょっと良いとこどり増えたら本当にありがたい

2020/12/29(火) 07:52:56.14

時間軸NRで脱毛テッカテカ気味の肌が好みｗ

2020/12/29(火) 10:20:53.35

Video Enhance AIは前後のフレームの繋がりも考慮してるんだろうか
Gigapixel AIで連番イメージを超解像したのを繋げたら破綻するのかね？
一回やってみるか

2020/12/29(火) 11:58:07.80

Video Enhance AIを5600x 3070の組み合わせで元々4Kを更にartemis-HQ使用して4kにエンコし直してる
タスクマネージャー見るとCPUもGPUも使用率が激低でCPU 20% GPUは10%いくかどうかなんだが
もっとマシンパワーをフル使いこなせないのかな？
ファンも全然回らないし静かなもんで無音
変換速度は1.27sec/flameがどの程度か分からないけど

2020/12/29(火) 12:52:23.39

>>564
Topaz Sharpen AIで動画を分割したものをアップコンバートして動画ソフトで戻したことあるけど、やはりかなり高画質で繋がりも問題なかったが、Topaz Video Enhance　ai でアップしてDaVinci Resolveでさらに綺麗にしてもあまりかわりなかった。時間の無駄かな。

2020/12/29(火) 14:27:09.22

>>565
Video Enhance AIを5600x 3070で
SDをフルHD artemis-LQで変換速度どれくらいですかね

2020/12/30(水) 12:00:25.23

最近超解像にはまっていくつか試してみたけど
Topazのアルゴリズムは結構優秀だよね？
かなり綺麗にしてくれる
Video Enhance AIでマルチGPUがちゃんと動けばなー

2020/12/30(水) 12:03:00.46

ここの人は動画も高解像度にしてるの？
動画だとmadVRしか知らなかったけど、
ここで挙げられてるソフトの方が良いのかな

2020/12/30(水) 12:47:51.76

アニメを制作解像度に戻して適当なので拡大してからエンコというのはやってる

2020/12/30(水) 14:12:50.88

>>569
アニメだとmadvrの他にもこういうのある

Anime4KCPP DSFilter
https://github.com/TianZerL/Anime4KCPP/releases/tag/v2.4.0
https://github.com/TianZerL/Anime4KCPP/wiki/DirectShow-filter

2020/12/30(水) 15:16:05.55

やる気と時間さえあればmadVRより断然綺麗になるけど大抵の人はやらない

2020/12/30(水) 15:57:48.21

今年はAvisynth AIUpscaleとvs-placeboでYUVのまま弄られるようになって有り難かった

2020/12/30(水) 16:41:08.84

来年も新しい発明とかあると良いな

2020/12/30(水) 18:48:09.12

https://youtu.be/4mXJCUXzSWo
この動画くっそ画質いいんやけどどういうツール使うんやろか

2020/12/30(水) 20:20:01.95

Topaz Video Enhance AIは実写寄りのCG動画もかなり綺麗に高解像度化してくれるね。
ちゃんと輪郭だけシャープさを保ったままピクセル補完してくれる感じ。
静止画版のGIGA Pixel同様にこれから頻繁に使うことになりそう。

てかこのソフトの専用スレないのかｗ

2020/12/31(木) 04:36:19.01

>>565
Video Enhance AIの使用率って、タスクマネージャーだとGPUの項目内のグラフをGraphics_1に変えないと見られないんじゃなかったっけ？

2020/12/31(木) 07:37:54.31

>>576
Video Enhance AIは公式フォーラムが一番情報が多くてそれで充分だからな
バージョン毎の違いが大きくいまだずっとベータテストしてる感じだし
CGは1.6.1派が根強いな

2020/12/31(木) 15:34:03.07

自分もいろいろソフトをためいてみたが、やはりTopaz Video Enhance　ai が手軽さと綺麗さとコスパでは最強だと思う。アップコンバートしたあとダビンチレゾルブで細かく調整すれば最高画質になる。スレ違いかもしれないがこの動画編集ソフトぬるぬる60pも手軽に仕上げができるからなかなかよい。

2020/12/31(木) 15:36:06.33

waifu2xってもう時代遅れなの？

2020/12/31(木) 16:45:21.33

>>580
時代遅れかどうかはわからんし
評価基準も人や用途によって違うとは思うが
俺はTopaz製品の方が好みの仕上がりだな

2020/12/31(木) 17:38:02.65

caffe版がcudnn同梱になってたし、手軽な"静止画"用として今後も残っていくんじゃね？

2020/12/31(木) 19:26:09.27

https://topazlabs.com/video-enhance-ai-users-guide/
なるほど、複数GPUには対応してないけど、複数のVideo Enhance AIを開いて、異なるNvidiaGPUを割り当てることはできるのか。

2020/12/31(木) 19:49:29.43

>>580
深層学習の手法がSRCNN→SRResNet→SRGAN(→派生形でESRGAN、Wasserstein GAN等)といったように進化していて
waifu2xはSRCNNの一種
ただこれらの進歩はAIにとって深層学習の登場といった大きなブレイクスルーとなるほどの進歩ではない

ESRGANは前スレあたりでツールが紹介されてた
TapazやVance AI等の商用ツールはどの手法を採用してるか公開されてないと思う

あとはまあ、特に説明がない場合、深層学習のターゲットは実写になってると思う
waifu2xは二次絵向けだからその辺使い分けでは

2020/12/31(木) 22:12:54.35

Video Enhance AIでSD動画を4K化（連番画像出力）→DaVinci Resolveで60fps化（Opticalflow+スピードワープ）して、10bit Cineformで出力→最後にHandBrakeでH.265/HEVCエンコ
というフローで落ち着きつつある。

実写映像だとクロマシャープニングとか少し付け加えるといい感じだね。
Video Enhance AIのデノイズが優秀だからオリジナル映像より綺麗になるがいい。

2020/12/31(木) 22:39:23.86

>>585
解像度が上がるとフレーム補間の破綻もしやすくなるって聞いた事あるけど、
Davinciはそれに当てはまらんのけ？

2020/12/31(木) 23:42:10.60

>>586
FHDと4Kのフレーム補間で特にクオリティの差があると感じたことはないなぁ。
動きが激しくて動きの情報が足りない映像だと、被写体だけ補間されて背景が破綻するとか稀にあるけどね。

2021/01/01(金) 02:41:08.34

脱・高齢化社会の特効薬
https://livedoor.blogimg.jp/dqnplus/imgs/7/f/7f477820.jpg

2021/01/01(金) 16:28:36.99

変換に時間かかっていいから
フレーム補完と超解像まとめてやってくれるツールがほしい
あとDAINが3倍、1.5倍に対応してくれたらなぁ
90fps動画を作りたい

2021/01/02(土) 11:02:35.43

全部のソフトがコマンドラインで動かせるなら自動化も楽なんだけどね
GUIだとめんどい

2021/01/02(土) 14:27:19.61

AIでフレーム補間するのってDAINくらいですか？
他に何かあります？
Davinciもできるのかな？59.94しか選べなかったのはやり方がマズかったんだろうか

2021/01/02(土) 14:47:06.40

>>591
え？90とか120とかあったようなきがするが？

2021/01/02(土) 15:40:35.04

Video Enhance AI
１秒間に１フレーム重複してる部分が必ずできるな
だから１秒毎にカクカクするんだな
やっと謎が解けたわ

2021/01/02(土) 15:56:37.74

>>592
む、やっぱまだDavinciの使い方わかってないんだな
もうちょい勉強します

2021/01/02(土) 19:57:19.35

>>591
dain
cain
rife
>>435

2021/01/03(日) 00:28:04.52

俺も専らスピードワープ使って補完してるがやっぱりこれを超えるのはないな
RIFEが凄く良い線行ってたけど変なモザイク状のブラーかかることが多々ある
DAINは処理重すぎたりシーンが変わる場面多いものだとバグって使い物にならなかったりした

2021/01/03(日) 07:55:05.62

>>596
同感です。さすが値段はるだけあってフリーとは格段の差だね。
その他の編集機能も優秀だし。てかスレちがうか笑

2021/01/03(日) 16:14:49.65

>>593
フレームや音声に関する不具合はバージョンアップの度に結構な頻度で報告あるな
大体誰かが報告してくれるから助かる
しかしArtemisV9は久々の有能で楽しめるわ

2021/01/03(日) 16:31:11.05

YoutubeでVR動画みてて
これいいな、超解像したいと思ってダウンロードしたら
VR180で3Dで落とせてなくてがっかり
っていうのを何度かやってる
学習しろよ、俺

2021/01/04(月) 03:51:43.71

2日前、Topaz Video Enhance　ai バージョンアップしたけど何が変わったの？

あとTopaz Video Enhance　ai 使っている方でどのアルゴニズムが1番いいのかな？自分的には、2kやHDを4kにする時は、
ArtemisV9はかなりいい感じになるけど、Theia-Detail v3 も捨てがたい。
シャープ100にしてデブロック50でノイズでないし1番綺麗に仕上がると思うけど。ちなみにデンターレスは10にしないとボケるからいじらない。

2021/01/04(月) 10:57:31.46

Topaz Video Enhance　AIをクラウドの仮想マシン借りて爆速エンコとか可能です？
調べてるけどコストかかるかなあ

2021/01/04(月) 11:38:01.55

1秒ごとにカクカクしてたらエンコやり直しやな
最初気づかなかったけど、文字が右から左へ流れてくる映像見て確信に変わった
１秒ごとに１フレーム重複して、同じフレームが２つあることになる
だから一瞬止まった感じになるんよ
30フレームでも60フレームでもダメだった
この症状誰も報告してないんかな

2021/01/04(月) 14:05:52.79

ソースのせいでは

2021/01/04(月) 17:59:56.54

>>602
おまかんじゃないの？

2021/01/04(月) 18:45:30.33

>>602
ソフトのバグじゃないと思われるので
動画の中身を詳しく書かないといけない

2021/01/04(月) 18:54:21.00

ソフトのバグだよ
俺も半年ぐらい気づかなかった
ソースはどの動画使ってもその症状でる
V1.6～V1.8までしか使ってないけど同じだわ
動きがある映像だと気にならないけど、文字が右から左へ流れてくる映像見て
「なんかカクカクしてるな」と思って調べたら、全部の動画カクカクしていた
気にしなきゃ見れるけど、一度気になりだしたらダメだな
同じフレームが２つあると一瞬止まった感じになるんだよ

2021/01/04(月) 20:25:31.03

> ソースはどの動画使ってもその症状でる

この中身を詳しく

2021/01/04(月) 20:51:41.12

PCのスペックも書かないと駄目だろうな

2021/01/05(火) 03:27:01.65

俺らはそんな事にならないんだがー

2021/01/05(火) 16:09:05.51

>>607
原因がわかりました
TMPGEnc Video Mastering Works ６で作ったMP4を
Topaz Video Enhance AIでアップスケーリングするとカクツクみたいです

試しにTMPGEnc Video Mastering Works 7を同じ設定で使用してからEnhance AIを使うと
全くカクツクことはなくなりました
どちらもMP4自体は普通に再生できるんですけど、Enhance AIでアップスケーリングすると
TMPGEnc Video Mastering Works ６はダメみたいです
お騒がせしました

2021/01/05(火) 16:36:52.30

mp4は入れ物であって動画の中身じゃない
codecなどでぐぐるといいぞ

2021/01/05(火) 18:35:49.03

フレーム補間フィルター
TMPGEnc Video Mastering Works 7 に新たに実装された"フレーム補間"フィルターは、
任意の倍率でフレーム数を増加させ、オリジナルの映像には存在しない中間フレームを、
動き予測結果から生成し、なめらかな映像再生を実現します。
速度変更と組み合わせることで、ハイスピードカメラで撮影されたようなスロー映像も実現可能です。

これdain-appと比較してどうですかね？

2021/01/05(火) 19:09:37.88

原因分かって良かったわ
何気に気になるカキコだったんで

2021/01/05(火) 19:54:26.87

>>610
TVMW6を使ってるけど、そんなことにはならないな・・・・・・

2021/01/05(火) 20:52:53.82

と思ったらTVMW5で作った動画で出たな・・・
H264と265以外の形式の中間ファイルを作ってどうなるか試してみるか

2021/01/05(火) 23:00:41.86

>>600
ソースがアニメの場合はGaia-CG（ただしver1.6xのやつ）
実写だとArtemisかなぁ

2021/01/06(水) 01:41:00.14

Artemis系は確かに綺麗なんだけどノッペリした感じがする。
Gaiaは素材のディテールが保たれてる感じかな

2021/01/06(水) 09:01:56.25

Gaiaは藻座なしをアプコンした時にあそこに変な縞模様できるのが不満。Artemis はそんなことないからとても良いわ。

2021/01/06(水) 10:57:50.42

Theia-Detail v3とか使ってますか？
これが1番シャープかけると綺麗なきがしますが。

2021/01/06(水) 14:29:31.89

どなたかM1のMACで試せる人おらず？

2021/01/06(水) 16:17:00.31

TMPGEncの件を追加検証したけど、結論は付属のMP4コンテナのバグだった
MP4box等やmkvコンテナで再パッキングしたり、分離したストリームファイルにすれば起きない

2021/01/06(水) 17:36:16.68

な、結局Enhance AIのせいじゃないだろ？一人で騒ぐ奴ってのはいつもこれだよ

2021/01/06(水) 18:17:33.70

うちのEnhance AIはできあがった動画が何故か2フレーム目だけ真っ黒になるなぁ…
ならないのもたまにあるしさっぱりわからんｗ
まあ見るには全然支障ないからいいんだけど

2021/01/07(木) 00:52:48.56

やっぱArtemisやべぇ、昔集めた240pのエロ動画をFHDにしたら言われなきゃ分からんレベルになる

2021/01/07(木) 08:56:42.46

デフォルトでkeep audioにチェック入ってないのなんとかならないかなぁ。たまに変換後音声なくてやり直しになる。

2021/01/07(木) 10:41:38.06

keep audioはなぜか設定が保存されないんだよな

2021/01/07(木) 11:08:16.65

>>624
自分は4kにしてるけど、鮮明になるのには驚かされます！
aiの技術やばいな。

2021/01/07(木) 13:23:48.60

OculusQuest2向けに超解像してるけど
6k(6000*3000付近),25Mbpsくらいが安定再生の限界だな

2021/01/07(木) 13:45:33.86

>>625
あれは本当に謎だよな

2021/01/07(木) 13:55:53.67

mp4とkeep audioオンはデフォにしておいてほしい

2021/01/07(木) 15:49:39.06

要望を出すかなぜこの仕様になっているのか質問してみるといいぞ

2021/01/08(金) 11:00:17.74

mp4でエンコした場合、例えばOSが再起動とか停電でPC落ちた場合、使い物にならないmp4出来上がらない？
何かの拍子にそうなってからずっと静止画出力だわ。

2021/01/08(金) 12:04:12.54

なったことは無いが当たり前な気がする

2021/01/08(金) 13:31:01.47

静止画でも途中で落ちたら壊れたファイルができあがるはずだが

2021/01/08(金) 13:33:34.06

>>634
静止画で出力してれば処理が止まったとこから再開できるけど
MP4出力だとまた最初からになっちゃうってこと

2021/01/08(金) 19:09:24.84

そんな不安定なPCや配電でやるなよ・・・

2021/01/08(金) 19:33:51.77

人間の愚かさを体現する男

2021/01/08(金) 20:01:40.59

静止画出力なら一時中断できるってメリットがあるんだよ
自分の好きな設定でエンコードできるしな
それに不可抗力の停電もある
そういう場合も安心

2021/01/08(金) 20:27:05.60

音声くらいffmpegでなんとかした方がいいぞ
そんだけでまた超解像とか日が暮れる

2021/01/08(金) 20:54:44.78

そういやGaia-CGは治ったんだろうか
速度爆速になったから1.8以降使ってるけど特に問題ないな

2021/01/08(金) 21:02:35.23

ごめんフォーラムみたらv1.61に似せたv6使えるからそれ弄って使えってあるな

2021/01/09(土) 09:13:32.81

Enhance AIのmp4（mkv）出力はYUV 4:2:0 8bit CBR 100Mb/s固定なので
4Kとか画質に拘りたいなら静止画連番出力必須だよ。
コーデックにCineform使わせてくれたらRec.709 10bitで保存できるのになぁ。

2021/01/09(土) 10:42:39.07

以前連番静止画でやってみたけど凄まじく時間かかった。確かに綺麗に仕上がるが、動画とたいしてかわりなかったからやってない。時間の無駄。
4kを綺麗にするならTopaz Video Enhance　ai で動画で仕上げてDaVinci Resolveあたりで画質調整したほうがもっと超高画質にできる。今はこの方法で落ち着いている。

2021/01/09(土) 11:32:40.80

>>642
crf値で調整する方式になったけど、それverが古くね

2021/01/09(土) 12:18:28.65

Dainはもう時代遅れってことなんすかね？

2021/01/09(土) 13:25:25.15

>>645
アニメなら主流じゃねrifeだかはモーションブラーっぽくなる

2021/01/09(土) 14:28:30.63

アニメもDaVinci Resolveでやったが破断もなくかなり仕上りがよくなった。
メルカリで買えば半額ぐらいで購入。特に問題なし。

2021/01/09(土) 14:31:06.69

>>643
以前、Tiff16bit出力で時間比較したけど、静止画出力のほうが若干速かったぞ。
ストレージがM.2 SSDだからかもしらんけど。

>>644
v17.xはGiaが不評だったので、v16.1のまま使ってる。
なるほど、x264の品質設定はできるようになったのね。
でも色空間も劣化しないようにロスレスとか対応してほしいところ。

2021/01/09(土) 15:31:32.95

DavinciにしろRifeにしろ、カットが変わる時に必ずアーティファクト発生するからなぁ…

2021/01/09(土) 15:44:58.11

>>648
ProRes 422 HQのmovも書き出せるようになってるよ

2021/01/09(土) 15:45:13.56

dainは5800X+RTX3080でメモリ分割してもフルHD5分動画を完走できない
いつも約7000/9000フレームくらいで止まってしまう