【超解像】画像拡大ソフト総合スレ7【waifu2x】

2021/09/12(日) 14:26:50.95

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。
※人工知能による動画の処理を行うソフトは、他に適したスレがない場合使い方も含めこのスレで扱われる事もあります

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

・Topaz Video Enhance AI (VEAI)
Topaz Labsによる豊富なAIモデルを用いて動画の超解像やノイズ除去、インターレース解除などが可能なソフト
※有償、ただし30日間のフリートライアル有
https://www.topazlabs.com/video-enhance-ai

・Flowframes
動画のフレーム補間を行えるソフト、複数のAIモデルを選べる、無料版は最新版より少し前のバージョン
最新版の配布はPatreonで月5ドル以上の支援者に対して行われている
https://nmkd.itch.io/flowframes

前スレ
【超解像】画像拡大ソフト総合スレ6【waifu2x】
http://egg.5ch.net/test/read.cgi/software/1615731336/

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2021/09/12(日) 14:41:53.30

この板保守はいらないかな？

2021/09/12(日) 15:08:33.69

ArtemisやProteusはオプティカルフローを使ってサブピクセルの詳細を推論するのが得意です。Gaiaはオプティカルフローを全く使用せず、5フレームを使用して時間的に安定していることを確認しています。そのため、周囲のフレームから詳細を推測することはできません。

私は通常、オートから始めて、いくつかの設定をいじって改善できるかどうかを確認します。

ArtemisのAAは、ノイズ除去やシャープネス処理を行わずに、サブピクセルの詳細を推測するのに適しています。適切に準備されていれば、インターレース解除にも使えますし、ニアレストネイバーでスケーリングされたものからディテールを復元することもできます。ノイズや粒状性、ディテールのほとんどを保持しますが、ぼやけて見えます。

Artemis HQは、MPEG/JPEGのアーティファクトの除去、ノイズ除去、シャープネス処理に優れていますが、最近では、Proteusを使用した方がより良い結果が得られるかもしれません、Proteusは同じ機能を持ち、各効果の強さを調整するオプションが豊富です。

Artemis MQとLQは、90年代のゲームのFMVのように、以前はアーティファクトしかなかったディテールを夢見るのに適しているので、まだその役割を果たしています。私の好みとしては少し強いですが、絶対的に破壊された素材を回復することができます。

Gaia-CGは、サブサンプルされたクロマ（赤のエッジがピクセル化されているようなもの）を、画像の残りの部分にあまり手を加えずに補間するのが得意です。MPEG/JPEGのアーティファクトを滑らかにしますが、粒状感やディテールなどはそのまま残します。1xモードでは、ArtemisやProteusのようなテンポラリモデル（どちらもクロマサブサンプリングを復元できません）で処理する前の前処理ステップとして、最も効果的です。なお、VEAI 1.6.1以降のGaia-CGでは、わずかにぼかし効果が発生しますが、ほとんどのモデルでは簡単に打ち消すことができるので、VEAI 1.6.1のインストールを維持しておく意味はありません（完璧主義者の中にはそうする人もいますが）。

2021/09/12(日) 15:09:06.48

1xのGaia-HQもGaia-CGと同じように優れた効果を発揮しますが、1xモードでも画像のディテールをさらに強調してシャープにしてくれるので、より強い効果が得られます。また、2xまたは4xモードでは、フィルムグレインを「細分化」して、より高解像度で表示することができます。ディテールやフィルムグレインの多いHQソースに最適ですが、サブピクセルのディテールを一時的に解決しないため、ゆっくり動く物体には揺らぎが生じます。

Theiaモデルは、現時点では放棄されており、基本的に完全に置き換えられているため、使用する意味はありません。

Dioneモデルはインターレース解除のためのものですが、様々な段階で壊れており、中でもDione-TDは最も壊れています。トパーズはバグを認めず、修正もしないので、よほどのことがない限り使えないようなものです。Dione-TVとDione-DVは、後処理でバグを回避することができますし、Artemis-AAでのインターレース処理と比較して、いくつかの利点があります（主にシャープネスの向上）ので、どうしてもインターレース処理を行いたい場合は、Dione-TVとDione-DVを使用することができます。

Proteusは、基本的には、Artemisの全モデルのスーパーセットで、デノイジング、シャープネス、デハロの強さなどを調整するための潜在的な空間パラメータにアクセスできます。また、極端なオプティカルフロー（アンチエイリアスのスライダを最大にし、他のスライダをすべて0にした状態）にしようとすると、技術的にはartemis-AAよりも優れているにもかかわらず、サイクリングカラーアーティファクトが発生するというバグがありました。

2021/09/12(日) 16:44:05.44

書いてる内容は参考になるけどそれで前スレ埋めたのはちょっと迷惑だったな
1000近いの気づいてないうっかりさんだったのかもしれんけど

2021/09/12(日) 18:34:11.69

>>3
和訳かな？参考になります
１つの動画に複数処理（Ａ処理した後→Ｂ処理）で画質が良くなるって話は本当だったんだね

2021/09/13(月) 11:16:54.78

現在、RX470で処理してるけど、死ぬほど遅い。6600XTにしたら幸せになれますか？

2021/09/13(月) 11:29:38.68

>>1乙

現状topaz製品は割とnvidia寄りの最適化(tensor coreとか)してるからRTX 3060や3060 Tiがいいんじゃない？
とは思うけど、Radeonがいいのなら6600XTでも超大幅なアップグレードになるし十分幸せになれると思う

2021/09/13(月) 13:51:50.44

Proteusの出来がよすぎて、前に処理したのまたやり直すことにした
しかし、こりゃ沼だな　次にまたブレークスルーきたらやり直しかよ

2021/09/13(月) 14:07:49.15

にしてもｇｔｘ1060　6ｇじゃ時間かかりすぎる。しかもCPUがi7 920じゃね。
しかし時間をかければこの構成でもしっかり機能するのがVEAIのいいところでもある。
とおもふ。

2021/09/13(月) 14:41:01.52

PCをIYHして2台動かすのも有りですの

2021/09/13(月) 16:14:55.79

RTX2060Sのビデオカード乗ったPCで処理すると
720x480のSD画質　50分の作品で、変換に約6時間。
GTX970だと倍の12時間くらいかかってた。
載ってるVRAMの差がでかさそう

2021/09/13(月) 16:56:23.98

VEAIのフォーラム見ててもDVDソースを処理してる人が多いね　

2021/09/13(月) 17:16:17.84

Proteusなんて元にないものが書き足されてるからな
DVDソースぐらいがちょうどいいね　ソースが精密だと「嘘」をつききれない感じだな
Proteusが吐く「嘘」のほうが生生しくていい

2021/09/13(月) 17:21:52.56

インターレース解除前提でDione使った場合、人の顔のアップ画像は綺麗だけど
ちょっとでも奥に居て顔が小さくなると、輪郭がだいぶ別人方向へ補正されることがある
元々、人の補正が下手だったけど、今のVEAIver2xxはみんなそんな感じ

2021/09/13(月) 17:22:16.97

備忘録：CUnetの出力結果が変な乱れ方する時は分割サイズを確認
既出ならスマソ　　ROMに戻ります。。。

2021/09/14(火) 01:08:59.24

顔はなかなか難しいかもね　これAIが顔が苦っていうより
人間が顔に対して敏感すぎるんだよね　たとえば、目の感じで
怒ってるとか、ほんとは嫌がってるとかわかるが、AIにとっては
誤差みたいなもんだろうしね　これは相当の技術革新がないとうまくいかなさそう

2021/09/14(火) 01:15:54.97

眉が時々低くなるのは彫りの深い外人基準か

2021/09/14(火) 03:01:39.79

馬面の人が笑福亭仁鶴みたいな四角い顔に補正された時は
仕方なく他のソフトでインターレース解除してからv161で変換してた

2021/09/14(火) 10:24:47.94

昔のお宝映像を入手
　　　　　↓
Topaz Video Enhance AIでアップコンバート　

2021/09/14(火) 11:59:01.33

VEAIのセールってブラックフライデーに来るかな？てかセールってやってるの？

2021/09/14(火) 15:12:23.67

元動画はとにかくノイズがないものが綺麗になるな
ノイズ処理を最初にやってアプコンする設定できればいいのにな

2021/09/14(火) 17:24:04.65

>>21
去年はやってた
ブラックフライデー以外にも気まぐれに60～100ドルぐらい安くなることがある
毎年アップデートに1万かかるのが、くそダルかったが　これだけ性能あげてくれれば文句ないな
今は逆に年1万で使い続ける権利を買えたと思うと満足している

2021/09/14(火) 20:02:31.76

VHSのノイズはマジきれいに取れるけど
設定によってはニットの縦線が消えたりでたり
ノッペらになったり難しいぶぶんもあるな　　

2021/09/15(水) 04:39:31.83

それな

2021/09/15(水) 08:45:24.79

waifu2xでノイズ除去した後動画に加工してVEAIに渡すバッチでも作ろうかな
良い動画作ろうとすると行う工程増えてきて辛い

2021/09/15(水) 09:22:59.28

行き着く先は自分で4Kリマスター作成か････

2021/09/15(水) 15:27:50.05

条件の悪い画像を処理してくとき
Gigapixel、DeNoise、Sharpenてどういう順番でかけていくのが望ましい？

Gigapixel＞DeNoise＞Sharpen かなと何となく思ってるんだけど

2021/09/15(水) 17:58:28.90

ソースがあんまり綺麗じゃないのはシャープ化しても変になるだけだからGigapixelだけでいいと思う
デノイズは場合によるけどたぶん先の方がいい

2021/09/15(水) 18:02:04.80

スレタイトル、waifu2xの後にVEAIも付けてほしいに1票

>>28
DenoiseとGigapixel逆のほうがよくない？

2021/09/15(水) 18:04:34.43

ノイズにも色々種類があって、Proteusは特にカメラの高感度撮影時に使われるISOノイズの除去がすごく優秀だと思う。

2021/09/15(水) 19:08:42.29

gigapixelで出来ることはVEAIのほうがうまく出来るけどSharpのピント合わせはVEAIじゃできない

2021/09/15(水) 21:40:13.17

vegas19にアプコン追加されたみたいなんだが時間がなくてまだ試せてない

2021/09/16(木) 01:34:58.88

>>15
実写の中低画質動画で
Proteusでも補正強めにすると目が変になる・・
つげまつげを目の一部だと誤認識してるっぽい？

2021/09/16(木) 04:58:14.26

これもうProteus-v2さえあれば何もいらないかもしれない
v1の頃と比べて明らかにノイズ除去進化しているね
設定弄ればキレイにシャープな画質になるからGaia-CGの代わりがやっと出た

2021/09/16(木) 05:04:44.77

印刷物をスキャンした時の印刷ムラや紙質を消したいときは何が良いのかなあ
今の所AI系ではあまりうまくいかずNeatImageを使うことが多いけど多少ぼやけるのは避けられないか

2021/09/16(木) 05:39:30.76

>>36
DeNoise AIだとNeatImageよりノイズは残るけど大分クッキリしてる感じだったな

2021/09/16(木) 10:45:57.84

2.4.0のガンマ補正の強さが嫌で、2.3.0でProteus v2使いたい人向け
https://community.topazlabs.com/t/video-enhance-v2-4-0/26012/230　より

C:\Users\(自分のユーザー名)\AppData\Roaming\Topaz Labs LLC\Video Enhance AI\models
にあるproteus-b-1.jsonと、proteus-auto-1.jsonの両方のファイルのコピーを作成
メモ帳で開いて、三行目の"version": "1",の数字を2に変更
次に110行目の"autoModelKey": "prap-1",の数字を2に変更して保存
その後、b-1を弄った場合はファイル名のb-1をb-2に、auto-1の場合はauto-2にそれぞれ変更する
これでProteus v2が2.3.0にも追加される

2021/09/16(木) 11:23:15.74

実写VHS/SDソース
iPhoneみたいな小さい画面だとDione Robust v3もくっきり感あって悪くないんだけど

24インチフルスクリーンだと圧倒的にProteus6v2になるな　

上で言われてるように解像感ない顔の目の輪郭が変になったり
眉毛の一部がチリチリしたり眼鏡のエッジが強調されたり
俺も経験済み　

髪の毛の光の反射が鈍い感じでCGっぽくなる時がある

2021/09/16(木) 11:38:44.43

>>39
SDソースをProteus6v2に入れるには事前に別のソフトで
インターレースを解除しておくってこと？