【超解像】画像拡大ソフト総合スレ5【waifu2x】

2020/07/23(木) 23:18:39.57

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・waifu2xのベンチマーク結果まとめ - Togetter
http://togetter.com/li/831437

・無料で二次元画像を人工知能が補完してハイクオリティで1.6倍/2倍に拡大できる「waifu2x」 (gigazinの記事)
http://gigazine.net/news/20150519-waifu2x/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2021/01/22(金) 11:44:28.05

>>714
どの環境の話？rtx3080では特に変わらん印象だけど。

2021/01/22(金) 13:42:07.99

VideoEnhanceAIはStudioドライバー対応を謳った事はないし、
DirectX12の機能も使ってないと思うけど、
基本的にStudioドライバーのほうが安定性が増すので、ゲームドライバーは入れる必要なし。
DaVinci Resolveとか使ってる人はこれ一択ってぐらいパフォーマンス違う。

2021/01/22(金) 13:44:12.14

来月の初旬頃にvideo enhance AIの体験版切れるんだけど
価格は199ドルに15%クーポン使って169ドルが実質デフォで、仮に運良くセールとか15%以上のクーポンでもっと安く買える機会が発生したらそれ使って買っとけばお得、って認識でおｋ？

2021/01/22(金) 13:56:43.08

せっかくドライバあるなら試しに使ってみるかな

2021/01/22(金) 19:56:11.76

>>717
>>659

2021/01/22(金) 21:56:14.63

どんな高性能なGPUを投入しても依然莫大な時間がかかることを考えると、我々はまだまだあまりにも
原始的な段階にとどまっているのではないのだろうか
例えば2－3時間のHD動画をものの数秒で8kあたりに変換できるようになるにはどの程度の技術的進展が
必要となってくるのだろうか？
それともそういうことはそもそも原理的に無理なのか

2021/01/23(土) 00:13:21.92

リアルタイム処理ならそう遠くないうちに実現するだろう。
例えばフレーム補完なんてひと昔前は今のEnhanceAIのようにじっとレンダリングされるのを待っていたけど、今じゃ4K120fpsも難なく再生してしまう。こういうのは需要がどれぐらいあるかで進歩速度は大きく変わるだろうけど、高詳細化処理は動画だけでなく幅広く面で需要があると思うので（例えばブレードランナーの写真拡大シーンみたいなものとか）、これも深層学習の進歩とともにどんどん発展いくんじゃないかな、と思う。

2021/01/23(土) 00:19:20.75

Enhance AI
マルチGPU設定でも固まらなくなったが
１枚しか使ってくれないな

2021/01/23(土) 08:58:12.79

DVDアニメのSD動画、どう頑張っても地上波HD録画(720p)以上に綺麗にできない
VideoEnhanceAIでも全然ダメ、録画の方がはるかに綺麗
DVDのリンギングノイズまみれの汚い動画にAviutl+AviSynth(QTGMC)でVideoEnhanceAIでのアプコン前にデノイズすると背景が潰れたりするし、OPのスタッフの文字も潰れる
VideoEnhanceAIにそのまま放り込むと今度はリンギングノイズがひどいことになる
綺麗にできてる人ってどんな設定でやってるの？

2021/01/23(土) 10:46:54.19

超解像って元がダメだと無理だよ科捜研の女に出てくるような近未来ツールではないから
個人的にSD画質のアニメならwaifu2xでやっちゃう、HD以上ならVideo Enhance AI
上でも言われてるけど低画質でも高画質でもノイズのない綺麗なものじゃないとうまくいかないんだよね

2021/01/24(日) 07:29:01.82

DaVinci Resolveで時間的ノイズ除去+自動マスク（トラッキング）＆ダストバスターor自動ダート除去等など、前処理してからEnhanceAIに持っていってる。ただEnhanceAIに読み込んだ時点で8bit処理になってしまうのが残念。
あとアニメに関してはやっぱv16.1のGaiaCGが良いと思うなぁ。 19はまだ試してないけど、どうなんだろう？

2021/01/24(日) 17:23:20.41

Video Enhance AIっていちいち入力するには長いなーって思ってたら
海外じゃVEAIって略されてるのに

2021/01/24(日) 20:04:54.01

なるほど。それでいこ

2021/01/24(日) 21:59:13.09

リアルタイム性重視で、web会議用の雑魚カメラを高画質化するのだとどういう方法が良いでしょうか？
できればin・out両方。

2021/01/24(日) 22:47:54.73

カメラを買い換える

2021/01/24(日) 22:49:12.62

>>728
それはストリーミングで動画でも無いという事？
俺なら照明をイジるけど。

2021/01/24(日) 23:06:26.59

>>728
シェーダー

2021/01/25(月) 10:14:29.76

VideoEnhanceAiをNVIDIA2080tiから3080に載せ替えて高画質化すると、処理時間はどれくらい短縮できるものでしょうか？ざっと、私の作業では、元ファイルの4～5倍くらいの時間で処理しているのですが。

2021/01/25(月) 18:19:41.72

>>730

ストリーミング。zoom、skype、teamesなど。
前面照明、OBSでシャープネスと頑張ってるけどRTX入ってるから既存環境で頑張りたかいです。

2021/01/26(火) 00:57:42.66

VEAIは一時中断機能と3xスケールのモデルがほしい

2021/01/26(火) 01:28:14.68

たぶんx3はx4にしてから縮小すると思う。

2021/01/26(火) 05:35:49.64

だから欲しいのよ、拡大率高いモデルの方が処理時間かかるからね…

2021/01/26(火) 19:16:35.38

一時中断はマジで欲しい、、2日かかるとその間ゲーム全く出来ないしなぁ。

2021/01/26(火) 19:18:04.17

静止画版のGIGA Pixel AIにはx3どころかサイズは自由に入力できるけど、なんでVEAIがx3選べないかというとそれはmp4の仕様によるところが大きいんじゃないかな。 16の倍数じゃないとダメなので。
でも連番出力の時ぐらいはカスタムサイズ選ばせてほしいよね。

2021/01/26(火) 19:30:38.84

メモリ使用量の設定も途中で弄れるようにしてほしい
ちょっとだけ使用量の空き作ってネットで配信見ながら裏で処理させて、終わったらブラウザ閉じて使用量フルにとかやりたい

2021/01/26(火) 20:37:45.74

メモリ使用量の設定ってどれくらい影響してる？
lowでもhighでも変わらないからlowにしてるんだけど

2021/01/26(火) 20:54:02.75

>>740
メモリ6GBの奴だと少なめにすると遅くなる

2021/01/26(火) 21:44:54.65

6GBだとOS+αで食いつぶすからなあ

2021/01/26(火) 23:55:57.00

>>738
VEAIもサイズは自由に選べるよ
存在しないサイズ、x3とかは一旦x4してから縮小してると公式フォーラムで言ってた
GPAIも同じなんでない？
多分>>696と似たようなフォルダに2xだの4xだののモデルがって、3xとかはないと予想するけど

2021/01/27(水) 12:31:23.99

>>743
おーサイズ緩和されてのか。俺のは16.1だから知らなかった。

2021/01/28(木) 21:39:30.72

rx6800xtだとVEAIどうなんだろ？rtx3080の方がやっぱ速いんかな。

2021/01/29(金) 20:40:48.67

VEAIに関して言えば現時点でrtx3000は最適化されてなくて
FP16性能に依存してね？って話だから
rx6800xtのがいいんじゃない？ 6800無印でもいいかもね

2021/01/29(金) 20:47:41.53

x2以上にすると質が下がるなぁと思ってたけど
中の人がx4モデルはトレーニングが難しいって言ってたんだよね
230%だか240%だかを超えた指定だとx2モデルからx4モデルに切り替わるって話で使ってないなぁ

2021/01/29(金) 22:46:24.26

>>747
やっぱそうなのか。
いきなりx4にするんじゃなくてx2→x2と段階踏んだほうが綺麗だなと感じていた俺は間違ってなかったか。

2021/01/30(土) 00:24:14.49

>>748
元動画にもよると思う

2021/01/30(土) 01:43:40.43

それは良いこと知ったわいつも8K動画作るのに6xとかやってたから次から2xやってみるか

2021/01/30(土) 13:30:18.39

SD画質を4kにするには4回もやらないと、いけないの？

2021/01/30(土) 14:56:13.71

>>746
マジか、こういうのはゲフォの方が得意と思ってたけどそうでもないんかね。
公式で性能比較出して欲しいわ。

2021/01/31(日) 01:51:41.07

VEAI、読み込む動画はメタデータに関係なくbt601って解釈されるな
色が狂うわけだ…

2021/01/31(日) 02:36:58.01

1.9.0のV10ノイズリダクションめっちゃ劣化しとるな
1.8.1探して速攻入れなおしたわ

2021/01/31(日) 03:01:17.97

デノイザーはGiga Pixel AIのやつめちゃ優秀よね。 VEAIと同じエンジンかと思ってたけど違うっぽい。

2021/01/31(日) 12:08:25.81

>>754
V10は確かに駄目だね
全体的にクッキリしてるけど、
背景の木や葉っぱにまでシャープがかかってるから変な感じに見えるね
ノイズ除去の調整がうまくいってない

2021/01/31(日) 15:58:06.98

>>756
V9はノイズやブロックノイズも消えて輪郭がくっきり革新的だったからハマったわけで
V10は逆にノイズが増えて輪郭もちょっとくっきりしたかな？程度
240P動画をアプコンするならV9一択かな

2021/01/31(日) 16:32:05.35

v10の調整の項目がいまいちわからん

それでもv10のlqはISDN回線時代に苦労して落とした320×240の動画をアプコンするときれいになる

2021/01/31(日) 21:03:05.32

VEAIってVRの動画も高画質化できるの？

2021/02/01(月) 04:09:22.88

>>759
勿論。 VR動画って特殊なメタタグとかが記述されてるわけではなく、視差のある映像が二つ並んでるだけだから。
どう表示するかは再生プレイヤー側に委ねられてる。

2021/02/01(月) 18:36:47.79

Ver１．８でも１．９でも30フレームまで来ると
でエンコプレビューが１～３０フレームで反復を繰り返す
エラーが出る同じ現象の人いるでしょうか？

2021/02/02(火) 03:16:32.38

>>761
プレビューならそれ普通じゃね？

2021/02/02(火) 18:17:28.46

２０の時もあれば３０でエラーで止まるときあるんで、
特定の元動画が悪いかもしれんのでもう一度、設定見直します。
７６２さん返信ありがと。

2021/02/02(火) 19:14:28.75

HDサイズ、RF24でもまだファイルサイズでかいんだけどエンコへたくそすぎない？
普通の画質でいいんですけどRFどれくらいが妥協点ですかね？
静止画出力はつらいので

2021/02/02(火) 20:01:51.05

>>764
15以下に設定して中間出力に使用してるけど、ぶっちゃけ最終出力に使うものではない

2021/02/02(火) 20:23:52.38

>>764
無圧縮のpngでいったん出力してFFFMPGでmp4に変換してる

2021/02/02(火) 20:42:10.75

マジか
お前らほんまビルゲイツやな

2021/02/02(火) 23:43:27.37

TEAIで音なしファイルをMKVToolNixで音あり元動画と結合すると映像だけ止まる画像ができちゃう時ない？
いけるヤツといけないヤツあって困る

2021/02/02(火) 23:51:16.87

画像じゃなくてファイル
まあたまにしかならないのでOKですけど

2021/02/02(火) 23:59:53.03

元動画のフレーム数とVEAIでできた動画のフレーム数一致してないとか

**名無しさん＠お腹いっぱい。** (RU 0H6a-sDp+) · 2021/02/03(水) 01:26:42.39

それ元動画とのコーデックとか相性あるんだよな
mkvtoolnixはそこ弱すぎるからffmpeg弄って使ってるわそしたら大抵うまくいく

2021/02/05(金) 18:18:50.17

VEAIは古い解像度の小さいものを変換に使うこと多いけど、大体CPUが先にネックになる気がするな。
rtx3080 5600xで480pの動画を1080pにすると、0.1sec/fが限界でGPU使用率も30パーとかだわ。まぁCPU使用率も50%とかなのでよくわからんけど。

2021/02/06(土) 09:43:21.79

VEAI　Artemis-LQ設定のgrainとpixelの関係が分からない。
ノイズの表現設定ってことでOKなのかな
ノイズはいらないんで両方grain０　pixel０でいいのかわからない

2021/02/06(土) 17:57:20.83

Radeon Image FiltersにAIアップスケールあるけど試した人いる？

ttps://radeon-pro.github.io/RadeonProRenderDocs/en/rif/filters/ai_upscale.html

2021/02/07(日) 00:19:55.31

>>773
0でいい

2021/02/07(日) 00:56:00.07

ノイズの項目はUIトップに出すほど必要なオプションではないよな

2021/02/07(日) 01:26:13.14

全く同じ動画をArtemis-LQで変換すると、今までは2時間以上かかっていたのにいきなり半分以下の時間で完了するようになった
パソコンの設定とか全くいじってないし、ソフトのバージョンも変えてないのに意味が分からない、こんなことってあるのだろうか

2021/02/07(日) 06:59:31.65

>>773

元動画の質にもよるけど、1くらいかけてノイズ入れて方が違和感なくなる場合があると思う

2021/02/07(日) 11:42:37.71

>>777
機械学習してるんだね

2021/02/07(日) 19:33:42.04

>>778
VEAIって学習するの？

2021/02/07(日) 21:36:25.65

へ？VEAI 学習して早くなるん？

2021/02/07(日) 23:11:21.49

いやしらんけどｗ

2021/02/08(月) 19:53:19.61

VEAIやたらメモリ速度に影響されない？6800xt,5800xで2133と3200の際に2割ほど速度違ったわ。

2021/02/08(月) 21:30:14.67

ゲームではハイエンドなグラボだとメモリクロックの影響も大きいみたいだけど
VEAIもそうなんかね

2021/02/09(火) 07:15:40.43

Intel CPU とTopazって相性いいんですかね
IntelがM1チップと第11世代Core i7の性能比較結果でTopazの名前出てたから
Topaz LabsのAIツールにおいてCore i7が約6倍高速らしい

2021/02/09(火) 07:24:18.83

>>785
intel coreの専用命令(HW)を活用するように設計されてる

2021/02/09(火) 08:09:50.77

Topaz製品面白そうなラインナップなので一通り触ってみた。てなわけで雑感。

Video Enhance AI … 言わずもがな今一番HOTなAIアップスケールソフト。
Gigapixel AI … VEAIの静止画版的な感じ。静止画な分処理が高速で汎用性はかなり高い。画像収集家には必須レベルのソフト。
Adjust AI … フィルター系。Nik Collectionに似ている。ビンテージフィルムっぽくもできるがPhotoshopがあれば事足りる。
Studio 2 … 同じくフィルター系だけど特殊効果が派手で面白い。手描き風タッチに変換するのにも便利。
DeNoise AI … ちゃんとディテールは維持したままノイズ成分だけデノイズしてくれる。他社のものより賢い。写真メインの人には需要高そう。
Sharpen AI … シャープフィルターとしてはおそらく業界最高峰クラス。ぶれ画像もスタビライズ機能でシャープに復元可能。
JPEG to RAW AI … JPEGノイズを排除してRAWデータのように復元するためのものだが、めっちゃ地味。というかそんな需要はあまりなさそう。DeNoise AIと統合したほうがいいのでは・・・。

Video Enhance AI以外はPhotoshopのプラグインとしても呼び出せるので便利。個人的に気に入ったのはGigapixelとStudio 2。Gigapixelはデノイザーとしても使える。しかしVEAIと同様で一番クオリティが良いのは2倍の解像度までで、それ以上だと輪郭が破綻するケースもたまにある。
Studio 2はフィルターを自由に組み合わせてプリセットをどんどん保存していけるので、加工好きな人にはおすすめ。たまに不気味な加工も並んでいたりするがその辺がなんともAIっぽい。

2021/02/09(火) 09:04:28.00

>>785
Apple、VEAIみたいな謹製アプリだしそうだがなぁ

Apple SiliconのNeural Engineの一般向け誇示アピール用に
iPadProに積むA14Xか iMacからだろうM2出すあたりで

2021/02/09(火) 14:24:29.10

Sharpen AI トライアル版入れてみたけど
起動して一瞬ロゴ画面出て落ちる
つかえねええ

2021/02/09(火) 15:34:39.95

gigapixelははやくコマンドライン対応してほしいなー。去年、公式スレで要望上がってたけど未だに実装されてない。
DD→実行→完了後に自動終了まではできてるんだけど、実行が手作業なのがモヤる。

2021/02/09(火) 20:20:54.40

JPEG to RAWはフォトレタッチのためにあるんじゃないか。

2021/02/09(火) 20:29:07.92

x2モデルマジで優秀なんだな、検証してみたけどデノイズが半端なく有能
x4モデルぼやけて拡大するから意味ねえ

2021/02/10(水) 00:44:43.59

>>791
全くその通りなんだけど、そういう人はそもそもJPGで撮らないだろうって意味ね。

2021/02/10(水) 09:51:32.13

4倍にしたかったら2倍やってまた2倍したらいいのか

2021/02/10(水) 10:05:23.54

補正も2回分掛かるからより綺麗に見えるというだけではないのかな
ｘ4を1回とx1を1回すれば同じになるみたいな、試してないけど

2021/02/10(水) 15:54:26.07

スペック不足で起動しないってマジkｄｆｇｈｄ

2021/02/10(水) 16:49:39.75

>>796

第四世代i5
メモリ8G
非対応GPU

でも起動して変換できたぞ
すげー時間かかるけど

2021/02/11(木) 02:36:02.91

Waifu2x-Extension-GUIにフレーム補間機能付いたよ

2021/02/11(木) 18:55:01.57

画質悪い動画を超解像で拡大するのは良いんだけど色の階調を補正するものはないかなあ
SD画質からだと色むらがすごく気になっちゃうな

2021/02/11(木) 19:20:33.34

帯状の色の諧調を改善するためのピクセルシェーダー
https://forum.doom9.org/showthread.php?p=1876595

2021/02/11(木) 19:54:43.43

>>800
ありがとう！MPCのアドオンで使えるのね
DaVinciでもデバンド機能使ったらディティール犠牲にするけど補正できたわ
一応報告

2021/02/11(木) 20:20:14.25

VEAIで100% denoize使ってもデバンドできたわ……SD画質の場合は何度も重ねがけした方がいいのね
連レスすまん

2021/02/11(木) 21:57:01.50

色んなncnn-vulkan作ってる人ってすごい美少女だったんだな…
推しのアイドルの画像載せてるのかと思ってた

2021/02/12(金) 13:05:43.04

これ？
https://i.imgur.com/JPypa8r.jpeg
https://i.imgur.com/5olOQjY.jpg

2021/02/12(金) 17:53:02.77

VEAIベータArtemis v11とDionev2来てる

2021/02/12(金) 17:57:09.58

よく見かけるアプリ補正顔だ…

2021/02/13(土) 00:52:17.66

>>806
動画でもこの顔だった
さすがに動画が補正ありなら分かるっしょ

2021/02/13(土) 07:46:24.44

だがちょっと待って欲しい、何を作っている人か考えると全フレームに綺麗にする処理を入れているのでは無いかと
この話題いる…?

2021/02/13(土) 08:13:53.45

>>805
ベータ版ってどこで手に入るんですかね？

2021/02/13(土) 18:16:37.90

>>809
VEAI公式FB

2021/02/13(土) 22:21:19.99

>>804
日向坂の影山っていう子にしか見えん

2021/02/14(日) 13:32:42.43

質問です。VEAIでアニメをアップロードする場合どのバージョンでどのアルゴニズムを使用してますか？

2021/02/14(日) 14:41:05.82

アルゴニズムに突っ込まないのは、ここのルールなのか…？

2021/02/14(日) 15:12:03.16

>>813
地雷避けなんだから黙ってろ