【超解像】画像拡大ソフト総合スレ7【waifu2x】

2021/09/12(日) 14:26:50.95

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。
※人工知能による動画の処理を行うソフトは、他に適したスレがない場合使い方も含めこのスレで扱われる事もあります

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

・Topaz Video Enhance AI (VEAI)
Topaz Labsによる豊富なAIモデルを用いて動画の超解像やノイズ除去、インターレース解除などが可能なソフト
※有償、ただし30日間のフリートライアル有
https://www.topazlabs.com/video-enhance-ai

・Flowframes
動画のフレーム補間を行えるソフト、複数のAIモデルを選べる、無料版は最新版より少し前のバージョン
最新版の配布はPatreonで月5ドル以上の支援者に対して行われている
https://nmkd.itch.io/flowframes

前スレ
【超解像】画像拡大ソフト総合スレ6【waifu2x】
http://egg.5ch.net/test/read.cgi/software/1615731336/

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2021/10/21(木) 07:15:59.95

topaz2.3てどこかでダウンロード出来る？

2021/10/21(木) 13:08:32.52

https://community.topazlabs.com/c/releases/video-enhance-ai

2021/10/21(木) 14:16:49.91

2021/10/21(木) 15:04:12.18

アニメをArtemisでエンコすると
プレビューではノイズが消えて綺麗なのに
出来上がりはそれ程でも無いな

2021/10/21(木) 15:44:58.65

>>160
それはビットレートが低いかjpgで出してるからでは？
pngにしたら？

2021/10/21(木) 16:07:19.01

>>160
そのりくつはおかしい

2021/10/21(木) 18:10:36.06

高画質化と60fps化はどっち先のが良いの？

2021/10/21(木) 19:08:10.46

先に高画質化だな。60fpsを先にやると高画質の処理時間が倍になるけど
画質にはほとんど変化がない

2021/10/21(木) 19:22:42.00

>>163
1分くらいの動画で自分で試してみれば？

2021/10/21(木) 19:38:19.71

自分もサイズアップ含む高画質化→60FPSですね。逆でやったら網タイツが一番消失したりしたから

**160** (ﾜｯﾁｮｲ 2b6e-an4T) · 2021/10/21(木) 22:13:22.93

そのままmp4動画で出したけど････いけない事なのかw
Artemis　MQにビットレート設定ってあったっけ?

態々pngしないと綺麗にはならないもんなん?

2021/10/22(金) 01:12:48.80

mp4 とは何かとか、ビットレートとは何かとか少しは自分で調べてから人に質問してみては？

2021/10/22(金) 02:19:17.53

VEAIのmp4で出力するのはオススメしない
静止画が面倒ってんならProresで書き出し→HandbrakeやFFmpegでmp4エンコとかしたほうがいい

2021/10/22(金) 03:02:50.79

>>167
音質が悪い。同じフレームが100コマくらいコピーされるバグがある。
ロスレス可逆が選べない。などの理由からVEAIでのMP4出力は地雷だよ。
PNG出力したものを同じフレームレートで読み込んで元の音声と合成して
他のソフトでMP4とかに出力するのが一般的。

2021/10/22(金) 05:47:16.61

>>167
特に問題起きてないなら個人で楽しむもんなんだし安心して好きにしていいよ

2021/10/22(金) 07:44:36.29

>>170
そうなんですか・・・・そんなバグが・・・・
ありがとうございます。

>PNG出力したものを同じフレームレートで読み込んで元の音声と合成して
> 他のソフトでMP4とかに出力

どんなソフトを使うのがお勧めなのでしょうか
AviUtlとかを駆使されているのですか

2021/10/22(金) 09:14:24.89

3万円取ってそんな面倒なことしなきゃいけないのか

2021/10/22(金) 10:58:49.15

いやだから、ProRes 422(mov)書き出しでOKだって
ProResが実装されるまでは確かに静止画出力使ってたけど、今は使う必要性感じないな

2021/10/22(金) 11:13:30.45

gigapixel使ってるけど、webで拾った低画質資料画像の文字関係をくっきり拡大できるように頑張ってほしいなー。
海外企業だから日本語は無理かね。。。

2021/10/22(金) 11:53:47.63

GTX1650だとVRAM不足で完走出来ない

2021/10/22(金) 14:09:06.78

GeForce、メモリケチりすぎ
RTX 3080が10GBとかもうね
今後の事を考えるなら16GBは欲しい

2021/10/22(金) 17:47:05.39

>>175
静止画をVEAIに流し込んだほうがいい時あるもんなぁ
そろそろアプデしてぼしい

2021/10/22(金) 21:21:46.04

>>175
waifuは文字画像も数%学習させてると作者が言ってて、昔試した時は割と綺麗になるなと思ったけどどうよ
流石に今はgigapixelの方が綺麗なのかな

2021/10/22(金) 21:45:40.39

gigapixelは物によるけど文字は変に崩れたり滲んだりするような感じになる事多いからそこまで得意じゃないと思う
Reduce Color BleedはOFFにした方が良い事もわりと有る
ブロック文字みたいなのだとwaifuの方が綺麗に拡大できた

2021/10/23(土) 00:39:51.30

>>176
Preference>MaxVRAMUsageをミディアムぐらいにすると行けると思う
Ryzenノートのオンボでも出来てるので

2021/10/23(土) 19:36:20.79

>>174
ProRes 422→HandBrakeでズレ問題解決して
画質も良くなった　ありがと

2021/10/24(日) 21:01:23.39

アニメでカメラ視線がスクロールして映像がパンすると　やはり時々波打つね
Artemis　MQのPNG出力でもProResでもダメだったので　Artemisの欠点らしい

2021/10/25(月) 22:50:48.99

何故かは知らんがVEAIの音声出力はffmpegの初期ビットレートでやってるみたいでガビガビになるよ
こんだけ凄い技術持ってるのに初歩的な設定怠ってるのはなんでだろな

2021/10/26(火) 00:39:03.93

あくまでもVideoをEnhanceするものであって音声は確認用のオマケだからね
逆に音声系ソフトで動画がどうの言う人もいるね、まあ用途を考えましょうよと

2021/10/26(火) 06:57:27.64

まだまだ金払うレベルじゃないってことだな
他の変換ソフトでわざわざ音声劣化させるのなんて聞いたことない

2021/10/26(火) 07:57:16.51

DavincResolveはここで話題を出していいんですかね？60fps補完は簡単にできるけどノイズ除去や綺麗な解像度拡大はできるのかなこれは

2021/10/26(火) 09:16:48.72

音良くはならないが、悪くもなってないと思うがな
自分の耳がわるいのかな　つか劣化させる理由がなくね？

2021/10/26(火) 09:43:01.75

わざと劣化させてるわけではないけどAACはライセンス関連がややこしいのでFFmpeg内蔵のエンコーダーはqaacやneroaacに比べて音質が相当悪い

2021/10/26(火) 12:41:43.60

>>187
一応AI補間での拡大はできたような
davinci resolve ai upscaling とかで検索

2021/10/26(火) 14:39:35.91

ffmpeg使ってるなら内部がAAC(若しくはコンテナに対応する音声コーデック)の場合コピーするだけで出来るんやけどね

2021/10/26(火) 14:45:22.56

音声はコピーしてるだけじゃね
そもそのエンコしてるのかね

2021/10/26(火) 15:29:36.40

ビットレートが96kに変わるからエンコしてると思う

動画の長さが同じならコンテナの音声データのコピーだけで良いけど
前後カット機能があるから再エンコするのだと思う

2021/10/26(火) 20:34:10.26

ドイツ製。拡大後のサンプルがwaifuっぽい。
https://www.google.com/search?q=jdownload

2021/10/26(火) 20:37:46.29

間違えた。。。
https://www.franzis.de/fotografie/fotos-freistellen-skalieren/zoom-1-download

2021/10/26(火) 20:40:28.10

拡大後の方がなんか汚い！
この企業はシマウマに謝罪と賠償をすべきだ！

2021/10/26(火) 23:50:15.26

>>190
おお有り難い。そして補間も高解像度化もどれがベストなのか迷うね。日本語記事の少ない事少ない事

2021/10/26(火) 23:51:30.54

opaz Video Enhance AIを使っているのですがタスクマネージャーをみると

GPUの使用率が3％くらいでCPUの使用率が60％を超えてました。
GPUはRTX3070tiを積んであります

GPUを使って作業してくれないのでしょうか？
※ソフトのほうでpreferencesでRTX3070は選択してあります。

※NVDIAのコントロールパネル→3D設定の管理→

プログラム設定でTopaz Video Enhance AIを追加してます

※windous→設定→ディスプレイ→グラフィックの設定→

Topaz Video Enhance AI高パフォーマンスで追加してます
この後タスクマネージャーを見てもGPUの使用率が全然なくCPUだけが動いてる

感じでした。どうすればGPUで作業してくれるのでしょうか

よろしくお願いいたします

2021/10/27(水) 01:45:12.80

>>198
そんなもんじゃないのかな？
もう一枠アプリ起動すればいいよ。
でも先にCPUが天井にはりつくな。

2021/10/27(水) 04:54:01.73

高性能だからこそ低負荷で済んでるって事じゃないの？
GPUが100%ってベンチマークでしかなったことないや

2021/10/27(水) 05:04:48.77

GPUに負荷かけれるようになったんですけど余計作業が遅くなりました

2021/10/27(水) 10:18:24.57

多重起動しようとすると最初に起動した分が落ちるんだけど
バージョン変えるとかするの？

2021/10/27(水) 20:02:39.72

>>202
PCのスペックのせいじゃないの？電源がギリギリとか。
自分は3080だけどSDなら4枠、HDなら3枠、FHDなら2枠、４Kなら1枠いけるけど、
他の作業もやるからやっても2枠くらいまでかな。
かと言って3080だからってめちゃくちゃ早くないよ。
普通に4～6時間は当たり前、12時間かかってもやりたい動画ならやるし。
４Kは音楽PVくらいしかやらないけど5分くらいの動画で1時間くらいかかるし。

2021/10/27(水) 21:15:01.86

>>198
>>108

2021/10/28(木) 09:52:53.49

>203
ｒｔｘ3080って4ｋ5分の動画1時間でできんの？1080ｐ→4Kってことでしょか？
だとしたらすげーほしいな3080・・・値段みてびっくりしたけど

2021/10/28(木) 10:02:31.17

変換するのが目的化して、変換後の動画を見ない
ていうか見るための負荷で止まったら嫌だから見れない

2021/10/28(木) 14:45:00.76

>>205
体感的に４K変換を1時間と書いたので検証してみた。
素材480p(854✕480)、1080ｐ(1920✕1080)
30フレーム(29.97)の5分動画（9,000フレーム)

480p→2160ｐ約42分　変換フレーム秒　平均1フレーム/0.28秒
1080p→2160p 約49.5分　変換フレーム秒　平均1フレーム/0.33秒

CPUはRyzen 3950X

2021/10/28(木) 14:54:53.56

追記
480p→1080p 約14分20秒　1フレーム/0.08秒

2021/10/28(木) 21:53:11.64

>>206
自分も最初は高画質化したの見て喜んでたけどほとんど見なくなってしまった・・
変換してHDDに保存するという謎趣味

Proteus6→ProteusHDになってた

2021/10/29(金) 09:55:36.24

handbreak使うときに https://dotnet.microsoft.com　ここのランタイム入れろって
出るんだけど、これってマイクロソフト公式なん？

2021/10/29(金) 10:14:52.50

>>207
ありがとうございます！凄く参考になりましたー。わざわざ検証して頂いて、欲しかった情報です。

2021/10/29(金) 12:31:35.53

>>210
ランタイム自体は公式じゃね

2021/10/29(金) 17:39:42.17

>>210
ちょっと笑った

2021/10/29(金) 21:58:29.33

サイトのカラーリングが偽サイトぽく感じさせる

2021/10/30(土) 02:26:01.95

MSドメインなのにここ公式？って発想すげー

2021/10/30(土) 02:26:52.56

ArtemisやProteusだとメモリのレイテンシもそこそこ重要って聞いたけど
Ryzen使ってるならやっぱ最低でも3600MHz CL16くらいは欲しいかな？
メモリの新調に際して3600MHzにしたいけれど、同じ3600MHzでもCL18で妥協しちゃって別にいいか、そこはケチる場面ではないかどっちでしょうか
今の環境はRyzen 3600XTにRTX3060で、メモリは3200MHz CL16の物を使用中

2021/10/30(土) 11:33:15.40

周波数に比べればメモリレイテンシでは性能は殆ど変わらないはず
DDR5の為の軍資金にしたら?

**216** (ﾜｯﾁｮｲW f158-UeRp) · 2021/10/30(土) 20:41:35.01

>>217
なるほどレイテンシより周波数か、DDR5については頭からすっかり抜けてた
IntelもAMDも基本的に初物&新企画てんこ盛りだから一旦様子見はしたいけれど、でもDDR4に今お金かけるよりも将来のDDR5の方が確かに大事
3600MHz CL18がだいぶ安くなってるので一応確保しつつ、次のシステム換装を見越して少しずつ貯金もしておきます
アドバイスありがとうございました

2021/11/01(月) 02:05:56.20

mp4とmkvで読み込まれる動画の長さが変わっている事に気付きました
mp4は正確でmkvは数フレーム短くなっていました(例：mp4→31886frames、mkv→31862frames)
映像コーデックは同じ物です、この現象が起きている方いますか？

2021/11/01(月) 05:24:34.87

veaiの話し？
そも、そのmp4とmkvは元は同じ動画でveai以外では同じフレーム数で認識されるってこと？

2021/11/01(月) 07:03:54.52

>>220
そうですVEAI、同フレーム数かはAviutlとMPC-BEにて確認しました
エンコーダやmkvの構成が原因かもしれないので今夜また調査してみます

2021/11/01(月) 07:35:21.41

数百ページある漫画とかwaifu2でやるのめんどくさいんだけど
topazのがいいの？

2021/11/01(月) 10:52:27.40

VEAIってどの拡張子の動画でもある程度フレーム無くなってる気がする
GIFとか21フレーム中の1フレーム無くなったりするからVEAIが全く使えん子になるよね

2021/11/01(月) 12:29:48.66

結局元データ捨てれんのか

2021/11/01(月) 12:56:57.32

>>219
結構前からあるバグですね
Avidemux等でmkv→mp4にするしかないです

2021/11/01(月) 13:15:50.95

VEAIは現状連番画像入出力が鉄板
ディスクスペースはいるが中断出来るし一本の動画を2窓以上で流せる
ファイル数でフレームの欠落ないかも確認出来る

ついでになるが、VEAIはsRGBでアップサンプリングする仕様(公式に確認済み)

yv12からsRGBに変換する際動画のプロファイル関係なしにRec601で処理するからカラーシフトが起きる場合がある

なのであらかじめ正しいガマット(DVDならRec609 それ以外はrec709)でsRGBに変換、出力したもの
(avisynthやffmpegで連番png化等)
を使わないとダメ

AI以外の機能マジポンコツ過ぎ
報告してもなかなか対応してくれない

2021/11/01(月) 13:18:37.18

ブラックフライデーにVEAIのセールくる？

2021/11/01(月) 13:52:36.11

>>225
やはり仕様でしたか
何でもエラーを出さずにヌルっと読み込むので気付けませんでした

>>226
参考になります
まだしばらくは速度と容量と安定性のトレードオフになりそうですね

2021/11/01(月) 14:22:44.72

>>226
フォーラムでもその会話見たことあるけど、カラーシフトが起きるのはあくまでVEAIのプレビュー上だけだよ
レンダリングされたものは完全にカラー再現してるはず

2021/11/01(月) 14:29:29.69

基本的に入力は中間コーデック（DNxHRやProRes）でVEAIに読み込んで出力も中間のProResで書き出すのが一番良い
静止画連番はHDR動画とかになってくるとTIFF32bitになってくるわけで、それで連番出力なんて現実的ではなくなってくる

2021/11/01(月) 14:41:28.49

>>222
バッチでディレクトリごと変換するだけじゃないの？

**名無しさん＠お腹いっぱい。** (JPW 0Heb-722F) · 2021/11/01(月) 18:29:39.02

>>229
前実際に変換したらプレビューと同じく色変わってた記憶がある
どちらにしよカラーマトリックス指定出来ないから連番画像が安定かな

2021/11/01(月) 21:54:14.00

https://webcache.googleusercontent.com/search?q=cache:3cF8CPtKDzQJ:https://help.topazlabs.com/hc/en-us/articles/360054979551-Video-Enhance-AI-Color-Handling+&cd=2&hl=ja&ct=clnk&gl=jp

「Video Enhance AI」を使用すると、プレビューで色ずれのような現象が見られることがあります。また、画像出力を使用している場合は、出力でもこの現象が見られることがあります。
入力の色空間によって、暗く見えたり明るく見えたりします。これは、Video Enhance AIが元の色空間を維持するための副産物であり、出力に影響を与えるものではありません。
Video Enhance AIは、ピクセルのカラー値を一切変更しません（画質を向上させる場合を除く）。

2021/11/01(月) 21:56:41.61

↑この公式コメントによると静止画連番のほうが色ずれ起きる可能性があるとも読み取れる

2021/11/01(月) 22:05:34.89

色づれどころか、明るいシーンで花火が炸裂したようなノイズが走るバグは
いつになったら治るんだろう。ver2.0になってからずっと治ってない。

**名無しさん＠お腹いっぱい。** (JPW 0Heb-722F) · 2021/11/02(火) 10:02:51.17

>>234
YUV入出力なら問題ないかもしれませんね
ただその場合出力後カラーマトリックスを正しく設定する必要があるかと
再生時解像度ベースだとrec601→rec709となってしまう可能性があるので

2021/11/03(水) 04:20:32.49

dainには繰り返し再生の違和感を無くすために、動画の最初と最後が繋がるようにそれぞれを参照しあう機能も選択できるけど、これってもしかしてdain独自なのかな

2021/11/05(金) 21:50:51.62

topaz音声劣化無ければ買っても良いんだけど今の仕様だと買うの躊躇する

2021/11/05(金) 21:56:54.61

理論上はgoogleで捨て垢取って30日ごとに登録し直せばずっと使えるけどな

2021/11/05(金) 23:35:43.34

音声劣化はmp4出力するからだろ
画質もよくないしあれ使う意味あんのか

2021/11/05(金) 23:56:01.14

ProResでも音声出力96kだからなんでも音声劣化させてるんでは

2021/11/06(土) 03:25:19.44

CBR96kbps固定だね
そもそも画像拡大ソフトに音声を読み込む意味がないけど

2021/11/06(土) 04:16:08.29

以前はコマンドラインで音声ビットレ指定できてたんだが、今はできなくなってるのか

2021/11/06(土) 05:24:23.49

自分は音楽系動画はアップスケールやフレーム補間した後は、
ダビンチで音声はオリジナル（自分の持ってる最初の動画）と
入れ替えてる（音量レベル調整兼ねて）

2021/11/06(土) 09:54:53.92

んでもって１枚モノのJPEG写真画像を綺麗に拡大するには、何を使うのが一番いいんだろうか？

2021/11/06(土) 10:02:24.81

Adobeのアレじゃね

2021/11/06(土) 12:04:04.23

>>245
https://kakudai-ac.com/

2021/11/06(土) 12:31:34.33

>>245
経験的にこれ
https://github.com/xinntao/Real-ESRGAN

2021/11/06(土) 12:42:37.81

realesrgan-ncnn-vulkan-20210901

2021/11/06(土) 12:50:05.18

>>248
しゅごい

2021/11/06(土) 13:56:15.31

１枚モノのJPEGもVEAIがさいつよ

2021/11/06(土) 13:58:24.22

変換終わったら元データ消そうと思ってたけど、消さんほうが良さそう

2021/11/06(土) 17:31:06.09

>>246
ACROBAT？

>>247
それは試して見たけど、やはり人物の顔が上手くいかない
輪郭はすごく綺麗になるけどね

>>248-249
まだ試したことがないので試して見る

ALL ３Ｘ

2021/11/06(土) 17:50:44.53

顔だけならReminiもそれなりに
くっきりさせたいならGigapixel AIが他と別レベルに良かったわ

2021/11/06(土) 20:22:23.28

フレーム補間→超解像→音質改善も込みで最後に音結合
俺の環境だと8Kを60fps、120fpsにするとエンコで確実に落ちるからこの構成しかできねえな

2021/11/06(土) 20:23:58.85

>>244
DaVinciも音声出力変になるときあるしffmpegのD&Dバッチ作ってそれで良くね