【超解像】画像拡大ソフト総合スレ7【waifu2x】

2021/09/12(日) 14:26:50.95

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。
※人工知能による動画の処理を行うソフトは、他に適したスレがない場合使い方も含めこのスレで扱われる事もあります

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

・Topaz Video Enhance AI (VEAI)
Topaz Labsによる豊富なAIモデルを用いて動画の超解像やノイズ除去、インターレース解除などが可能なソフト
※有償、ただし30日間のフリートライアル有
https://www.topazlabs.com/video-enhance-ai

・Flowframes
動画のフレーム補間を行えるソフト、複数のAIモデルを選べる、無料版は最新版より少し前のバージョン
最新版の配布はPatreonで月5ドル以上の支援者に対して行われている
https://nmkd.itch.io/flowframes

前スレ
【超解像】画像拡大ソフト総合スレ6【waifu2x】
http://egg.5ch.net/test/read.cgi/software/1615731336/

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2021/10/22(金) 11:53:47.63

GTX1650だとVRAM不足で完走出来ない

2021/10/22(金) 14:09:06.78

GeForce、メモリケチりすぎ
RTX 3080が10GBとかもうね
今後の事を考えるなら16GBは欲しい

2021/10/22(金) 17:47:05.39

>>175
静止画をVEAIに流し込んだほうがいい時あるもんなぁ
そろそろアプデしてぼしい

2021/10/22(金) 21:21:46.04

>>175
waifuは文字画像も数%学習させてると作者が言ってて、昔試した時は割と綺麗になるなと思ったけどどうよ
流石に今はgigapixelの方が綺麗なのかな

2021/10/22(金) 21:45:40.39

gigapixelは物によるけど文字は変に崩れたり滲んだりするような感じになる事多いからそこまで得意じゃないと思う
Reduce Color BleedはOFFにした方が良い事もわりと有る
ブロック文字みたいなのだとwaifuの方が綺麗に拡大できた

2021/10/23(土) 00:39:51.30

>>176
Preference>MaxVRAMUsageをミディアムぐらいにすると行けると思う
Ryzenノートのオンボでも出来てるので

2021/10/23(土) 19:36:20.79

>>174
ProRes 422→HandBrakeでズレ問題解決して
画質も良くなった　ありがと

2021/10/24(日) 21:01:23.39

アニメでカメラ視線がスクロールして映像がパンすると　やはり時々波打つね
Artemis　MQのPNG出力でもProResでもダメだったので　Artemisの欠点らしい

2021/10/25(月) 22:50:48.99

何故かは知らんがVEAIの音声出力はffmpegの初期ビットレートでやってるみたいでガビガビになるよ
こんだけ凄い技術持ってるのに初歩的な設定怠ってるのはなんでだろな

2021/10/26(火) 00:39:03.93

あくまでもVideoをEnhanceするものであって音声は確認用のオマケだからね
逆に音声系ソフトで動画がどうの言う人もいるね、まあ用途を考えましょうよと

2021/10/26(火) 06:57:27.64

まだまだ金払うレベルじゃないってことだな
他の変換ソフトでわざわざ音声劣化させるのなんて聞いたことない

2021/10/26(火) 07:57:16.51

DavincResolveはここで話題を出していいんですかね？60fps補完は簡単にできるけどノイズ除去や綺麗な解像度拡大はできるのかなこれは

2021/10/26(火) 09:16:48.72

音良くはならないが、悪くもなってないと思うがな
自分の耳がわるいのかな　つか劣化させる理由がなくね？

2021/10/26(火) 09:43:01.75

わざと劣化させてるわけではないけどAACはライセンス関連がややこしいのでFFmpeg内蔵のエンコーダーはqaacやneroaacに比べて音質が相当悪い

2021/10/26(火) 12:41:43.60

>>187
一応AI補間での拡大はできたような
davinci resolve ai upscaling とかで検索

2021/10/26(火) 14:39:35.91

ffmpeg使ってるなら内部がAAC(若しくはコンテナに対応する音声コーデック)の場合コピーするだけで出来るんやけどね

2021/10/26(火) 14:45:22.56

音声はコピーしてるだけじゃね
そもそのエンコしてるのかね

2021/10/26(火) 15:29:36.40

ビットレートが96kに変わるからエンコしてると思う

動画の長さが同じならコンテナの音声データのコピーだけで良いけど
前後カット機能があるから再エンコするのだと思う

2021/10/26(火) 20:34:10.26

ドイツ製。拡大後のサンプルがwaifuっぽい。
https://www.google.com/search?q=jdownload

2021/10/26(火) 20:37:46.29

間違えた。。。
https://www.franzis.de/fotografie/fotos-freistellen-skalieren/zoom-1-download

2021/10/26(火) 20:40:28.10

拡大後の方がなんか汚い！
この企業はシマウマに謝罪と賠償をすべきだ！

2021/10/26(火) 23:50:15.26

>>190
おお有り難い。そして補間も高解像度化もどれがベストなのか迷うね。日本語記事の少ない事少ない事

2021/10/26(火) 23:51:30.54

opaz Video Enhance AIを使っているのですがタスクマネージャーをみると

GPUの使用率が3％くらいでCPUの使用率が60％を超えてました。
GPUはRTX3070tiを積んであります

GPUを使って作業してくれないのでしょうか？
※ソフトのほうでpreferencesでRTX3070は選択してあります。

※NVDIAのコントロールパネル→3D設定の管理→

プログラム設定でTopaz Video Enhance AIを追加してます

※windous→設定→ディスプレイ→グラフィックの設定→

Topaz Video Enhance AI高パフォーマンスで追加してます
この後タスクマネージャーを見てもGPUの使用率が全然なくCPUだけが動いてる

感じでした。どうすればGPUで作業してくれるのでしょうか

よろしくお願いいたします

2021/10/27(水) 01:45:12.80

>>198
そんなもんじゃないのかな？
もう一枠アプリ起動すればいいよ。
でも先にCPUが天井にはりつくな。

2021/10/27(水) 04:54:01.73

高性能だからこそ低負荷で済んでるって事じゃないの？
GPUが100%ってベンチマークでしかなったことないや

2021/10/27(水) 05:04:48.77

GPUに負荷かけれるようになったんですけど余計作業が遅くなりました

2021/10/27(水) 10:18:24.57

多重起動しようとすると最初に起動した分が落ちるんだけど
バージョン変えるとかするの？

2021/10/27(水) 20:02:39.72

>>202
PCのスペックのせいじゃないの？電源がギリギリとか。
自分は3080だけどSDなら4枠、HDなら3枠、FHDなら2枠、４Kなら1枠いけるけど、
他の作業もやるからやっても2枠くらいまでかな。
かと言って3080だからってめちゃくちゃ早くないよ。
普通に4～6時間は当たり前、12時間かかってもやりたい動画ならやるし。
４Kは音楽PVくらいしかやらないけど5分くらいの動画で1時間くらいかかるし。

2021/10/27(水) 21:15:01.86

>>198
>>108

2021/10/28(木) 09:52:53.49

>203
ｒｔｘ3080って4ｋ5分の動画1時間でできんの？1080ｐ→4Kってことでしょか？
だとしたらすげーほしいな3080・・・値段みてびっくりしたけど

2021/10/28(木) 10:02:31.17

変換するのが目的化して、変換後の動画を見ない
ていうか見るための負荷で止まったら嫌だから見れない

2021/10/28(木) 14:45:00.76

>>205
体感的に４K変換を1時間と書いたので検証してみた。
素材480p(854✕480)、1080ｐ(1920✕1080)
30フレーム(29.97)の5分動画（9,000フレーム)

480p→2160ｐ約42分　変換フレーム秒　平均1フレーム/0.28秒
1080p→2160p 約49.5分　変換フレーム秒　平均1フレーム/0.33秒

CPUはRyzen 3950X

2021/10/28(木) 14:54:53.56

追記
480p→1080p 約14分20秒　1フレーム/0.08秒

2021/10/28(木) 21:53:11.64

>>206
自分も最初は高画質化したの見て喜んでたけどほとんど見なくなってしまった・・
変換してHDDに保存するという謎趣味

Proteus6→ProteusHDになってた

2021/10/29(金) 09:55:36.24

handbreak使うときに https://dotnet.microsoft.com　ここのランタイム入れろって
出るんだけど、これってマイクロソフト公式なん？

2021/10/29(金) 10:14:52.50

>>207
ありがとうございます！凄く参考になりましたー。わざわざ検証して頂いて、欲しかった情報です。

2021/10/29(金) 12:31:35.53

>>210
ランタイム自体は公式じゃね

2021/10/29(金) 17:39:42.17

>>210
ちょっと笑った

2021/10/29(金) 21:58:29.33

サイトのカラーリングが偽サイトぽく感じさせる

2021/10/30(土) 02:26:01.95

MSドメインなのにここ公式？って発想すげー

2021/10/30(土) 02:26:52.56

ArtemisやProteusだとメモリのレイテンシもそこそこ重要って聞いたけど
Ryzen使ってるならやっぱ最低でも3600MHz CL16くらいは欲しいかな？
メモリの新調に際して3600MHzにしたいけれど、同じ3600MHzでもCL18で妥協しちゃって別にいいか、そこはケチる場面ではないかどっちでしょうか
今の環境はRyzen 3600XTにRTX3060で、メモリは3200MHz CL16の物を使用中

2021/10/30(土) 11:33:15.40

周波数に比べればメモリレイテンシでは性能は殆ど変わらないはず
DDR5の為の軍資金にしたら?

**216** (ﾜｯﾁｮｲW f158-UeRp) · 2021/10/30(土) 20:41:35.01

>>217
なるほどレイテンシより周波数か、DDR5については頭からすっかり抜けてた
IntelもAMDも基本的に初物&新企画てんこ盛りだから一旦様子見はしたいけれど、でもDDR4に今お金かけるよりも将来のDDR5の方が確かに大事
3600MHz CL18がだいぶ安くなってるので一応確保しつつ、次のシステム換装を見越して少しずつ貯金もしておきます
アドバイスありがとうございました

2021/11/01(月) 02:05:56.20

mp4とmkvで読み込まれる動画の長さが変わっている事に気付きました
mp4は正確でmkvは数フレーム短くなっていました(例：mp4→31886frames、mkv→31862frames)
映像コーデックは同じ物です、この現象が起きている方いますか？

2021/11/01(月) 05:24:34.87

veaiの話し？
そも、そのmp4とmkvは元は同じ動画でveai以外では同じフレーム数で認識されるってこと？

2021/11/01(月) 07:03:54.52

>>220
そうですVEAI、同フレーム数かはAviutlとMPC-BEにて確認しました
エンコーダやmkvの構成が原因かもしれないので今夜また調査してみます

2021/11/01(月) 07:35:21.41

数百ページある漫画とかwaifu2でやるのめんどくさいんだけど
topazのがいいの？

2021/11/01(月) 10:52:27.40

VEAIってどの拡張子の動画でもある程度フレーム無くなってる気がする
GIFとか21フレーム中の1フレーム無くなったりするからVEAIが全く使えん子になるよね

2021/11/01(月) 12:29:48.66

結局元データ捨てれんのか

2021/11/01(月) 12:56:57.32

>>219
結構前からあるバグですね
Avidemux等でmkv→mp4にするしかないです

2021/11/01(月) 13:15:50.95

VEAIは現状連番画像入出力が鉄板
ディスクスペースはいるが中断出来るし一本の動画を2窓以上で流せる
ファイル数でフレームの欠落ないかも確認出来る

ついでになるが、VEAIはsRGBでアップサンプリングする仕様(公式に確認済み)

yv12からsRGBに変換する際動画のプロファイル関係なしにRec601で処理するからカラーシフトが起きる場合がある

なのであらかじめ正しいガマット(DVDならRec609 それ以外はrec709)でsRGBに変換、出力したもの
(avisynthやffmpegで連番png化等)
を使わないとダメ

AI以外の機能マジポンコツ過ぎ
報告してもなかなか対応してくれない

2021/11/01(月) 13:18:37.18

ブラックフライデーにVEAIのセールくる？

2021/11/01(月) 13:52:36.11

>>225
やはり仕様でしたか
何でもエラーを出さずにヌルっと読み込むので気付けませんでした

>>226
参考になります
まだしばらくは速度と容量と安定性のトレードオフになりそうですね

2021/11/01(月) 14:22:44.72

>>226
フォーラムでもその会話見たことあるけど、カラーシフトが起きるのはあくまでVEAIのプレビュー上だけだよ
レンダリングされたものは完全にカラー再現してるはず

2021/11/01(月) 14:29:29.69

基本的に入力は中間コーデック（DNxHRやProRes）でVEAIに読み込んで出力も中間のProResで書き出すのが一番良い
静止画連番はHDR動画とかになってくるとTIFF32bitになってくるわけで、それで連番出力なんて現実的ではなくなってくる

2021/11/01(月) 14:41:28.49

>>222
バッチでディレクトリごと変換するだけじゃないの？

**名無しさん＠お腹いっぱい。** (JPW 0Heb-722F) · 2021/11/01(月) 18:29:39.02

>>229
前実際に変換したらプレビューと同じく色変わってた記憶がある
どちらにしよカラーマトリックス指定出来ないから連番画像が安定かな

2021/11/01(月) 21:54:14.00

https://webcache.googleusercontent.com/search?q=cache:3cF8CPtKDzQJ:https://help.topazlabs.com/hc/en-us/articles/360054979551-Video-Enhance-AI-Color-Handling+&cd=2&hl=ja&ct=clnk&gl=jp

「Video Enhance AI」を使用すると、プレビューで色ずれのような現象が見られることがあります。また、画像出力を使用している場合は、出力でもこの現象が見られることがあります。
入力の色空間によって、暗く見えたり明るく見えたりします。これは、Video Enhance AIが元の色空間を維持するための副産物であり、出力に影響を与えるものではありません。
Video Enhance AIは、ピクセルのカラー値を一切変更しません（画質を向上させる場合を除く）。

2021/11/01(月) 21:56:41.61

↑この公式コメントによると静止画連番のほうが色ずれ起きる可能性があるとも読み取れる

2021/11/01(月) 22:05:34.89

色づれどころか、明るいシーンで花火が炸裂したようなノイズが走るバグは
いつになったら治るんだろう。ver2.0になってからずっと治ってない。

**名無しさん＠お腹いっぱい。** (JPW 0Heb-722F) · 2021/11/02(火) 10:02:51.17

>>234
YUV入出力なら問題ないかもしれませんね
ただその場合出力後カラーマトリックスを正しく設定する必要があるかと
再生時解像度ベースだとrec601→rec709となってしまう可能性があるので

2021/11/03(水) 04:20:32.49

dainには繰り返し再生の違和感を無くすために、動画の最初と最後が繋がるようにそれぞれを参照しあう機能も選択できるけど、これってもしかしてdain独自なのかな

2021/11/05(金) 21:50:51.62

topaz音声劣化無ければ買っても良いんだけど今の仕様だと買うの躊躇する

2021/11/05(金) 21:56:54.61

理論上はgoogleで捨て垢取って30日ごとに登録し直せばずっと使えるけどな

2021/11/05(金) 23:35:43.34

音声劣化はmp4出力するからだろ
画質もよくないしあれ使う意味あんのか

2021/11/05(金) 23:56:01.14

ProResでも音声出力96kだからなんでも音声劣化させてるんでは

2021/11/06(土) 03:25:19.44

CBR96kbps固定だね
そもそも画像拡大ソフトに音声を読み込む意味がないけど

2021/11/06(土) 04:16:08.29

以前はコマンドラインで音声ビットレ指定できてたんだが、今はできなくなってるのか

2021/11/06(土) 05:24:23.49

自分は音楽系動画はアップスケールやフレーム補間した後は、
ダビンチで音声はオリジナル（自分の持ってる最初の動画）と
入れ替えてる（音量レベル調整兼ねて）

2021/11/06(土) 09:54:53.92

んでもって１枚モノのJPEG写真画像を綺麗に拡大するには、何を使うのが一番いいんだろうか？

2021/11/06(土) 10:02:24.81

Adobeのアレじゃね

2021/11/06(土) 12:04:04.23

>>245
https://kakudai-ac.com/

2021/11/06(土) 12:31:34.33

>>245
経験的にこれ
https://github.com/xinntao/Real-ESRGAN

2021/11/06(土) 12:42:37.81

realesrgan-ncnn-vulkan-20210901

2021/11/06(土) 12:50:05.18

>>248
しゅごい

2021/11/06(土) 13:56:15.31

１枚モノのJPEGもVEAIがさいつよ

2021/11/06(土) 13:58:24.22

変換終わったら元データ消そうと思ってたけど、消さんほうが良さそう

2021/11/06(土) 17:31:06.09

>>246
ACROBAT？

>>247
それは試して見たけど、やはり人物の顔が上手くいかない
輪郭はすごく綺麗になるけどね

>>248-249
まだ試したことがないので試して見る

ALL ３Ｘ

2021/11/06(土) 17:50:44.53

顔だけならReminiもそれなりに
くっきりさせたいならGigapixel AIが他と別レベルに良かったわ

2021/11/06(土) 20:22:23.28

フレーム補間→超解像→音質改善も込みで最後に音結合
俺の環境だと8Kを60fps、120fpsにするとエンコで確実に落ちるからこの構成しかできねえな

2021/11/06(土) 20:23:58.85

>>244
DaVinciも音声出力変になるときあるしffmpegのD&Dバッチ作ってそれで良くね

2021/11/07(日) 02:23:42.26

音質改善って何使ってるの？

2021/11/07(日) 06:13:23.03

俺は音声もDaVinci Resolve（+VST）でイジる事が多いかな
イジらない場合はわざわざDaVinci Resolve起動する必要もなく、XMedia Recodeとかで結合済ませる事も多い

2021/11/07(日) 10:54:19.89

>>257
https://www.stereotool.com/
http://wpup.html.xdomain.jp/

2021/11/07(日) 16:40:28.09

>>259
ありがとう
今度試してみる

2021/11/07(日) 21:52:55.95

アルテミスの縦横200％でやってるんだけど
ファイルサイズがmp4でファイルサイズ20倍くらい
movで200倍くらいなんだけどこんなもん？

**名無しさん＠お腹いっぱい。** (JPW 0Hcd-Bzg0) · 2021/11/08(月) 00:38:43.03

最近、Androidに新しいWaifu2xが登場しました。Waifu2x ncnnという名前で、Waifu2x-ncnn-vulkanを移植したようなものです。
https://play.google.com/store/apps/details?id=pro.archiemeng.waifu2x

2021/11/08(月) 03:34:32.86

>>261
mov（ProRes）はあくまで中間コーデックで出力された動画なので、最終的な保存用途じゃないよ
中間ファイルは画質は損なわずに動画編集ソフト上でサクサク動く事を目的としてる
だからVEAIで出力されたmovを動画編集ソフトに持っていって好きなエンコーダーで保存すればよい

2021/11/08(月) 03:36:36.76

まぁVEAIからFFmpeg出力用の設定項目作ってくれたら便利なんだけどな
なんでやらないんだろう

2021/11/10(水) 09:16:38.55

VEAI　100ドル引きセール来た

2021/11/10(水) 11:33:47.01

なんでブラックフライデーからずらしてんだろ
もっと安くなる？

2021/11/10(水) 12:03:16.37

2.6になってM1対応したというタイミングだからでしょ。
15%OFFと組み合わせると$169.99になるから買おっと。

2021/11/10(水) 12:55:06.21

去年のブラックフライデーは68％OFF

2021/11/10(水) 13:59:05.79

去年の68%OFFってバンドルだけじゃなくてVEAI単品でもだった？

2021/11/10(水) 19:08:21.13

2.6になって少しパソコンの負荷が減ったかな？
サブPCのRX470でも我慢すればSD→FHDいけそう。
30分（実質24分)の動画で４～５時間くらい。

2021/11/10(水) 23:29:39.60

無料版で十分だわ

2021/11/11(木) 00:13:28.43

1時間位の動画を変換してる時に、例えば5GBのファイルになるとして
半分の2.5GBくらいまで処理が終わったとして、ファイルに2.5GBが書き込まれずに
メモリに溜め込んで他のアプリと干渉するのかクラッシュする
こまめにストレージに書き出してメモリの使用量を抑えるとか出来ないもんか

2021/11/11(木) 00:50:22.82

VRAM最低にてるんだけど落ちる
みんな安定してんのか
もしかしてVRAM足りなくなったとき、ページファイル残ってると
使ってくれたりするのか

2021/11/11(木) 00:58:13.07

と言うか情報が少なすぎて誰も何も言えないでしょ
せめてグラボくらい言わんと
半分で落ちるんだった変換元の動画半分にカットするか画像で出力すればいい

2021/11/11(木) 01:01:41.44

CPU　10400
メモリ　8GBx2　
グラボ　GTX1650
VRAM使用量は最低

topaz一つ目でCPU15％くらい、メモリは1％前後
topaz2つ目でCPU10％くらい、メモリは1％くらい
topaz3つ目でフリーズ