【超解像】画像拡大ソフト総合スレ7【waifu2x】

2021/09/12(日) 14:26:50.95

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。
※人工知能による動画の処理を行うソフトは、他に適したスレがない場合使い方も含めこのスレで扱われる事もあります

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

・Topaz Video Enhance AI (VEAI)
Topaz Labsによる豊富なAIモデルを用いて動画の超解像やノイズ除去、インターレース解除などが可能なソフト
※有償、ただし30日間のフリートライアル有
https://www.topazlabs.com/video-enhance-ai

・Flowframes
動画のフレーム補間を行えるソフト、複数のAIモデルを選べる、無料版は最新版より少し前のバージョン
最新版の配布はPatreonで月5ドル以上の支援者に対して行われている
https://nmkd.itch.io/flowframes

前スレ
【超解像】画像拡大ソフト総合スレ6【waifu2x】
http://egg.5ch.net/test/read.cgi/software/1615731336/

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2021/11/26(金) 00:00:21.69

Video Enhance AIで4つのモードを並べてPreviewすると、レンダリング中にクラッシュしてしまうわ。

2021/11/26(金) 03:01:17.31

gigapixelで画像を6倍にするのって、小さい画像ならともかく普通のサイズの画像をそんなに大きくしてどうするんだろうと思うのだけど
モニター上だとあまり恩恵ないよね

2021/11/26(金) 06:11:40.51

最初から最終的なモニタサイズでやるより大きなサイズで超解像する方が使えるピクセル数に余裕があるからでは？
多分結果としてはリサイズしたとしてもより良い解像感が得られる
要はdsr的な発想かと

2021/11/26(金) 06:23:49.11

みんなブラックフライデーで
めっちゃ安くなってるけど買わないの
クーポンとセットで買ったよ
4つセットのやつ

https://www.topazlabs.com/black-friday

2021/11/26(金) 08:31:17.17

>>455
既に買ったぜ

2021/11/26(金) 08:39:41.22

返金してもらえた。皆様感謝です！
しかし、半額返金てすごいな、、

2021/11/26(金) 10:41:23.24

Google Payで買った人いる？
10日前にGoogle Payで購入して返金してくれるってことになったんだけど、
Google Payの履歴には最初の購入の履歴すらないんだよね。。

2021/11/26(金) 13:22:53.60

>>455
返金されて得した気分になって買ってしまったｗ

2021/11/26(金) 14:25:46.19

PayPal久しぶりに使ったら高く感じたは　84.99 usd＝9,747円

¥10,221 JPY
PayPalの換算レート: 1 JPY = 0.00831528 USD
換算前: ¥10,221 JPY
換算後: $84.99 USD
このレートには、通貨換算手数料が含まれています。

2021/11/26(金) 15:04:08.00

ブラックファライデーの前に買うやつなんなん？　

2021/11/26(金) 15:15:28.44

笑

2021/11/26(金) 15:25:57.85

Paypalは一か八か賭けてドル払いだな

2021/11/26(金) 16:22:36.34

Veaiのクラッシュする原因はまだ不明ですかね？
Gpuドライバーは最新の使ってます
旧vealは調子良いのだけど..

2021/11/26(金) 17:10:32.19

人物写真だと
Gigapixel→Denoise→Sharpenの順のほうが上手くいくことがあるな

Denoise→Gigapixelだと、クッキリ度が増すけど
何かシワがくっきりとした線で強調されちゃったりする

2021/11/26(金) 20:39:01.25

>>460
今PAYPALだと1,000円クーポン来てないか？

2021/11/26(金) 23:38:10.25

普通にクレカで買ったけど、PAYPALのが安いとかあるのか

2021/11/27(土) 00:06:03.49

確かにProteusが一番バランスがよい気がする。
ただ、どのフレームに合わせるかや、映像のどの要素が足りないかを自分で調節するのは少し難しいし、合っているのかよく分からない。
将来的にはフレームごとにパラメータをAuto調整してくれるといいのだけど、技術的に難しいのかな。

2021/11/27(土) 03:09:46.76

>>468
できそうだよね。フレーム選択すればおすすめのパラメータが出てくるから、フレームを一定の間隔でスキャンしてテーブルを作っておくんだと思う。変換するときにテーブルを読み込んでモデルに反映だと思う。パラメータが変わる瞬間に見た目が大きく変わる箇所は違和感が出るかもしれない。

2021/11/27(土) 06:58:57.69

シーンなりチャプターの区切りで変える位が現実的なんじゃないかな
(それ位なら同じソース対象に開始終了フレーム設定してバッチ処理して結合すれば擬似的に出来なくもない？)
一貫性なくしょっちゅうパラメータ変わると絵作りに違和感が出ると思う

2021/11/27(土) 11:02:04.97

元々買ってなかった三点とアプグレVEAIにクーポンで合わせて150ドル
ブラックフライデーで買わないなら絶対買わないってぐらいの値下げっぷりでしたわ

2021/11/27(土) 12:00:25.88

二次元イラストに関しては、純粋な拡大勝負ならwaifu2xの方が強いねー
gigapixelで拡大しただけだと、イラストを拡大してくとなんかところどころゴミっぽい線が見える
多分設定とか組み合わせで良くなるんだろうけどそこまでやる気ないし、こっちは三次元に使う感じにしようかな

2021/11/27(土) 12:50:04.89

>>472
これは本来は写真向けなんだが二次元イラストも悪くないと思う。
https://github.com/nihui/realsr-ncnn-vulkan/releases

2021/11/27(土) 16:49:05.75

セール初日にVEAIを$84.99で買えて満足していたけど、Topazからのお得ですよメールと、ここの書き込みを見ていたらムードに流されて、静止画3つバンドルまで追加購入してしまった。
でも4つ合計で$169.98ってこれまでで一番安かったような…ここの情報を見て、Radeon RX6700XTを先に購入していたので、昔撮ったDVの映像素材がどこまできれいになるか楽しみ。

2021/11/27(土) 17:54:21.29

VEAIだけ買ったけど、4パッケージじゃなくてgigapixelとのパッケージがもう少しだけ安かったら欲しかったなぁ

2021/11/28(日) 19:59:44.56

二次元イラストはVideo Enhance AIのProteus-v3の二重掛け
これするとwaifu2xのCUnetくらいなんて余裕で超えるクオリティになる
gigapixelは明らかに二次元イラストを目的とした学習してないよなあ

2021/11/28(日) 20:15:08.96

今気づいたけどボケた画質の人物をアプコンすると肌がもちもちした感じに綺麗になるね
これも白人をモデルとしてるからなのか…

2021/11/28(日) 21:03:31.54

これgigapixelの前にdenoiseしちゃダメだな
シワがくっきり出ちまう

2021/11/28(日) 21:20:32.53

シワが出るのが正しいのでは？綺麗優先ならしゃーない

2021/11/28(日) 21:25:45.06

gigapixelはくっきりしすぎて逆に不自然になる事有る
Very Compressedで色変わるのはなんなんだろう

2021/11/29(月) 01:23:22.91

GigapixelよりVEAIのモデルのほうが気に入ってるんなら静止画読み込めるんやで
まぁ利便性はアレだけど

2021/11/29(月) 01:53:38.04

あとGigaPixelでバグってる人は、NVIDIAのStudioドライバー試すのもおすすめ
俺はそれで治った事がある

2021/11/29(月) 14:14:58.04

基本的にはDenoise→Gigapix→Sharpenの順がベストだけど

目の回りがグチャグチャになったり、妙な線が入る一部の写真はまずGigapix、その後はDenoiseでもSharpenでも順不同って感じかな？

2021/11/29(月) 16:55:23.03

残り7時間。
VEAI買うか悩むなぁ〜。
面白いけどそんなに使うかなぁ…と。

2021/11/29(月) 17:28:45.68

Vealのts変換で落ちる現象解決した方います？

もちろんnvidia studioドライバーは最新です

2021/11/29(月) 17:46:20.77

>>483
設定によってはDenoiseでクッキリするから順番はなかなか難しい話じゃないかなあ
ただGigapixelは線足す方向の感じがするわ
ちなみにリアル系じゃない3DゲーのスクショなんかだとGigapixelの後Video Enhanceでやって最後にDenoiseが一番綺麗になった

2021/11/29(月) 19:16:48.57

参考になります

2021/11/29(月) 21:14:08.23

>>484
まぁ良くも悪くもマニア向けだから財布に余裕ある人だけで良いと思う

動画を保存してさらにより良く見ようとする人なんてストリーミングが主流のこの世界にどのくらいいるんだろうか
仕事用に使ってる人もいるのかな

2021/11/29(月) 22:03:55.01

画像処理3種のバンドル買ってみたけど、やっぱり実写向きだね
2次元イラストは時間かかってもrealsr+TTAでやった方がきれいに仕上がる
realesrgan-anime+TTAも良いが微かにディティールがつぶれてしまう

2021/11/29(月) 22:21:44.23

>>489はgigapixelの話ね
まあdenoiseやsharpenも二次元向きではないけど

2021/11/29(月) 22:31:59.00

>>488
結局＄84.99で買ってしまいましたわ。

2021/11/29(月) 23:53:02.02

海外は二次元でも主線の概念が薄いからね
例えばペイント系アプリでも主線専用の機能を持ってるのは日本のClipStudioだけだったりする
価値観が違うのも影響してるんじゃないかな

2021/11/30(火) 07:23:29.75

エンコとかしてこなかった身だけど動画を高画質に拡大できると知って買っちゃった
実写ならとりあえず流れ見てるとGaiaかProteus V3で良い感じなのかな
みなさんのおすすめ数値プリセとかあったらぜひ知りたいです

2021/11/30(火) 09:23:21.51

FHDを4Kに変換してみたんだけど、2.5Kモニタだと違いが分からん

2021/11/30(火) 18:53:51.30

>>488
映像製作をやっていると、昔撮った映像素材を今のフッテージに混ぜ込めるというメリットは大きいな。昔の風景を使いたい時とかにも。資料映像の修復にも使えそう。

2021/11/30(火) 19:13:04.13

どのモデル使っても泡の表現がいまいち
もっとグラビアでディープラーニングかけろ

https://i.imgur.com/c328UjX.png
https://i.imgur.com/qRfTV0c.png
https://i.imgur.com/jag7nvG.png
https://i.imgur.com/YzMx7Dq.png
https://i.imgur.com/N8KWqWY.png

2021/11/30(火) 22:05:39.60

エロ目的はしょうがない
でも美肌効果は確実にあるから俺はやってる

2021/11/30(火) 22:39:12.10

Neat videoってセールなることってある？

2021/11/30(火) 22:49:46.42

>>496
レンガ模様はわざとらしいが、まつげがしっかりと再現されているのはいいな

2021/11/30(火) 23:33:40.27

>>496
プレビューはイマイチでもちゃんとレンダリングしたらクオリティ上がったりするよ

2021/12/01(水) 02:28:57.57

そこ結構重要
プレビューイマイチだけど動画で見たらすごくよく見える　

今時　うぉぉ！！ーってなるアプリ少ないよな～

2021/12/01(水) 02:52:47.01

試しに実写古い映像をArtemis系統で全体的に油絵みたいな質感になっちゃった・・
やっぱProteus V3が安定ですかね

2021/12/01(水) 04:04:32.09

元の動画が480P以下1000kbps以下とかだと、どう頑張っても厳しいと思う
Proteusのパラメータ上げていくとどんどん形が崩れる（特に顔）

2021/12/01(水) 04:17:58.49

>>503
色々弄ってみてはいるんですがやはりそうですよね・・
元がFullHDとかだとProteusはautoモードでも十分過ぎるぐらい綺麗になってびっくり
ここからさらに弄って自分好みに仕上げるとなると長時間どっぷりはまりそうです

2021/12/01(水) 04:23:12.39

実写で２回かけると逆にディテールが崩れたりするケースもあるので作品によって使い方がまるで違うから注意だな
自分しかやらないようなものだとひたすらトライアンドエラーしかないから時間もっと欲しいわ…

2021/12/01(水) 08:32:25.79

後一つ質問ですが、順番関係なさそうではありますがFPS60化と高画質化はどっちから始めたらいいとかってありますかね

2021/12/01(水) 08:46:33.97

やってみて好みで判断しよう
理屈では超解像後に高fps化の方が綺麗に出来るように思えるし先に高fps化だと超解像するフレーム数が倍増するので時間もかかる
(時間はソースやターゲット解像度次第では逆転もしそうな気はする)

2021/12/01(水) 09:48:34.43

>>507
ありがとうございます

2021/12/01(水) 15:50:19.24

くっそ・・お手軽に60fpsできるってのに10分前後の動画で4k高画質化の時は4時間弱で済んだけど
俺のPC性能低いせいで1日近く余裕で超えるようだ

2021/12/01(水) 15:59:31.24

うちは3分間のHD動画をProteusでFHDに変換するのに4時間掛かった
ちな2700x+1050tiの4GB

2021/12/01(水) 16:18:37.77

Ryzen9とRTX3090のPCが今の最高スペックでいいんですか？
これで正直言って全然満足できる速度が出てないです。
GPUは二枚刺し出来るみたいなんですが、同じRTX3090を二枚使えば更に早くなりますか？

2021/12/01(水) 16:24:43.34

>>510
9分弱のHD動画をProteusで1920×1080 → 3840x2160(4k化) 4時間弱
↑で出来上がったやつをさらに60fps化で1日と18時間弱と表示されました（思わずすぐ止めちゃいましたが）
スペックはi7-10700 GTX1660 SUPER
60fps化はよほど放置できる時にやるとします

2021/12/01(水) 16:41:46.55

sec./frame表示いいな　最初からこうしろよと

2021/12/01(水) 17:48:52.74

>>511
お手軽にぱぱっと変換できるような処理じゃないのでそういうものだとあきらめた方がいい。大量の動画を持っていて全て高解像度化したいとかは現実的でないよ。

2021/12/01(水) 17:54:42.71

フレーム補完はRIFEappでやってる

2021/12/01(水) 17:59:45.53

Blackmagicの人じゃないが
動画処理ってVRAMにゲームデータ送ってその上でやる取りするようなものじゃないから
PCIeやメモリ-CPUの間のデータやり取りでボトルネックが常に発生して
値段の割にパフォーマンスでないと思う　

そこそこの性能のPCで分散したほうがいいでしょ　　

2021/12/01(水) 20:21:02.10

>>511
> Ryzen9とRTX3090のPCが今の最高スペックでいいんですか？

XEON２発積んだWSとかにすればもっと上がるかも

　

2021/12/01(水) 22:50:02.82

最高スペックはThreadRipperやEPYCになるだろう。ゲームや一般的なアプリでは最速でないが、この手の分野は多数のスレッドに分割しやすいのでコアの多い構成が有利。

2021/12/01(水) 23:36:06.81

Threadripperが動画編集向けなんですね。
最初からこっちのBTOにしとけばよかった・・・。

2021/12/02(木) 01:45:07.14

いや、動画編集向けという訳じゃなくHEDT(ハイエンドデスクトップ)だが………。
コア数が多いので並列計算には強く、PCI-Expressのレーン数も多いことから多数のSSDやビデオカードをフルスピードで同時使用でき、メモリ帯域も広い。
それらが活かせる用途が限られていること、Ryzen9が多くの人に十分なコア数となったことから最近影が薄い。
一般的な動画編集ではあまり活躍しないよ。

2021/12/02(木) 03:31:44.94

Mojoの部分でジレンマが発生する

例えばこれなんかVHSふうに加工してもそれっぽいなにかでしかないわけじゃん
https://www.youtube.com/watch?v=u-WTfP3WJc4&;list=LL

VEAIでVHSをアップスケールしてもやっぱそれっぽいなにか何になってしまう
VHSらしさが消えるわけよ　

他にもフィルムのグレインノイズが消えたり
ハイフレーム化したらコミカルで安っぽく見えるようになったとかもあるだろうし

必ずしもシャープでくっきり綺麗じゃなくていいわけじゃん
SNOWじゃないがSF/幻想の世界でいいわけ

今後この部分がどうなるか気になるが
作ってるやつはその部分が読み取れないヲタク系で
数値化できない色とか表現とかファッションとかが読み取れないやつが作ってるし
ユーザーに多い　

目が肥えたやつが見ても騙されるVHS加工やFILM加工が出てくるのかって行ったら無理
オーディオだと未だにLP録音の再現とかにてないし

アナログにたいしての冒涜なんじゃないかと
PS1動画のギザギザ感がPSっぽいんだろっていうような
青春時期の思い出、リバイバル部分でズレが発生する
俺がやってたプレステと綺麗だし違うと….　

この部分に対して専門用語を作るべきだと思うｗ　

2021/12/02(木) 03:50:29.76

解像度を下げればいいのでは？

2021/12/02(木) 05:44:17.56

Dione Interlaced DVで15分前後のDVD動画を綺麗にできたんで別の20分弱のやつをやるとなぜか落ちる
単純にVRAM不足なのかな

2021/12/02(木) 06:16:31.47

>>522
自己解決、失礼しました
あと音ズレもするようで元の動画消しちゃうとめんどくさくなるんですねー
色々勉強なって動画編集が楽しいですわ
今年PC新調した身ですがケチらず高性能のBTO買えばよかったと少し後悔

2021/12/02(木) 09:55:05.25

>>509
僕のPCは残り時間dayで表示されるよ。でも使ってる～たのし～

2021/12/02(木) 14:04:38.73

メインメモリをGPUのメモリとして使うと遅くなる？

2021/12/02(木) 15:17:27.71

家にあるVHSやSVHSのテープをデジタル化して処分していずれVEAIで綺麗にしたいと思ってる
取り込み方法でアドバイス欲しい GV-HDRECは持ってるんだけどこれでいいのか他にいい方法があれば教えて欲しい

2021/12/02(木) 15:24:01.78

　 ∧_∧_＿
　( ･∀∥|o|　＿＿
　(　つ∩￣　 ||　 |
　と＿)_)　　 ||　 |
　　　　　　　工工
　　　　　　 [二二]

2021/12/02(木) 17:55:12.52

>>527
昔の汚いVHS映像なんて何をどういじったところでどうにもならんよ
ほんの少しだけましになった程度

2021/12/02(木) 17:56:30.97

大分マシになるよ

2021/12/02(木) 18:08:55.97

S-VHS録画のはかなりきれいになるよ
なにこれってレベル

2021/12/02(木) 20:14:05.38

>>525
Dione Interlaced DVの方は画質向上と共に勝手に59fps化もされるから時間的に言ったら楽でありがたい
弄ってると楽しいですよねー

2021/12/02(木) 21:45:16.96

インターレース縞消そうとすると肌質とかのっぺり感がすごくなって難しい

2021/12/03(金) 00:56:33.15

父親がよくyoutubeで見てる昭和の白黒テレビの実写動画をVEAIでアプコンしてあげたいんだが、Dioneでいいんかな

2021/12/03(金) 07:25:34.56

>>511
マルチGPUはやったことあるけど、動きとしては1フレームごとに
処理が交互に動いてる感じで、その動きがロスになる。
処理的には2倍はならなくて良くて1.5倍で消費電力は2倍かな。
まったく同じグラボ使わないと不具合が出るかも。
自分はAMDのクロスファイヤーでやったけどすぐやめたよ。

2021/12/03(金) 08:13:57.44

まあSLIせずにveai2つ立ち上げてソース動画の前半と後半やらせた方が効率はいいだろうね
(あらかじめ前半と後半でソース自体ぶった切っておくかはお好みで)

>>564
色々試してみるのがいいよ
もしくは具体的に動画指定してくれれば誰かが作例示してくれるかもしれんが

2021/12/03(金) 11:28:01.18

まだブラックフライデー価格やってたから買った。
テレワークなので今日は仕事してるふりしながらこれで遊ぶ

2021/12/03(金) 11:35:46.66

社会人にもなってスレに日記書き込んでるんか

2021/12/03(金) 11:55:32.75

いいじゃないの〜

2021/12/03(金) 12:09:20.15

みんなの日記帳だぞ

2021/12/03(金) 12:13:18.64

高齢者と若者が同じ話題で遊ぶのがネットのいいところ

2021/12/03(金) 13:29:33.32

VEAIで動画を拡大せずに高画質化する方法ってないのかな？
どうしてもはみ出る部分が気になる

2021/12/03(金) 13:40:12.70

サイズ100%にすれば良いのでは？

2021/12/03(金) 19:04:10.11

100%(Denoise,Deblock)ってやつですね。有難う

2021/12/03(金) 21:06:30.62

もともとそこそこ綺麗な動画なら少しアップしたほうがきれいになるよ　110とか120とか　
すこしAIで作らせると色の階調とかも滑らかになる

ていうかここまで追い込めるならカメラのリアルタイム画像エンジン処理のノイズリダクションとか
完全にOFFれれば良いんだけどな～　
高感度ISOがベタってなるのはこのリアルタイムでそれっぽくやってるリダクションのせいだし

2021/12/03(金) 22:21:26.57

M1 Macmini買いだよな　
https://learn.topazlabs.com/wp-content/uploads/2021/11/Apple-Hardware-Performance-Test-1200x461.jpeg

2021/12/04(土) 05:12:24.55

拡大サイズによってモデル違うからね
追い込めば良くなるポテンシャルがあるからついつい時間がかけてしまう

2021/12/04(土) 17:08:40.36

スロモ動画の場合
スピードランプって言って見せたいシーンだけ速度を可変させて編集することが多い
ここってエディット系は絶対いれてこないよな

早送り時のモーションブラーをリアルに入れるAIも需要あるはず
ただの早送りは安っぽくなったりコミカルになりがち

2021/12/04(土) 20:50:38.05

VideoEnhanceAIのスレあったのかよおおおおおお
次スレからタイトルに入れてちょ

2021/12/04(土) 21:29:47.29

もうwaifu2xの話してる人ほとんどいないからスレタイ変えていいと思うよ

2021/12/04(土) 21:31:02.40

waifu2xって既に時代遅れ？