【超解像】画像拡大ソフト総合スレ6【waifu2x】

2021/03/14(日) 23:15:36.34

!extend:checked:vvvvv:1000:512
!extend:checked:vvvvv:1000:512

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。
※人工知能による動画の処理を行うソフトは、他に適したスレがない場合使い方も含めこのスレで扱われる事もあります

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・waifu2xのベンチマーク結果まとめ - Togetter
http://togetter.com/li/831437

・無料で二次元画像を人工知能が補完してハイクオリティで1.6倍/2倍に拡大できる「waifu2x」 (gigazinの記事)
http://gigazine.net/news/20150519-waifu2x/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

・Topaz Video Enhance AI (VEAI)
Topaz Labsによる豊富なAIモデルを用いて動画の超解像やノイズ除去、インターレース解除などが可能なソフト
※有償、ただし30日間のフリートライアル有
https://www.topazlabs.com/video-enhance-ai

・Flowframes
動画のフレーム補間を行えるソフト、複数のAIモデルを選べる、無料版は最新版より少し前のバージョン
最新版の配布はPatreonで月5ドル以上の支援者に対して行われている
https://nmkd.itch.io/flowframes

VIPQ2_EXTDAT: checked:vvvvv:1000:512:: EXT was configured

2021/07/16(金) 15:48:49.92

GigaPixel AIは動画フォーマット対応してますか？

2021/07/16(金) 16:06:58.88

veaiのフレーム補完だめだわ
5分くらいのクリップだと気付かなかったが90分越えると、とんでもなく速度がおかしくなってることに気づいた
だんだん加速する、それも一定ではなく上下する

23.976→59.94が悪いのか、proresが悪いのか
avisynthで10000フレーム単位に区切って補正したが気が狂うかと思ったわ

短いクリップだとわからないからたちが悪い

2021/07/16(金) 16:10:30.05

>>668
加速じゃないわ、速度が落ちるというか伸びる
補正するのに上げてたのと勘違いした

2021/07/16(金) 16:55:20.23

>>666
GigaPixel　動画対応してるんだね　てっきり画像だけかと
体験版で遊んでみる

2021/07/16(金) 19:04:36.86

>>657
俺もどっかのスレで
聖子のソレみてVEAIのAIアップスケール知ったわ

2021/07/16(金) 19:13:50.86

中森明菜さんでやってみようかと思ったが十分キレイだったのでやらなくても良いと思った

2021/07/16(金) 19:42:42.61

VEAIでボケた映像をクッキリさせるFILTERを知りたい

2021/07/16(金) 20:57:52.30

ブロックノイズとかジャギってるのはどうにでもなるけどぼやけてるのはそもそもAIが輪郭として捉えてくれないからなぁ
悲しいけど何をしても効果はかなり薄い

2021/07/16(金) 23:56:25.53

あまりぼやけたの食わせるとAIがキメラ作り出す

2021/07/17(土) 00:53:40.40

>>674
FidelityFX CAS (Contrast Adaptive Sharpening) v1.0
https://github.com/GPUOpen-Effects/FidelityFX-CLI/releases/tag/v1.0

2021/07/17(土) 04:38:38.85

>>676
もうFidelityFXを使ったツールが出たのか…

2021/07/17(土) 07:12:02.65

先日アニマックスで久々に放送されたアニメ映画が、DVDそのままレベルの画質で
ノイズも目立ってたのでVEAI　dtd-3で等倍クリーニングしたら　10日かかる････
プロジェクトの途中セーブ・再開機能が欲しい

ゲームをしないので1650でも特に不満は無かったけど、この業界に足を突っ込むには
非力すぎるのを思い知った

2021/07/17(土) 10:21:40.05

>>666
Mmp4をそもそも読み込まないんだけど
GigaPixelで動画あつかうのどうすればいい？

2021/07/17(土) 10:47:29.82

>>679
写真向け
https://www.topazlabs.com/gigapixel-ai
動画向け
https://www.topazlabs.com/video-enhance-ai

2021/07/17(土) 13:38:50.58

>>666
GigaPixelは複数起動できないから
あまり処理速度をあげられないのが難点

2021/07/17(土) 15:35:42.05

>>679
ffmpegで連番画像切り出しかVEAIで画像出力すればいける
ディスクスペース食うから数TBの空きがないときついけど

2021/07/17(土) 18:37:41.41

iphone12nimiでとった動画VEAIで読み込んだら上下逆になったんだけど(´・ω・｀)

2021/07/17(土) 19:10:06.28

本来脳も逆さの映像を見てるんだから更に逆の場合でも見られるように訓練すればいいのでは

2021/07/17(土) 19:28:22.43

VEAIとGIGApixel はHEICとHEVCの入力には対応してないの？

2021/07/17(土) 19:41:58.73

>>682
ありがと　

2021/07/18(日) 00:12:58.51

VEAI2.3を470.05ドライバ+3060で使えてる人いる？
3060を選択するとVRAMエラーが出て一緒に刺してる1660sしか使えない
海外フォーラムではstudioドライバ使えって書かれてるけどマイニングもしたいからこのバージョンしか使えない

2021/07/18(日) 01:47:56.81

3080使ってるけどStudioドライバーじゃないとエラーなるよ。

2021/07/18(日) 10:23:52.11

Aries
https://luismi.itch.io/aries

再生範囲指定・速度調整・各フレームへのメモ書きや範囲出力なども可能なクリエイター向け動画再生ソフト

2021/07/18(日) 23:42:27.86

Studioドライバから471.11ドライバに変えたけどVRAMエラーは出ないな

2021/07/19(月) 00:23:01.28

>>138の
https://github.com/GPUOpen-Effects/FidelityFX-CAS
の新しいやつが>>676なんだがかなり出来良いよ

2021/07/19(月) 00:45:35.08

ゲームに対するFidelityFXの効果は今のところ評判が微妙なんだが、画像に対しては良い効果発揮するのか？

2021/07/19(月) 01:18:29.67

80年代～90年代初頭あたりのアイドル高画質化して遊んでるけど、糞画質でも割といい感じにしてくれるの本当すごいと思う

2021/07/19(月) 02:38:06.50

FidelityFX-CASはLinux版が出てくれればなぁ…

2021/07/20(火) 00:31:42.19

https://blogs.nvidia.com/blog/2021/07/19/game-developers-conference-studio-omniverse/
Nvidiaの最新版Studio DriverでVEAIの最適化来てる
とは言ってもVEAI全体じゃなくて、Chronosのtensor core使用時の処理限定だけど
RIFEの方が手軽で処理も早いからChronos全然使ってなかったけどどの程度改善されてるかな

2021/07/21(水) 23:44:18.59

本家ので拡大した画像そのままpngで保存すると壊れてない？
正しい手順が必要なの？

2021/07/22(木) 00:35:14.25

みなさん　ビデオカードはどの程度のを使ってますか?

ここの用途だとNVIDIAとRADEONどっちが良いのでしょう
高いのがよい･･･でしょうけど

2021/07/22(木) 01:34:51.60

cuda使えるほう

2021/07/22(木) 01:42:17.00

>>697
RADEONは使ったことないのでなんとも言えんが、いずれにせよ買うのならあと1～2ヵ月様子観たほうがいいよ
やっと値段がどんどん下がると噂されてるから

2021/07/22(木) 02:17:02.69

>>697
拘らないならゲフォ買え

2021/07/22(木) 03:42:51.99

俺はフレーム補完があったからRadeon買ったけど今は廃止されたし
AI絡みの機能とかアプリはgeforceのが強いイメージあるわ

2021/07/22(木) 04:35:08.54

リアルタイムで音声処理しないならGeFoが間違い無いな
古井戸入ってるRade持ってないなら1枚抑えとくべきだが

2021/07/22(木) 06:13:50.56

RyzenのAPUってVEAIでGPUとして使える？

2021/07/22(木) 07:17:53.86

3090買いましょう

2021/07/22(木) 12:49:08.21

そして新作MMO『New World』をプレイしましょう。
(ホントにやるかどうかは情報収集してから判断してね)

2021/07/22(木) 13:22:16.53

>>705
グラボ破壊ゲー薦めるなw

2021/07/24(土) 10:42:27.21

3DCGもスピードワープ一択だな……RIFEはほんとアニメーションにしか効果薄いな
まぁDaVinciのスタジオは値段クソ高いから高品質なのは当然っちゃ当然なんだが
同じ60fpsでもこうも違うものかと疑問に思えてくる

2021/07/24(土) 10:47:53.87

このピクセルシェーダー使ってみOptical Flow対応してて破綻少ないから
https://github.com/brimson/reshaders/blob/master/shaders/cMotionBlur.fx

2021/07/24(土) 17:59:31.36

俺も色々検証したがアニメの補間もDaVinci Resolveが頭一つ飛びぬけてる印象
コマ送りで見るとすごい破綻してるフレームもあるが、再生して連続で見ると不思議と綺麗に繋がってるように見える。ディズニーのフルアニメーションのようなヌルヌル感。
VEAIとかは破綻は少ないけど、このヌルヌル感がない。AIアルゴリズムで目の錯覚を利用してるのかな。

2021/07/24(土) 18:13:09.54

>>707
値段クッソ高いつっても、買い切りで3万だし、ずっとバージョンアップできるし、付属のスピードコントローラーをメルカリで売っちまえば実質1万5千円ぐらいになる。
そう考えればそこまで高いって印象はないなぁ。

そもそもこれについてるカラコレ機能は昔は業界で3千万円ぐらいで売られてたシステムらしいしな。

2021/07/30(金) 16:32:05.20

https://github.com/xinntao/Real-ESRGAN

2021/07/30(金) 20:16:41.67

>>711
良い

2021/07/30(金) 20:57:16.49

バチグーです

2021/07/30(金) 22:18:46.52

昔のGigaPixelみたいな塗った絵っぽくなっちゃうな
今後に期待

2021/07/31(土) 19:14:15.72

>>711
Here is a TODO list in the near future:

optimize for human faces
optimize for texts
optimize for animation images

楽しみ

2021/07/31(土) 19:57:17.90

Enhance Your Video Frame Rate
with SmoothMotion AI technology
https://app.interial.io/

2021/07/31(土) 23:25:46.72

スピードワープってコマ送りにしたらちょくちょく元画像も弄ってたりしてるのな、他の補間ソフトだと中間の画像しか作らないのに結構びっくり

2021/08/01(日) 06:43:19.03

スピードワープは何フレーム水増しするかではなく、ジャストフレームではないときの対処方法なので、
速度やfpsによっては期待に反して元フレームが使われない場合もある

2021/08/01(日) 14:05:36.27

VEAIで分割1週間かけてノイズ多め1440x1080のアニメ映画を1920に清掃した。
フレームレートは弄らなかったけどやっぱり音ズレは発生していたので
音声は元データから引っ張ってくる事に。

静止画は綺麗、動きも何とか、でも画面全体がパンすると波打つ････

711は中々良さそうだけど使い方解説サイトが見つからない

2021/08/01(日) 14:18:42.28

VEAIで追加されたProteus6、調整の仕方わかってきた。
これ、ソースがSD画質＆実写なら最強のAIモデルだと思うわ。

まぁ他のAIと違って毎回手動調整が必須にはなるけど。

2021/08/01(日) 16:34:53.26

VEAIにスマホで撮った動画読み込むと方向がめちゃくちゃになるときがあるな
PCで再生する分には普通に表示されるのに(´・ω・｀)

2021/08/02(月) 00:51:13.45

>>721
そういうのは中間コーデックでVEAIに渡したほうがいいよ

2021/08/02(月) 03:12:58.22

そろそろVEAI単独スレが欲しいな

2021/08/02(月) 05:22:49.04

そうなると8割VEAIの会話のこのスレ、廃れそうだなｗ

2021/08/02(月) 07:17:24.89

誰もwaifu2xcの話してなくてかなしい
モデル更新してないのあれ？

2021/08/02(月) 09:34:40.58

VEAIのフレーム補間がver upで性能向上すれば
いよいよ買おうかな

2021/08/02(月) 10:09:07.24

エンコードとか面倒臭い直ぐに再生したいんや
アプコンなんてすると無駄に用量でかくなるしな

2021/08/02(月) 10:09:46.20

>>721
ほぼVEAI専用スレと化してるのでどうぞ
http://egg.5ch.net/test/read.cgi/software/1615731336/

2021/08/02(月) 10:10:16.48

すまん
>>728は誤爆

2021/08/02(月) 11:56:03.00

>>725
イラストの拡大に使っているとかそういう話でなく？
バージョンアップは特にしていない気が

iMac 5kなので拡大して足りないw

2021/08/02(月) 15:27:39.65

>>711
試したら真っ黒な画像が産まれた、余計なソフト要らないんじゃないのかこれ

2021/08/02(月) 18:17:25.80

>>482
3080と6800の速度は同等らしいが、4kアプコンだと逆転するらしい

タイミング的には来年rdna3でるまで待つべきなんだろうな
rdna3もrtx4000もさらにコアとメモリが増えるらしい

2021/08/02(月) 18:20:18.44

VEAI向きのgpuは3080、3090が強くておすすめなんだけど、1080tiベースで2-3倍がはっとだkqら4kではまだ性能不足

たいし1660tiで6割性能
2070-2080で同性能
3060-3070で150%の性能と

金余って3080／3090買うならいいんだけど、まだ不完全だから、ベスト目指すなら来年待つべきよ
コア数で1-2万、RAMスピードで1-2tb/s、RAM20GB以上らしいから

ここら辺はドライバのアップデートもある

2021/08/02(月) 18:25:50.43

いまnvidiaはＴＥＮＳＯＲだとかをVEAIに向け、VEAIも最適化路線に走ってる
だからドライバと最適化はさらに進む予定で、あとは来年4000でたら、1080比10倍とかブレイクスルー来るかも

海外フォーラムじゃ1080ti×10のレンタルgpuつかってVEAIやるとかいう話題があったな、それが実現するわけだ

2021/08/02(月) 18:26:28.60

違うな、その話題たしかDINEAPPをレンタルgpuでって話題だったわ

2021/08/02(月) 19:04:08.60

今が1080tiとかせめてRTX世代なら来年まで待てと言うのは分からないでもないけどさ
ミドル帯GTXやRTX2060以下でveaiとか時間の無駄過ぎるから流石に来年待たずに買っちゃってもいいと思うけどね

2021/08/03(火) 06:03:33.22

RTX3090買いましょう

2021/08/03(火) 06:09:46.56

veaiってcpuがネックにならない？

2021/08/03(火) 12:38:12.72

DVDソースからDione Interlaced DV v2でインターレース解除させてる動画が
一瞬だけ妙にチラつくような気がしたんで調べてたんだけど、
これ場面が変わる時の一コマ目だけがちゃんとインターレース解除されずに
グチャッとなるね。シーンチェンジの破綻ってこれの事なのかな。

2021/08/03(火) 12:43:55.36

例えば犬が100コマ映ってるシーンから猫が100コマ映ってるシーンに移行する動画は
猫の1コマ目(101/200コマ目)だけ低解像度で破綻したような画像になってしまう。
犬100コマと猫100コマを別々にVEAIで処理すると問題なく綺麗に仕上がるので
映像が切り替わるタイミングでの処理に課題がありそう

2021/08/03(火) 13:09:15.33

Dioneは全く使ってないなぁ
インタレ解除はD3DVPで済ませてるから

2021/08/03(火) 16:18:15.79

madvrのインタレ解除はハードウェアだけと
3種類選択出来るな
オートモード、24fpsモード、30fpsモード
まあドライバ側でソフトウェア処理になってたら
madvrのハードウェア処理は無効になるな見かけ上有効だけど

2021/08/03(火) 17:45:57.30

Ryzen 7 3700X (32G) + RTX 2070 SUPER (8G) という環境でVEAI使い始めてるんだけど
プレビューの最期とか書き出しの最期とかによく落ちるんだよね。
Dione Interaced DV v2使ってるせいなのかなんなのか。
変換に何時間も掛かる長い動画だと怖いよね。

2021/08/03(火) 18:01:52.40

>>743
DV v2のMP4で出力したら、同じ画像が100コマくらい連続してる箇所が
あったりしたんで、出来上がった動画を確認した方が良いかも。

2021/08/03(火) 18:13:19.07

>>744
あららそんなこともあるんだ。
変換したら確認してみる。
インターレース解除を別ソフトでやってからVEAIに入れた方が少しはいいのかな。
それともあまり変わらないのかな。
DVデータが山ほどあるから面倒だなぁ。

2021/08/03(火) 19:34:39.80

>>743
使い始めなら念のためだけどグラボのドライバ、スタジオドライバにしてる？
一応veaiはgame readyよりstudio推奨(最適化あり)だよ

2021/08/03(火) 23:40:58.54

>>746
普段Resolve使ってるから推奨のstudioドライバ使ってて今も最新になってて
ツール上でVEAIは最適化ありになってる。
そもそもタスクマネージャー上ではGPUが15%くらいしか使われてないというのも
気になってるんだけど。

2021/08/04(水) 03:14:54.21

それはそんなもんだね
ソースから解像度高いともっと使用率上がるけど用途的に普通はソースSD付近だからね
まあ後はテンサーコアが主に処理してて普通の使用率としては上がりにくいのか、或いはやってることは割と地道な画像処理なんでそこまで上がらないのだと思われる
使い切りたいならveai複数起動するといいよ、一つのみと比べて1割位速度は落ちるけど複数ファイル処理でトータルの効率は上がる
CPUとディスクIO性能にも余裕があればなお良い

2021/08/04(水) 09:57:32.87

VEAI複数起動なんて方法もあるんだ。
いろいろ試してみるよ。
ありがとう。

2021/08/04(水) 14:31:17.28

VEAI、proresがよく落ちるから途中再開可能というtifにしてみたら、、、、
45分経ってソフト固まって、山ほどtifは作られていたんだけど、
サイズが全部0って何よーー。

2021/08/04(水) 17:48:52.06

正直な話、VEAIはPNG出力しか信じられない

2021/08/04(水) 19:02:22.84

>>751
分かるマン

2021/08/04(水) 19:37:30.65

えっそうなんだ

2021/08/05(木) 06:26:17.05

GPUがちゃんと仕事してるかモニターしたいのならELSAから出てるこの無料ツール入れるといいよ
見た目がWindowsのタスクマネージャーとそっくりなのでとっつきやすい。
https://www.elsa-jp.co.jp/products/detail/elsa-system-graph/

2021/08/05(木) 06:27:52.85

あ、書き忘れてたけど↑のはNVIDIAのGPU使ってる人向けね

2021/08/05(木) 10:53:11.16

https://dotup.org/uploda/dotup.org2553185.mp4
DaVinci Resolveのスピードワープ、動画じゃなくて静止画を数枚並べてみると、こんな感じにモーフィングのような効果になって面白いな。
他のだとクロスフェードで誤魔化しちゃうやつ多いけど、ちゃんと足りない絵を描画してくれてるんだなというのがはっきりわかった。

2021/08/05(木) 10:59:22.42

これはこれで面白いな

2021/08/05(木) 16:36:04.63

VEAI、再インストールしたりPC再起動したりあれこれしたら、
すこぶる調子良くなったー。
これ凄いし楽しいね。
教えてくれた人ありがとー。

次いつ安くなるかな。

2021/08/05(木) 18:18:50.68

スピードワープだけ切り取って安く販売してほしい

2021/08/05(木) 22:00:44.74

>>756
おおおこれは良いもの見た

2021/08/05(木) 23:43:58.54

ターミネーター２みたいな事になっとるやんけ

2021/08/06(金) 08:53:52.31

Voodooのグラボが20年ぶりに復活するらしいな
勝算は…あるのか？

2021/08/06(金) 09:04:08.41

>>762
デマてか捨て垢からの投稿みたいだけどな

2021/08/06(金) 09:16:18.07

RTX 3090を凌駕する性能で日本円で9万8000円とかだったら勝てる

2021/08/06(金) 10:42:20.34

Gigapixel AIって1万かぁ・・・
無料のwaifuに頑張ってもらいたいものだ

2021/08/06(金) 11:42:41.21

VEAI 2.4きたー