【超解像】画像拡大ソフト総合スレ4【waifu2x】

2018/10/16(火) 17:11:24.76

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・waifu2x概要：二次元画像を拡大したいと思ったことはありませんか？ (waifu2x作者氏のブログ)
http://ultraist.hatenablog.com/entry/2015/05/17/183436

・waifu2xとその派生ソフト一覧
http://kourindrug.sa kura.ne.jp/waifu2x.html

・waifu2xのベンチマーク結果まとめ - Togetter
http://togetter.com/li/831437

・無料で二次元画像を人工知能が補完してハイクオリティで1.6倍/2倍に拡大できる「waifu2x」 (gigazinの記事)
http://gigazine.net/news/20150519-waifu2x/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

・NeuronDoubler
人工知能超解像プログラム NeuronDoubler
http://loggialogic.blogspot.jp/2012/06/neurondoubler.html

VIPQ2_EXTDAT: checked:vvvvv:1000:512:----: EXT was configured

2019/09/30(月) 14:36:20.13

>>474
デフォルトのままで良いんじゃないかな。アニメ用実写用と使い分ける。

2019/10/01(火) 00:53:34.25

https://nhk2.5ch.net/test/read.cgi/liveetv/1569845264/
https://nhk2.5ch.net/test/read.cgi/liveetv/1569841137/
https://nhk2.5ch.net/test/read.cgi/liveetv/1569835142/
https://nhk2.5ch.net/test/read.cgi/liveetv/1569827521/
https://nhk2.5ch.net/test/read.cgi/liveetv/1569804351/
https://nhk2.5ch.net/test/read.cgi/liveetv/1569771012/
https://nhk2.5ch.net/test/read.cgi/liveetv/1569767494/

2019/10/01(火) 06:23:56.90

サイト使うと保護されていない通信って出るけど
問題ないの？

2019/10/01(火) 08:25:36.32

>>474
TTAにチェック、使用モデルをcuNetに

2019/10/01(火) 09:27:15.84

>>477
第三者に読み取られたとしても画像データくらいじゃね

2019/10/01(火) 09:52:43.64

Video2X Lossless Video Enlarger
https://github.com/k4yt3x/video2x
One of the following drivers
waifu2x-caffe
waifu2x-converter-cpp
waifu2x-ncnn-vulkan
Anime4K

2019/10/05(土) 18:43:38.20

>>475
比較してみたんですがあまり違いがないんです
>>478
分割サイズが大きすぎますってエラーが出るんです

2019/10/06(日) 00:05:17.48

>>477
httpsでアクセスしてないから

2019/10/06(日) 02:23:38.40

>>481
分割サイズを64とかにしても駄目？

2019/10/06(日) 11:56:23.70

https://github.com/k4yt3x/video2x
https://user-images.githubusercontent.com/21986859/52905766-d5512b00-3236-11e9-9aea-077636539679.png

2019/10/06(日) 20:52:17.00

>>484
全く試していないけどwarpsharpを自然にしたような線になってるね

2019/10/06(日) 21:02:15.94

背景の質感とか潰れまくってるな

2019/10/11(金) 20:19:19.20

いわゆる油絵エンコみたいな感じだな

2019/10/13(日) 20:58:48.53

TecoGAN試してみた
waifu2xよりは綺麗だけど、実写映像もアニメも全体的にぼやけた印象。
あと上にも書かれてるが入力の解像度が高いとメモリ不足で処理が止まる。
ESRGANの方が綺麗で高解像度も処理できて汎用性ありそう。

2019/10/13(日) 21:26:27.25

ESRGANというのは、GUIだけで操作できる環境あるの？
dGPUがなくとも動くのならばテストしてみたい

2019/10/13(日) 22:53:44.26

waifu2x-caffeみたいに単体動作するGUIは無いかな
拡大率はモデル毎に固定だし、GUI使う必要があんまりない

>>441の画像をESRGANで拡大してみた。
waifu2xより鮮明だけどエイリアス出やすい
https://imgur.com/a/GhyMNre

2019/10/13(日) 23:04:54.27

TecoGANは動画じゃないと効果薄いんじゃね。前後のフレームがあってこそ

2019/10/14(月) 02:51:26.69

なんかどれも「やっぱりこんなもんか…」って感想しかなんだよあ

2019/10/19(土) 17:29:24.15

esrganのGUIはこれがええ。でかい画像でも自動で分割した後再結合してくれる。
https://github.com/ptrsuder/IEU.Winforms

俺はアニメ絵を拡大する時はUnholy03ってモデルを使ってる
https://upscale.wiki/wiki/Model_Database
https://github.com/alsa64/AI-wiki/wiki/Model-Database

実写系ならBox。ニッチだろうけどピクセルアートならFatality MKIIってモデルがかなりすごい。
de-next.ow
ncube.com/ind
ex.php/s/s65m43X
LoCfA6iz

2019/10/19(土) 17:56:09.82

Fatality MKIIすごない？
http://www.framecompare.com/image-compare/screenshotcomparison/J00MJNNU

ArtStation1000て言う新しいピクセルアート用モデルも出てるな
onedrive.liv
e.com/?authkey=%21AP69c97OwK
xR3lM&id=36762472C0107E2A%21106
99&cid=36762472C0107E2A

2019/10/19(土) 18:00:50.96

>>493
分割処理してくれるのはええね
めちゃくちゃ有益な情報ありがとう

2019/10/19(土) 21:24:16.80

Unholy03使ってみたけどCUnetよりくっきりしてて溶けたような感じも少ないのが良いね
ただ色が変わるのがちょっと気になるけど
あとCPUでも一応動かせるけどめっちゃ時間かかるからGPU推奨やね

2019/10/19(土) 22:11:16.13

ESRganResizer 1.1.5 (a simple GUI for ERSgan + prefilter) (11/09/2019)
http://forums.qhimm.com/index.php?topic=18798.0

2019/10/30(水) 15:21:33.22

2019/10/30(水) 15:22:03.18

2019/10/30(水) 15:22:20.20

2019/10/31(木) 05:22:29.77

FatalimiX
https://i.imgur.com/vuSvgCz.png

文字の再現率が高すぎて笑う

2019/11/01(金) 19:28:04.20

>>501
これ、すごいぞ!

2019/11/02(土) 09:37:45.38

https://f.uploader.xzy.pw/eu-prd/upload/20191102092736_6454436243.png
https://f.uploader.xzy.pw/eu-prd/upload/20191102092918_305352307a.png

Model Database Wiki に載ってるアニメとコミックの主なモデルで拡大してみた

2019/11/02(土) 09:55:25.10

俺には4x_Fatality_MKII_90000_Gが一番優秀に見える
waifu2x出た当時はすごく感動した記憶があるけど、今改めて見ると結構ボケるのね

2019/11/02(土) 10:40:56.79

https://f.uploader.xzy.pw/eu-prd/upload/20191102103504_4466386335.png

詳しくは知らないだけど IEU.Winforms の機能の Models interporation で
FatalityMKIIとWaifuGANを掛け合わせたらシャープ過ぎず補間が甘くなりすぎずでいい感じになったっぽい

2019/11/02(土) 12:36:19.18

>>505
右下が好きかな

2019/11/02(土) 16:50:32.09

FatalityMKIIと色々混ぜてみた
https://f.uploader.xzy.pw/eu-prd/upload/20191102164255_397a78736d.png

とりあえずFatalityMKIIを混ぜとけば画質は良くなる感じ？
もうどれが一番良いか俺にはわからん

2019/11/02(土) 16:52:39.72

>>441
これやってみてよ

2019/11/02(土) 17:03:30.70

ESRGANって結構実用性あるモデルあるみたいだけどイマイチ知名度とか普及の具合低いね
導入難易度の問題なのかな

2019/11/02(土) 17:41:50.68

色変わっちゃってるのはなんなのだ？

2019/11/02(土) 17:59:16.10

モデルによって単体で色変化するのがあるけど混ぜると更に酷くなるのがあるね

2019/11/02(土) 18:22:49.57

>>505
掛けた合わせってどうやるの？

2019/11/02(土) 20:13:06.78

Fatality MKIIはドット絵用のためか、良くも悪くも細かなドットを滑らかな線やグラデーションにするから
イラストでも髪や布の質感が表現された物や、細かな模様があるような物はのっぺりしてしまって向かないと思う
盲目に混ぜるより用途によって使い分けた方が良いのでは

2019/11/03(日) 01:37:36.87

IEU.Winformsを使いたくてPythonといくつかのモジュールをインストールしたのですが、
from torch._C import *でImportErrorとなってしまいます。
どうすればいいか教えてもらえますでしょうか。

2019/11/03(日) 02:45:22.47

>>513
使い分けこそAIで自動的に最適化してくれ…

**514** (ﾜｯﾁｮｲ 6f58-qQ6b) · 2019/11/03(日) 03:01:16.97

「conda install pytorch -c pytorch」を実行したところImportErrorは無くなりましたが、
「TypeError: unsupported operand type(s) for *: 'NoneType' and 'float'」というのが
出てきてしまうようになりました。

2019/11/03(日) 12:05:59.28

画像ファイル名に日本語があると駄目だった気がする

2019/11/03(日) 14:34:44.70

>>517
ありがとうございます！！出来ました！！
しかし日本語が使えないのは非常に不便ですね

2019/11/03(日) 20:45:46.10

適当なGUIDにでもファイル名変更してボタン1つで元の名前に戻すみたいなソフトあれば便利かもな

2019/11/03(日) 21:26:08.42

OpenCVの読み書きでコケてるので該当のpyを修正してbuildすれば
直せるっちゃあ直せるんだけど面倒だよね

2019/11/04(月) 18:08:19.21

Fatality MKIIの90000より後のって何処にあるの？

2019/11/07(木) 11:56:23.47

waifu2x-ncnn-vulkan/models/

https://github.com/nihui/waifu2x-ncnn-vulkan/tree/master/models
add upconv_7_photo model

2019/11/09(土) 11:58:30.27

upconv_7_photoモデルに対応
https://github.com/f11894/waifu2x-ncnn-vulkan-GUI/tree/master/waifu2x_i18n_gui

2019/11/12(火) 17:59:35.99

CUDA利用するにあたってGeforce Driverはバージョンがあった物をインストールしないといけませんよね
どこを見れば一致しているか分かりますか？

2019/11/14(木) 00:33:10.24

https://i.imgur.com/wQN1rrp.png
なんでや…

2019/11/14(木) 08:45:32.94

フロントエンドできてて使いやすくなってる。
https://github.com/deeppomf/DeepCreamPy/releases/tag/v2.2.0-beta

2019/11/14(木) 12:37:24.10

ファイルサイズでか！

2019/11/14(木) 13:02:32.95

>>525
俺もそうなったからIEU使ってる

2019/11/14(木) 14:50:27.59

>>526
もうちょっと前のバージョンからメモリ食いすぎ＆変換遅すぎで使いにくい

2019/11/16(土) 17:29:51.13

>>526
起動しねーんだけど

2019/11/17(日) 16:26:23.12

URLいっぱい貼ってもらってるけどupconv_7_photoモデルをどうやって導入すればいいのかがわからん…
releaseの方には更新ないし

2019/11/17(日) 16:37:10.34

面倒なら以下のトップページにある Clone or Download のプルダウンメニューからZIP落として
中にある models-upconv_7_photo フォルダを今使っている waifu2x-ncnn-vulkan の所に
置けばいい

https://github.com/nihui/waifu2x-ncnn-vulkan

2019/11/17(日) 16:54:10.25

>>531
models-upconv_7_photoのモデルをダウンロードしてmodels-upconv_7_anime_style_art_rgbのフォルダ中にあるモデルに上書きすれば無理やり使うことが出来るね
正式な使い方をしたいなら自分でビルドするか新しいバージョンがReleaseされるのを待たないと駄目

2019/11/19(火) 17:02:08.30

>>532-533
丁寧にありがとうございます！
upconv_7_photo遣いたかったんで助かりました！

2019/11/19(火) 19:06:53.57

コマンドライン実行時に
_wfopen ??? failed
と表示されて？？？となっていたんだけど
https://github.com/nihui/waifu2x-ncnn-vulkan/issues/46
まず最初に cd /d Z:\waifu2x-ncnn-vulkan-20190712\ で実行場所移動する必要があったのか
モデル毎回差し替えるのも手間だしupconv_7_photoモデル専用のフォルダ作って↓みたいな.batファイル置いてD&Dする方が楽そう

@echo off
cd /d "%~dp0"
if "%~1" == "" goto error

echo waifu2xパラメータ設定：-n=ノイズ強度(拡大のみの時は0でなく-1) -s=拡大率 -t=分割数 -j=スレッド数
waifu2x-ncnn-vulkan.exe -i %1 -o "%~dp1%~n1_(upconv_7_photo)(L0_x2).png" -n 0 -s 2 -j 16:16:16

2019/11/22(金) 13:21:59.06

顔の拡大精度がハンパないアプリ
https://play.google.com/store/apps/details?id=com.bigwinepot.nwdn.international&;hl=ja

2019/11/22(金) 18:08:57.87

顔だけなの？

2019/11/24(日) 11:27:16.43

>>536

結構いいんちゃう？自動でフォトショみたいな美肌効果ついたのには笑った

https://f.uploader.xzy.pw/eu-prd/upload/20191124112114_7259567341.jpg
https://f.uploader.xzy.pw/eu-prd/upload/20191124112114_6277523830.jpg

2019/11/24(日) 13:23:33.70

顔だけスゲーな
他は変わらんかった

2019/11/24(日) 18:18:39.64

そばかす消えたけど髪の毛も絵の具みたいになってる。

2019/11/25(月) 08:53:30.24

手書き風って感じだな

2019/11/25(月) 12:50:57.38

美人はなにしても美人ですよね

2019/11/25(月) 16:11:48.86

>>536
かなりいいですね。
昔、ガラケーで撮った写真がかなりきれになってびっくり。
最近、こういう高性能の多いのかな。

2019/11/27(水) 02:22:18.23

waifu2xで２倍にしてから
>>536 使うとディテール余り失われなくて良い感じ

2019/11/28(木) 06:08:01.88

顔ならこれも良さそう
https://github.com/ewrfcas/Face-Super-Resolution
https://raw.githubusercontent.com/ewrfcas/Face-Super-Resolution/master/results/result.png

2019/11/28(木) 07:33:01.40

おっちゃんの眉毛が綺麗に整えられてて笑うｗ

2019/11/28(木) 17:12:09.78

＞＞536
文句をつけるとすると、顔以外は全く補正をかけてくれない。
なので、写真によっては顔だけ貼り付けたみたいになる。
全身像の補正はまだ技術が追いついていないか。

2019/12/04(水) 05:06:29.84

https://github.com/nihui/waifu2x-ncnn-vulkan/issues/46
で
waifu2x-ncnn-vulkan.exe -i %1 -o "%~dp1%~n1_(upconv_7_photo)(L0_x2).png" -n 0 -s 2 -j -m models-upconv_7_anime_style_art_rgb
で動かすと
_wfopen ??? failed になるんだけど自分だけだろうか
cunet か -s 2 指定の時は普通に変換してくれるんだが（models-upconv_7_anime_style_art_rgb の中身をphotoに入れ替えてもダメだった）

**548** (ﾜｯﾁｮｲ f563-wzfJ) · 2019/12/04(水) 05:08:55.63

と思ったけど
models-upconv_7_anime_style_art_rgbフォルダにはscale2.0xのファイルしかないから
元々1x拡大は対応してないのか

2019/12/04(水) 19:44:47.55

Up系のモデルはノイズ除去と拡大を同時に行うからノイズ除去単体は出来ない
caffeでUp系のノイズ除去のみを選択した場合は一旦拡大してから元のサイズに縮小してる

2019/12/04(水) 22:56:33.83

へぇー、拡大してから元に縮小してるなんて初めて知ったわ
CUnetでも「ノイズ除去と拡大」した画像と「ノイズ除去」だけしてから「拡大」した画像が微妙に違うのは同じような理由なのかな

2019/12/05(木) 15:07:57.58

CUnetは拡大、ノイズ除去、拡大+ノイズ除去で各々別のモデル持ってなかったっけ

2019/12/12(木) 20:01:39.54

Twitter、ウェブ経由でアップロードしたJPEG画像の無劣化表示に対応
https://japanese.engadget.com/2019/12/11/twitter-jpeg/

ノイズ除去は今までより使う頻度減りそう

2019/12/15(日) 19:12:05.90

waifu2x_snowshellがwaifu2x-ncnn-vulkanに対応

https://github.com/YukihoAA/waifu2x_snowshell/releases

2019/12/15(日) 19:41:56.93

>>553
無劣化というのはダウト

2019/12/17(火) 02:33:15.46

今まで再変換して劣化してた場合があったとかなんじゃね？

2019/12/20(金) 13:34:15.23

Waifu2x-Extension
https://github.com/AaronFeng753/Waifu2x-Extension/releases/tag/v4.0
NEW : 3D Real-life Photo support !!

2019/12/20(金) 14:24:49.35

そう書いてあるじゃん

2019/12/29(日) 16:11:05.44

Anime4kSharp
https://github.com/shadow578/Anime4kSharp
https://raw.githubusercontent.com/shadow578/Anime4kSharp/master/ASSETS/sbs-final-compare.png

2019/12/30(月) 13:55:40.17

線がな・・・キモチワルイんだよな
そっちはなんとかできないのか？そもそも学習させる気がないのか？

2019/12/30(月) 14:38:40.91

もっと離れて見たら

2019/12/30(月) 14:57:53.46

オープンソースなんだから気に入らないなら簡単になおせるじゃん
まあ出来合いのものを弄る程度の知能もねーか
喚くくらいのことしかできねーかな

2019/12/30(月) 15:07:29.72

はい
できません
無理です
不可能です
おじさん泣いちゃうから虐めるのはやめて

2019/12/30(月) 19:56:43.05

でもこのちゃんと処理してない線画を見るとお兄さん（重要）泣いちゃうやめて

2019/12/31(火) 09:47:25.05

古い映像を綺麗にできる実用レベルのGAN系ソフトまだ～？

2020/01/12(日) 09:47:47.01

models-upconv_7_photoモデルに対応
https://github.com/f11894/waifu2x-ncnn-vulkan-GUI/releases/tag/v1.0.7

2020/01/12(日) 19:18:42.87

>>566
いつもお疲れ様です。
あとここで書くのは間違いかもしれませんが、waifu2x vulkanでは倍率の2以上は指定できないのでスライダーは消した方がいいかも…

2020/01/12(日) 23:20:03.67

>>567
スライダーはncnn-vulkan本体が2倍以上の拡大に対応したときそのまま使えるように用意しておいたんですがまだ対応する気配が無いので修正したほうがいいかもしれないですね……

2020/01/13(月) 02:20:44.90

分割サイズの部分もラジオボタンじゃなくて数値入力出来るようにしてくれると嬉しいかも

ttps://i.imgur.com/8m9ksBf.jpg
upconv_7_photoモデルに対応 Nov 8, 2019 の時のソースを弄って使ってます

2020/01/21(火) 14:16:24.49

AIを駆使してアニメや映画をヌルヌル動かしてくれるフレーム補間ソフト「Dain-App」
https://gigazine.net/news/20200121-dain-app/

フレームレートが低い動画でもフレームを補間し滑らかに表現することが可能なソフト「Dain-App」がアルファ版として公開されています。
フレーム補間技術としてはAMDのFluid MotionやSVPが知られていますが、Dain-Appでは「DAIN」と呼ばれる動画内の空間の
深度を認識し、視聴者に近い物体を遠い物体よりも優先してサンプリングし中間フレームを補間するAIを使ってフレーム補間を実現しています。

Dain-App [Alpha 0.1] by GRisk
https://grisk.itch.io/dain-app

Interpolating Pixel Art and Sprites with AI.
https://www.youtube.com/watch?v=q2i6FXVjNT0

2020/01/21(火) 17:01:34.24

布の動きとかいい感じだな
ただペンギンの足が汚いｗ
苦手なものがあるのかな

2020/01/22(水) 11:35:40.19

AIを駆使したインターレース解除もやってくれ

2020/01/22(水) 11:56:18.50

>>570
スレチ

2020/01/22(水) 13:24:15.12

動画・画像処理ソフト総合スレに改名しよう