【超解像】画像拡大ソフト総合スレ2【waifu2x】 [無断転載禁止]©2ch.net

2016/05/10(火) 11:28:05.20

画像を人工知能(Neural Network)を利用して拡大、あるいはノイズ除去するソフトウェアの話題を総合的に扱うスレです。
本来の用途は静止画が対象ですが動画のアプコン処理に関する話題もOKです。
ただし動画編集ソフトの使い方の部分の話は各ソフトのスレに行って下さい。

--主なソフト--
・waifu2x
本家Webサービス
http://waifu2x.udp.jp/

・waifu2x概要：二次元画像を拡大したいと思ったことはありませんか？ (waifu2x作者氏のブログ)
http://ultraist.hatenablog.com/entry/2015/05/17/183436

・waifu2xとその派生ソフト一覧
※リンクがNGワードに！

・waifu2xのベンチマーク結果まとめ - Togetter
http://togetter.com/li/831437

・無料で二次元画像を人工知能が補完してハイクオリティで1.6倍/2倍に拡大できる「waifu2x」 (gigazinの記事)
http://gigazine.net/news/20150519-waifu2x/

・Otaku ワールドへようこそ！［212］嫁を拡大する人工知能／GrowHair (日刊デジタルクリエイターズの記事)
※従来の拡大手法とwaifu2x、SRCNNの違いについての丁寧な解説記事
http://blog.dgcr.com/mt/dgcr/archives/20150605140100.html

・NeuronDoubler
人工知能超解像プログラム NeuronDoubler
http://loggialogic.blogspot.jp/2012/06/neurondoubler.html

VIPQ2_EXTDAT: checked:vvvvv:1000:512:----: EXT was configured

2016/05/10(火) 11:29:30.45

MSE・PSNRによる画像拡大アルゴリズム10種・ソフト8種、計14パターンの画質評価結果
http://loggialogic.blogspot.jp/2015/09/msepsnr10814.html

・waifu2xとその派生ソフト一覧
http://kourindrug.sa kura.ne.jp/waifu2x.html

Q． waifu2xの派生バージョン多いけどどれがオススメ？
A． Windows 64bitかつGPUがnVidia製なら、Waifu2x-caffe。それ以外の環境なら、tanakamura版あたりを試すと良い。
2015/11/11現在tanakamura版はアルファチャンネルを上手く処理できないようなので、その場合はWaifu2x-caffeを使うと良い。

・歴代スレ
waifu2x [転載禁止]??2ch.net
http://anago.2ch.net/test/read.cgi/software/1433637613/

【超解像】画像拡大ソフト総合スレ1【waifu2x】 [転載禁止]??2ch.net
http://potato.2ch.net/test/read.cgi/software/1447218757/

2016/05/10(火) 11:57:50.59

いちおつ

2016/05/10(火) 12:11:54.14

　　　　　　　　　旦旦旦旦旦
　　　　　　　　　旦旦旦旦旦
　　　　　　　　　旦旦旦旦旦
　　　　　　　　　旦旦旦旦旦
　　　　　　　　　旦旦旦旦旦
　　　　　　　　　旦旦旦旦旦
　　　　　　　　　旦旦旦旦旦
.　　 ∧＿∧　　旦旦旦旦旦
　　 ( ´･ω･ ).　旦旦旦旦旦
.　　 /ヽ○==○ 旦旦旦旦旦
　　/　　||＿　|_ 旦旦旦旦旦
　　し'￣(_)）￣(_)）￣(_)）￣(_)）　

2016/05/10(火) 12:52:09.56

>>2
> 2015/11/11現在tanakamura版はアルファチャンネルを上手く処理できないようなので、その場合はWaifu2x-caffeを使うと良い。

これは古い情報で、20151130以降のバージョンならアルファ対応してる。

2016/05/10(火) 13:32:05.47

>>1乙
>>5
cppの0101入れてFireGL環境でqtのGUIつこうてますけれど
元画にあるPNGアルファチャンネル消えて色があふれたみたいな画になるよ
使い方が悪いのか見当がつかない

2016/05/10(火) 13:55:21.96

ここは暴言多いんで、ﾜｯﾁｮｲありでいいわ

2016/05/10(火) 13:57:29.01

おつおつ

2016/05/10(火) 14:49:07.77

こっちが本スレかな？
乙

2016/05/10(火) 15:11:00.81

スレ立て乙

2016/05/10(火) 17:42:07.13

ﾜｯﾁｮｲで特に必要性薄くなったけど念のため・・・
オススメ追加NGワード（正規表現）の手順　（改訂版）

１．[ツール]→[設定]→[機能]→[あぼーん]→[NGEx]→テキストボックス内に適当な名前（例：caff荒らし）を入力して→[追加]

２．次に開くウィンドウで、以下の様に設定する。
　　　NGWORDのタイプを「正規(含む)」に変更し、そしてキーワードに以下をコピペ（予め1行にすること）
(は([ 　\.]+)?み([ 　\.]+)?出|V([ 　\.]+)?G([ 　\.]+)?A|1([ 　\.]+)?0([ 　\.]+)?2([ 　\.]+)?4|7([ 　\.]+)?6([ 　\.]+)?8|
1([ 　\.]+)?9([ 　\.]+)?2([ 　\.]+)?0|6([ 　\.]+)?4([ 　\.]+)?0|M([ 　\.]+)?D([ 　\.]+)?.?([ 　\.]+)?5([ 　\.]+)?5([ 　\.]+)?0([ 　\.]+)?0([ 　\.]+)?|
L([ 　\.]+)?7([ 　\.]+)?9([ 　\.]+)?7|解([ 　\.]+)?像([ 　\.]+)?度([ 　\.]+)?|糞|雑([ 　\.]+)?魚|ク([ 　\.]+)?ソ|ザ([ 　\.]+)?コ|客|干([ 　\.]+)?[さしすせ])

３．左下のリストボックスを「透明あぼ～ん」に設定。[OK]を押すれば新規レスからあぼ－んされるので取り敢えず終わり。
　　　既存のレスも消去したいなら４．も実行。

４．[スレッド]→[このログを削除]して、[ファイル]→[最近閉じたスレ]から削除したスレを開き直す。
　　　レス番号が歯抜けになっているはず。

２．のキーワードはその動向を見ながら変更追加して下さい。中には関係ないのも巻き込むので注意ですね。
正規表現をもう少し駆使すればかなりの精度でNGできます。ただ上記とその変更でも十分活用出来るでしょう。

2016/05/10(火) 18:18:00.24

>>6
qtのGUIって↓のやつだよね？
https://github.com/khws4v1/waifu2x-converter-qt

試しに使ってみたけどアルファ保持されたよ。
アルファ消えるのはもしかして古いバイナリを使うように設定してるとかかな？

2016/05/10(火) 18:19:52.36

ﾜｯﾁｮｲのおかげでレトロガイジが駆逐されたみたいやな

2016/05/10(火) 18:42:31.00

レトロガイジって何ですか？

2016/05/10(火) 18:48:05.87

「レトロなキチガイ児」のことじゃね？知らんけど。

2016/05/10(火) 19:40:07.52

>>12
お手数かけました情報ありがとう
そちらで保持されておられるのなら自分の方法が間違ってるに違いないと確信した
qt側の設定で最新のcppの実行ファイル指定はできていたので何か間違いがないか
手順を再確認してみる

2016/05/10(火) 19:52:07.36

昔の栄光にすがってる、哀れな独りよがりのピエロのことだよ。

2016/05/10(火) 20:02:00.70

>>12
試行した結果
自作PNG→OK
webで拾ってきた透過PNG→NGなのもある
作者さんが注意書きされておられた
bKGDに変な値入ってると変な色が出る可能性はある。
上記に該当する画像だと判断できました
アプリで開いて透過PNGで保存し直しwaifuするとOKでした
いまさらな話題で失礼しました

2016/05/10(火) 23:59:53.00

新しい機器が買えないニート

2016/05/11(水) 15:04:46.70

一応連絡です(作者の人ではないのですが)
waifu2x-c/c with Batchfile and HTA-GUIをご利用中の方へ

・画像アップロードでウェブサイトを乗っ取られる攻撃が進行中--「ImageMagick」脆弱性
http://japan.zdnet.com/article/35082361/
というニュースが少し前より出ております。
念のため、最新のImageMagickに更新されておいた方がいいかと思います。

・ImageMagickダウンロードページ
http://www.imagemagick.org/script/binary-releases.php#windows
(種類がいろいろあるようですが、ImageMagick-7.0.1-3-Q16-x64-dll.exeでよいかと思います。)

なお更新するにあたって、事前に古いバージョンを手動削除し、念のためCCleaner等できれいにしてから最新版をインストールされた方がいいと思います。
(手動で削除しないと古いバージョンが残ったままになってしまうため)

・インストール時の注意点
途中で「Select Additional Tasks」の画面が表示されたら

上から2番目
Add application directory to your system path

1番下
Install ImageMagickObject OLE Control for VBscript,Visual Basic,and WSH

この2点に必ずチェックが入った状態にして先に進めること。

2016/05/11(水) 15:20:21.00

ちなみに、先ほどImageMagickを更新してから久々にwaifu2x-c/c with Batchfile and HTA-GUIを起動して使ってみましたが、
やはり私のPCでは利用できないままなのは変わらないようです。
(起動時にエラーは出るし、ファイルの選択すらできない。)

2016/05/14(土) 10:55:12.05

前スレで画像のbit深度について書いていた件なんだけど、いろいろ調べていたら
・ImageMagickのビット深度と画質劣化
http://mikio.hatenablog.com/entry/2016/02/12/220435
という興味深いページに行き当たった。

曰く、「ImageMagick 7からはHDRIがデフォルトになる」そうです。
※HDRIとは、「内部表現を浮動小数点数で持つ機能」のことだそうです。
先日>>20にてアップデート推奨と書きましたが、現在のバージョンが7.0.1-3ですので、おそらく対応しているものかと思います。

ImageMagick 7以降を使うと旧バージョンに比べて画像フォーマットの変換時の劣化を抑えられるかも。
旧バージョンを利用中の方は更新されておく方がいいと思います。

ところでもともと調べていたのは「各色8bitの画像を各色16bitにきれいに変換できるフリーソフト」を探すことが目的だったのですが、案外ないものですね。
(Photoshop関連の情報はたくさん出てくるのですが)
ImageMagickだとできるかなと調べているのですが、よくわからんです。
誰かご存知でしたらよろしくです。

2016/05/14(土) 11:04:35.89

HDRIについてさらなる考察をされている件も興味深いので合わせてどうぞ
(HDRIかつ16bit、あるいは32bit、64bitのケースなど)

・ImageMagickのビット深度と画質劣化その2
http://mikio.hatenablog.com/entry/2016/02/15/221433

2016/05/14(土) 11:13:20.68

＞「各色8bitの画像を各色16bitにきれいに変換できるフリーソフト」
綺麗に、ってのは、オーディオで言うところのアップサンプリングみたいなのを考えてる？

解像度を上げつつ、補完するピクセルの色を16bitでしか
表現できない色で表現する、ならわかるけど
解像度を上げないでそのまま16bit化するのはただ
ファイル容量増えるだけで何も変わらないよ

2016/05/14(土) 11:44:34.95

>>24
「オーディオで言うところのアップサンプリングみたいなの」ということになるのかどうかわかりませんが、
各色16bitに変換する際にトーンジャンプが起きないように補完しつつ変換するような感じの動作をするものを探しています。

2016/05/14(土) 12:20:35.15

表現が間違っているかも。
元画像に含まれるトーンジャンプ(バンディング)を滑らかに補正しつつ、bit深度を拡張、というべきかも。
つまり元画像が高圧縮された画像であればあるほどトーンジャンプが発生している確率が高いので、
そのまま拡大するのではなく、あらかじめ階調をできる限り滑らかに補正しておいてからwaifu2xに渡す、というような前準備を考えています。
等倍サイズでは目立たなくとも、拡大するとトーンジャンプは目立つことが多いので。

2016/05/14(土) 12:29:11.32

可能性の話になるけれど、ディープラーニングを利用したノイズ除去とは別にやの、トーンジャンプ除去モードとかbit深度拡張モードがあればいいのか？
(等倍での出力も対応)

ノイズ除去も目的に応じてより細かいモードがあるといいのかも。
ブロックノイズ軽減モードとか、モスキートノイズ軽減モード、カラーノイズ除去モード、などなど。

2016/05/14(土) 18:50:49.16

思いつきのメモ
画像を圧縮することによって発生する問題(ブロックノイズとかトーンジャンプとか)を、圧縮前はこうだっただろうという想定で復元する「超復元」。
さすがにそんな都合のいいものは無理？

2016/05/14(土) 19:20:53.65

>>28
1.00000001倍に拡大して自動判別してノイズ除去で良いんじゃね

2016/05/14(土) 21:32:59.96

>>28
トーンジャンプ／ブロックノイズした絵を入力・解除された絵を出力するように学習させれば可能かも

2016/05/15(日) 04:52:32.51

＞画像が高圧縮された画像であればあるほどトーンジャンプが発生している確率が高いので
トーンジャンプ(バンディング) が判るような圧縮画像じゃ、8bit諧調ですらないのでは？ってレベルの画像なんじゃないだろうか・・・

2016/05/16(月) 15:12:06.66

処理時間半分以下になるバージョンの公開が待ち遠しい

2016/05/16(月) 16:35:15.65

フィギュアの写真をアニメ調にしてくれる機能があったらなぁ。

2016/05/16(月) 18:25:08.61

新バージョン待ち遠しいな

2016/05/16(月) 19:44:29.81

新モデルはupconvブランチに置いてますけど
ピクセルアートなどでひどいアーティファクトが出てることに気付いたのでまだ変更します。
時間半分以下でイラストでのベンチマークも上ではありますけど
以前より悪くなるパターンもあってあやしくなってきました。

2016/05/16(月) 21:18:27.97

処理時間よりどれくらい綺麗に処理出来るようになったかが気になるな
特に前スレで書かれてたノイズを使ったときの溶けた感じや輪郭線など

とにかく作者さん頑張って

2016/05/17(火) 08:12:24.79

モデルデータなんだけど、現状はアニメ用とか写真用とかに分かれていて利用者が選択するやり方になっているけど、
絵柄の部分ごとに自動的に切り替えて適用させることはできないものなんだろうか？
(切り替える判断をディープラーニングでさせる)
・階調情報が少ない面が一定以上ある部分→アニメモデル
・輪郭線が複雑に構成されている部分→Yモデル
・それ以外→RGBモデル
みたいな。

2016/05/17(火) 11:39:19.21

>>35
ピクセルアートはコントラスト比が高い絵柄が多いから、現状のwaifu2xのやり方だと溶ける症状が出やすいかもしれませんね。
どうも溶ける症状が出やすいところって、コントラスト比の高い部分が隣接しているような場所でおこりやすい気がしますね。
(だから結果として輪郭周辺部とかで目につきやすいのかも)

コントラスト比が高い部分とコントラスト比の低い部分を同じ割合で強調してしまっているのかな？
元画像のコントラスト比が高くなるほど、強調する度合いを低下させておくような仕掛が必要だと思います。

2016/05/18(水) 21:27:07.33

新バージョンでは輪郭線が綺麗になる？
SDからFHDにアップコンバートするとこんな感じになるんだよね…
http://i.imgur.com/GhxuUH3.png

2016/05/19(木) 11:36:41.13

>>39
みんなそれを期待していると言っても過言ではないのけど、実際問題としては相当難しいんだろうなとも思う。
というのは、人間の目には輪郭とは「一本の繋がった線」として認識しているので、目に見えにくいところが少しくらい途切れていても
脳内で補完される(これを「アモーダル効果」とかいうそうです)仕組みがあるけれど、コンピューターに勝手にそのような効果が備わっているわけではないので、
輪郭線の細部の「ムラ」になっていたり、ノイズまみれになっているところを、いかに連続した線としてきれいに見せる＝すなわち「連続した線として認識できる」
かが鍵になるのだと思う。
つまり、現状のwaifu2xは細かい点ごとを処理している状態であるところを、あらかじめディープラーニングを使って「この連続成分は線なのか？」ということを
事前に認識する前処理を施したうえで、「線成分(＝連続成分)」と認識した場所と、そうではないところで処理方法を切り替えることが必要なのではないかと個人的に
思ってはいるのだけど(連続成分については超解像効果をオフ、もしくは弱めて適用)、作者様、そんな前処理&処理方法の切り替えはできないものでしょうか？

2016/05/19(木) 11:54:46.91

現状が出力1px出すのにその周りの7x7pxがどうなっているかで出力を決めているので
その範囲でそれが線か点か平面かみたいなところは判定できていると思います
新モデルはこれが12x12に広がるのでもう少し複雑なパターンも分かるのではと思うけど
フィルタが大きくなるとそれだけ無関係なピクセルから影響を受けやすくもなるので
アーティファクトも出やすくなってしまう