過去ログ
お勧めダウンロード(丸ごと取り込み)ソフト
http://pc5.2ch.net/test/read.cgi/software/998567803/
お勧めダウンロード(丸ごと取り込み)ソフト2
http://pc9.2ch.net/test/read.cgi/software/1085915277/
探検
お勧めダウンロード(丸ごと取り込み)ソフト3
■ このスレッドは過去ログ倉庫に格納されています
2007/02/06(火) 19:13:37ID:SEh3Iu6i0
318313
2008/10/07(火) 05:40:38ID:hu35XLEh0 >>317
私はcygwinというUNIX風のプログラムを動かす環境をWindowsで入れていましたので、
それでインストールしましたが、
ふつうのWindowバイナリは「wget windows」でぐぐったら見つかりました。
Wget for Windows
http://gnuwin32.sourceforge.net/packages/wget.htm
wget(Windows版) - 俺の基地
http://yakinikunotare.boo.jp/orebase/index.php?wget%A1%CAWindows%C8%C7%A1%CB
この辺ではないでしょうか?試してはないですが。
wgetはコマンドラインのツールなので注意です。
私はバッチファイルを書いて実行してます。
私はcygwinというUNIX風のプログラムを動かす環境をWindowsで入れていましたので、
それでインストールしましたが、
ふつうのWindowバイナリは「wget windows」でぐぐったら見つかりました。
Wget for Windows
http://gnuwin32.sourceforge.net/packages/wget.htm
wget(Windows版) - 俺の基地
http://yakinikunotare.boo.jp/orebase/index.php?wget%A1%CAWindows%C8%C7%A1%CB
この辺ではないでしょうか?試してはないですが。
wgetはコマンドラインのツールなので注意です。
私はバッチファイルを書いて実行してます。
2008/10/07(火) 06:33:16ID:k78/uLlJ0
>>318
ありがとうございます!これでやってみます。
ありがとうございます!これでやってみます。
320名無しさん@お腹いっぱい。
2008/10/07(火) 07:56:16ID:pjeOFoUzO パンドラの動画をダウンロードしてiPodに入れるやり方教えて下さい
2008/10/09(木) 19:17:17ID:rJyyGwzD0
巡集ってDLしたファイルを消す方法って
フォルダ排除と設定ファイル排除しかない?
フォルダ排除と設定ファイル排除しかない?
2008/10/11(土) 23:38:49ID:UlAef+iX0
2008/10/14(火) 05:43:24ID:CWdTo3bh0
ttp://users.ugent.be/~bpuype/wget/
2008/10/18(土) 09:14:27ID:NA8ZY32U0
マグノリア、手軽にWebページをスクラップ「ホームページスクラップブック」
保存したWebページをPDF/JPEGファイルへ書き出す機能も
ttp://www.forest.impress.co.jp/article/2008/10/17/hpscrapbook.html
保存したWebページをPDF/JPEGファイルへ書き出す機能も
ttp://www.forest.impress.co.jp/article/2008/10/17/hpscrapbook.html
2008/10/20(月) 21:48:39ID:SV8NrUaK0
苦闘の末DLがうまくいったので記念カキコ。(無駄に長い
認証必要なサイトのDLのためにいろいろ試したので…。
1. Website Explorer
ずっと昔に出会ったソフトがこれだったので、ずっとこれを使ってた。
認証も手軽にできて、細かい設定無しにDLしやすかったのですが、
膨大なデータ(100000ファイル超)のサイトの場合、
解析時のキャッシュが増えるにつれて、かなり処理が重くなる。
負けずに数日動かしていたのですが、
私が馬鹿やってエラー落ちしたので別ソフトを探しました。
2. WinHTTrack
複数URL指定ができていい感じ?
いくつかのサイトを落とすときに利用して気に入った。
しかし、認証に弱い…。
認証に成功するサイトもあるのかもしれませんが、私が試したサイトではダメでした。
どうでもいいかもですが、DLサイト目次みたいなindex.htmlが生成されますが、
charset=iso-8859-1→shift-jisにすれば日本語文字化けは解消されます。
認証必要なサイトのDLのためにいろいろ試したので…。
1. Website Explorer
ずっと昔に出会ったソフトがこれだったので、ずっとこれを使ってた。
認証も手軽にできて、細かい設定無しにDLしやすかったのですが、
膨大なデータ(100000ファイル超)のサイトの場合、
解析時のキャッシュが増えるにつれて、かなり処理が重くなる。
負けずに数日動かしていたのですが、
私が馬鹿やってエラー落ちしたので別ソフトを探しました。
2. WinHTTrack
複数URL指定ができていい感じ?
いくつかのサイトを落とすときに利用して気に入った。
しかし、認証に弱い…。
認証に成功するサイトもあるのかもしれませんが、私が試したサイトではダメでした。
どうでもいいかもですが、DLサイト目次みたいなindex.htmlが生成されますが、
charset=iso-8859-1→shift-jisにすれば日本語文字化けは解消されます。
2008/10/20(月) 21:49:38ID:SV8NrUaK0
3.WeBoX
DLを試しても一部のファイルしか落ちてこなくて使い物にならない。
恐らく、私が使い方を理解してないのが原因orz
4. Teleport Pro
レビューが少ないのは、日本語化されてないし、有料だからですかね…?
サイトの認証は簡単に成功しました。
DL時の階層保持や、HTML解析設定など、どこをいぢればいいのか少し迷いましたが、
ちょいちょい触ってるうちに理解しました。
結局、目当てのサイトのDLはこれのおかげでうまくいきました。ありがとう。
どうでもいいですが、DLしたサイトは東進 過去問データベースです。
DLを試しても一部のファイルしか落ちてこなくて使い物にならない。
恐らく、私が使い方を理解してないのが原因orz
4. Teleport Pro
レビューが少ないのは、日本語化されてないし、有料だからですかね…?
サイトの認証は簡単に成功しました。
DL時の階層保持や、HTML解析設定など、どこをいぢればいいのか少し迷いましたが、
ちょいちょい触ってるうちに理解しました。
結局、目当てのサイトのDLはこれのおかげでうまくいきました。ありがとう。
どうでもいいですが、DLしたサイトは東進 過去問データベースです。
2008/10/20(月) 23:16:00ID:vXNKs2Pn0
報告どうも
よく分からないけど海外製のが一番うまくいったりする場合もあるのね
よく分からないけど海外製のが一番うまくいったりする場合もあるのね
2008/10/21(火) 06:16:41ID:r9pcwQQ+0
追記
Teleport Proは65530ファイルでDLを打ち切る様子。
Teleport Proは65530ファイルでDLを打ち切る様子。
2008/10/22(水) 14:47:13ID:Uty5mEif0
FirefoxのScrapBookみたいに
すんなりスクラップできるソフトってありますか?
まるごとじゃなくてもいいんです・・・・
すんなりスクラップできるソフトってありますか?
まるごとじゃなくてもいいんです・・・・
2008/10/26(日) 22:56:41ID:Z0qQpGL90
2008/11/08(土) 09:57:14ID:HMLV6FJZ0
サイトに入るときパス認証があってファイル毎DLページの前にDLKEY有るアップローダのファイルってDL出来るやつ有りますか?
パスもKEYも知ってるんですが何分ファイル数が多い(1500以上)もんで…
説明わかりにくくてすいません
パスもKEYも知ってるんですが何分ファイル数が多い(1500以上)もんで…
説明わかりにくくてすいません
2008/11/09(日) 05:43:33ID:r9fZofmi0
Firefoxのツールバー で使えて 埋め込み動画が落せるのって
ありませんか?
ありませんか?
2008/11/10(月) 12:34:07ID:RJUgrUkx0
うん
2008/11/12(水) 09:40:33ID:199gHslN0
dlkey突破できる奴が有れば…
2008/11/15(土) 02:12:07ID:0sXE2VgW0
JustDiver 2.0
2008/11/17(月) 23:17:57ID:bYSAyiWi0
HTTrackを使っているんですが、FC2のサイトが保存出来ません。
2ヵ所ほど試したんですが、indexのhtmlファイルを1つ保存するだけで終了してしまいます。
デフォルトの状態で保存してみても、リンク全てを保存するを指定してみても駄目でした。
上手く保存する方法は無いでしょうか?
2ヵ所ほど試したんですが、indexのhtmlファイルを1つ保存するだけで終了してしまいます。
デフォルトの状態で保存してみても、リンク全てを保存するを指定してみても駄目でした。
上手く保存する方法は無いでしょうか?
2008/11/26(水) 22:46:57ID:AvoPmSlt0
338337
2008/11/27(木) 07:07:22ID:1gPOJKDS0 巡集にて下記ワイルドカード指定を行うことによって無限にダウンロードし続ける心配や
画像については何とかなったのではとおもいます。
http://www.doblog.com/weblog/myblog/31550*
http://img.doblog.com/32000/u31550/*
残りはコメントです。 引き続きよろしくお願いします。 orz
画像については何とかなったのではとおもいます。
http://www.doblog.com/weblog/myblog/31550*
http://img.doblog.com/32000/u31550/*
残りはコメントです。 引き続きよろしくお願いします。 orz
2008/11/27(木) 10:21:47ID:o5f/E9xS0
「波乗野郎」が、立ち上げた途端に異常終了する。
何故だ。
今までは動いていたのに。
機械のOSは、XPホームエディション。
予備のWin2kの機械(ファイアウォールとかは同じソフト)でやってみると、
現在、普通に動作している。
XPでも、大昔の設定ファイルを使うと、ちゃんと起動するのだが。
沢山取得先を登録できて、毎週とか毎日とかの取得時間設定が出来て、
使い勝手が良いソフトなんで、捨てたくないんだよーん。
何故だ。
今までは動いていたのに。
機械のOSは、XPホームエディション。
予備のWin2kの機械(ファイアウォールとかは同じソフト)でやってみると、
現在、普通に動作している。
XPでも、大昔の設定ファイルを使うと、ちゃんと起動するのだが。
沢山取得先を登録できて、毎週とか毎日とかの取得時間設定が出来て、
使い勝手が良いソフトなんで、捨てたくないんだよーん。
2008/12/30(火) 21:06:37ID:qDOzkieX0
もうこういうソフトは需要がないかねえ…
2008/12/30(火) 21:58:34ID:P2sFxOkY0
Wikiとかうまく保存が出来ないことが多いから使わなくなったよ。
ゲームの攻略Wikiとかを人がいない時間に保存して
混んでる時間は保存してる方を見たいんだけどな
ゲームの攻略Wikiとかを人がいない時間に保存して
混んでる時間は保存してる方を見たいんだけどな
2008/12/30(火) 21:59:18ID:qDOzkieX0
動的なWikiは根本的に保存に無理あるんじゃないかなあ
保存できるソフトを聞いたことがない
保存できるソフトを聞いたことがない
2008/12/30(火) 22:10:50ID:fX4eASw70
@wikiだったらhtmlだから追っかけることも可能ではあるのだろうけど、サイトごとDLは出来無くされてる見たいなんだよねえ
wikipediaなどはローカルで閲覧するにはデータベースその他を色々やらなきゃならないみたいだし、必要な記事は地道にブラウザ保存しかないかなあ
wikipediaなどはローカルで閲覧するにはデータベースその他を色々やらなきゃならないみたいだし、必要な記事は地道にブラウザ保存しかないかなあ
2008/12/31(水) 09:18:41ID:rscijB3A0
取り込みが出来ないから保存しなかったWikiが閉鎖した時は全俺が泣いた
特にゲーム攻略のWikiとかはよく消えてるから困る
特にゲーム攻略のWikiとかはよく消えてるから困る
2009/01/02(金) 01:44:45ID:OLqz4XAA0
FirefoxのScrapbookという拡張機能を使って、
ファイル一覧のページで一階層のみ保存、とか。
ファイル一覧のページで一階層のみ保存、とか。
346名無しさん@お腹いっぱい。
2009/01/03(土) 23:05:19ID:PUJY1CSF0 Gethtmlについての質問です。
オプションの -f とはどのような機能なのでしょうか?
説明書ファイル(gethtml.txt)には
"-f Filename" Filename of / terminated URL
と書いてあるのですが意味がよくわかりません。
DL先のフォルダ名を指定するオプションと勘違いして使ってみたのですが、
そうではないようです。変な設定をしてしまったのではないかと思うと心配です。
オプションの -f とはどのような機能なのでしょうか?
説明書ファイル(gethtml.txt)には
"-f Filename" Filename of / terminated URL
と書いてあるのですが意味がよくわかりません。
DL先のフォルダ名を指定するオプションと勘違いして使ってみたのですが、
そうではないようです。変な設定をしてしまったのではないかと思うと心配です。
2009/01/04(日) 10:03:30ID:7KtylUIv0
>>346
gethtml.txt より
> ・"-f Filename"
> / で終わっている URL の WebPage データのファイル名を指定します。
> 例えば、URL が
> http://www2s.biglobe.ne.jp/~pockey/
> の場合、得られたデータをどんな名前で保存すればよいか分かりません。
> 通常の場合、
> www2s.biglobe.ne.jp\~pockey\index.html なのですが、httpサーバに
> よって違い(MS のサーバは index.htm等)ますので、ここで指定します。
> index.html にしておくのが無難でしょう。デフォルトは index.html。
> 例) -f index.htm
gethtml.txt より
> ・"-f Filename"
> / で終わっている URL の WebPage データのファイル名を指定します。
> 例えば、URL が
> http://www2s.biglobe.ne.jp/~pockey/
> の場合、得られたデータをどんな名前で保存すればよいか分かりません。
> 通常の場合、
> www2s.biglobe.ne.jp\~pockey\index.html なのですが、httpサーバに
> よって違い(MS のサーバは index.htm等)ますので、ここで指定します。
> index.html にしておくのが無難でしょう。デフォルトは index.html。
> 例) -f index.htm
2009/01/04(日) 10:40:47ID:agtqcM4Z0
2009/01/04(日) 11:31:36ID:1GxGvmcA0
>>331
そういうのはRubyのWWW::mechanizeとか使えば楽勝だけどな・・・(Perlのでもいいけど)
そういうのはRubyのWWW::mechanizeとか使えば楽勝だけどな・・・(Perlのでもいいけど)
350名無しさん@お腹いっぱい。
2009/01/04(日) 12:47:15ID:zOoDAii/0 アダルトブログの全てのページの画像を一括DLできるソフトってないのでしょうか?
それができなければ、ページごとの画像だけをDLできるソフトというのはあるのでしょうか?
それができなければ、ページごとの画像だけをDLできるソフトというのはあるのでしょうか?
2009/01/04(日) 20:29:51ID:thlvUT4J0
サイト一括取り込みソフトを探していて、こんなのを見つけたがどんなもんか。
英語だけれど、使いやすい。
PageNest ttp://pagenest.com/index.html
WebStripper系譜のようだ。
英語だけれど、使いやすい。
PageNest ttp://pagenest.com/index.html
WebStripper系譜のようだ。
2009/01/06(火) 19:35:25ID:HKJ+mumj0
ScrapBookに掘り下げ機能がありますがこれは指定したURLを含む所のみダウンロードする様には出来ないのでしょうか?
また、出来ないのであればこのような機能を持ったソフトはあるのでしょうか?
また、出来ないのであればこのような機能を持ったソフトはあるのでしょうか?
2009/01/06(火) 23:49:18ID:HKJ+mumj0
どうやらWeBOXで出来ますね、すみませんでした
354名無しさん@お腹いっぱい。
2009/01/12(月) 18:55:19ID:mtFSF/p40以下の動的ページの取り込み方法(オフラインで見たい)がわかる方教えてください。
紹介されている一通りのダウンローダを試しましたが、うまくいきません。
http://www.gamebanshee.com/neverwinternights/
うまく取れないところは、このページの左のリストにある
EquipmentとSpellsのコンテンツでクリックすると右側にサブカテゴリが現れます。
更にクリックすると、ページの中央部に一覧表示されます。
これらをクリックするとONLINEではポップアップ画面が現れ、正常に表示するのですが、
ダウンローダでダウンロード後、OFFLINEで見ようとすると、うまく見れません。
宜しくお願いします。
2009/01/12(月) 19:09:18ID:Ad7xK/MA0
あ
2009/01/14(水) 04:56:44ID:XsghDILe0
基本的にHTMLをみて、ダウンローダーの特性を理解したら
なんとでもなるよ。
wgetなんかでもcssの中で@import とかは無視してくれちゃったり、
hoge.css@mageみたいなUファイル名とCSS指定をしてくれちゃったり、
実際の本物のホスト名を含む絶対アドレスになったいたり
こういうのがあるとサイトが正常に表示できない。
だからそういうのをHTMLを見て判断して、フィルターとなるスクリプトを書いてやれば
よほどの動的サイトでない限りはまるごとダウンロードいける
なんとでもなるよ。
wgetなんかでもcssの中で@import とかは無視してくれちゃったり、
hoge.css@mageみたいなUファイル名とCSS指定をしてくれちゃったり、
実際の本物のホスト名を含む絶対アドレスになったいたり
こういうのがあるとサイトが正常に表示できない。
だからそういうのをHTMLを見て判断して、フィルターとなるスクリプトを書いてやれば
よほどの動的サイトでない限りはまるごとダウンロードいける
2009/01/15(木) 04:50:49ID:14aIogQH0
どなたか巡集でshinobi.jpの広告削除設定を
ご存知の方どうかご指南下さい
色々設定してみたけど全然上手くいきません…
ご存知の方どうかご指南下さい
色々設定してみたけど全然上手くいきません…
358名無しさん@お腹いっぱい。
2009/01/15(木) 22:38:28ID:SkpOdVD30 >>356 様
ご回答ありがとうございます。
スタイルシートについて、いろいろと調べたのですが、
リンク元のウィンドウで
<a href="#null" onClick="newWindow('/showshot.php?/neverwinternights/spells/images/balagarnsironhorn.jpg'・・・・)">.......
で新しいウインドウに画像のURLを渡し、
新しいウィンドウで
theShot = location.search.substring(1, location.search.length);
document.write('<img src=' + theShot + '>')
のように画像のURLを変数(上記の場合、theShot)に代入しているため、
URLがHTMLのソースに直接現れないような構造になっています。
このような場合はフィルタではどうしようもないと思うのですが、
何か良い手段はあるのでしょうか?
ご回答ありがとうございます。
スタイルシートについて、いろいろと調べたのですが、
リンク元のウィンドウで
<a href="#null" onClick="newWindow('/showshot.php?/neverwinternights/spells/images/balagarnsironhorn.jpg'・・・・)">.......
で新しいウインドウに画像のURLを渡し、
新しいウィンドウで
theShot = location.search.substring(1, location.search.length);
document.write('<img src=' + theShot + '>')
のように画像のURLを変数(上記の場合、theShot)に代入しているため、
URLがHTMLのソースに直接現れないような構造になっています。
このような場合はフィルタではどうしようもないと思うのですが、
何か良い手段はあるのでしょうか?
359名無しさん@お腹いっぱい。
2009/01/22(木) 10:04:12ID:72T0n0l+0 ↑
あっ ↑ は、>>354からの書き込みです。
あっ ↑ は、>>354からの書き込みです。
2009/01/22(木) 10:13:00ID:LOPrZeW60
まあこれで正確にHTMLが解析できれば誰も苦労しない罠
当然俺は分かりません
当然俺は分かりません
2009/02/08(日) 16:33:12ID:1ew7wZVH0
あああ
2009/02/17(火) 21:27:34ID:swvN60Nx0
サーバー上には置いてあるけどHP内のどこのページからもリンクされてないファイルも全部ダウンロードってできますか?
2009/03/03(火) 08:01:05ID:hIoIaLsc0
無理
2009/03/04(水) 02:02:52ID:iOzdqfhq0
巡集でwikiを丸ごと取れますか?なんだか非常に他のサイトと比べて時間がかかるので止めたのですが、wikiは取り込まない方が良いのですかね?
2009/03/04(水) 12:44:56ID:kOsE1mcy0
2009/03/04(水) 20:52:19ID:iOzdqfhq0
ああwikiっていってもWikipedia全てって訳じゃなくて○○ゲーム攻略とか○○の使い方みたいな1つのwikiの事だぜ
2009/03/04(水) 22:03:51ID:SjWqihRZ0
wikipediaはDLツール使うまでもなく、ローカル用のアーカイブが用意されているからね
ただ、dbソフトとか色々設定しなきゃならないから面倒そうだし、多重DLとかやって負荷掛けたらアク禁だったっけ?
ただ、dbソフトとか色々設定しなきゃならないから面倒そうだし、多重DLとかやって負荷掛けたらアク禁だったっけ?
2009/03/05(木) 08:05:04ID:5euH1yl80
例えばこういうサイトとかなんだけども
ttp://foobar2000.xrea.jp/index.php?FrontPage
ttp://foobar2000.xrea.jp/index.php?FrontPage
2009/03/05(木) 15:20:36ID:y2etLDHA0
管理側ですぐばれてアク禁
2009/03/05(木) 19:05:28ID:5euH1yl80
>>369
そうなのか、諦めるわ
そうなのか、諦めるわ
2009/03/05(木) 22:13:12ID:QC0/AZnI0
この程度でなるわけねー
2009/03/05(木) 22:51:07ID:5euH1yl80
>>371
そうなのかい?で巡集でやってみたら上手く取り込めなかったんだが、上手く取り込める方法を教えて貰えますか?
そうなのかい?で巡集でやってみたら上手く取り込めなかったんだが、上手く取り込める方法を教えて貰えますか?
2009/03/06(金) 00:54:24ID:xnM4IX3Z0
firefoxのscrapbookでのんびりと保存するのがベターかな
2009/03/06(金) 14:01:59ID:i20Uaw0U0
2009/03/06(金) 15:00:53ID:PmwxrF/V0
>>373
回答ありがとう、やっぱ巡集と比べて面倒だけどそうするぜ巡集でも取れたら楽なのになぁ
回答ありがとう、やっぱ巡集と比べて面倒だけどそうするぜ巡集でも取れたら楽なのになぁ
2009/03/07(土) 15:46:28ID:EX6aOmt+0
>>369-371
検索エンジンのクロール程度でアク禁するようなのは、いつの時代の管理人だよw
検索エンジンのクロール程度でアク禁するようなのは、いつの時代の管理人だよw
2009/03/20(金) 22:02:39ID:JSyDiuTFP
hosyu
2009/03/29(日) 05:41:06ID:t09wwLl20
懐かしい話だ
379名無しさん@お腹いっぱい。
2009/04/01(水) 18:48:18ID:sW1brWClO CSS内の画像リンクも辿って保存してくれるソフトありますか?
GetHTMLWでは落としてくれませんでした。
JSやSWFも丸っと落としてくれるソフトあれば教えて下さい。
GetHTMLWでは落としてくれませんでした。
JSやSWFも丸っと落としてくれるソフトあれば教えて下さい。
380379
2009/04/02(木) 11:54:11ID:CFvsFsE+O すみません。解決しました。
2009/04/03(金) 06:23:23ID:oDGPoJNA0
俺と今後の為にどのソフトで解決したのかkwsk
2009/04/04(土) 14:46:47ID:izV7zIzI0
オラも知りたい
2009/04/04(土) 19:11:59ID:g6yEv4mBO
ソフトを起動さえしとけば指定した時間に自動的に巡回して更新された部分を保存してくれるような
ソフトはないのでしょうか? 巡集を使っているのですが、そういった機能はないような
ソフトはないのでしょうか? 巡集を使っているのですが、そういった機能はないような
384名無しさん@お腹いっぱい。
2009/04/05(日) 04:43:52ID:F1AvQ3H50 scrapbookはどうもMIMEタイプを誤認して、ダウンロード中にダイアログボックスを出すことがあります。
たとえば、mplという文字列がアドレスに含まれているページが、mplファイルという拡張子に誤認されてしまいます。
私は、MIMEエディットというソフトでしのぎましたが、本体の判別機能があまりうまく行っていないようなので、
ページによっては誤動作するという問題点があります。
scrapbookの問題ではないと思うので、ある意味致し方ないことだとは思いますが。
たとえば、mplという文字列がアドレスに含まれているページが、mplファイルという拡張子に誤認されてしまいます。
私は、MIMEエディットというソフトでしのぎましたが、本体の判別機能があまりうまく行っていないようなので、
ページによっては誤動作するという問題点があります。
scrapbookの問題ではないと思うので、ある意味致し方ないことだとは思いますが。
2009/04/05(日) 13:25:58ID:5dZaffZs0
すみませんが、質問です。
リンクをたどるだけでなく、ディレクトリの内容そのものを取得するダウンロー
ドツールはありませんか?
具体例を出しますと、
http://www6.airnet.ne.jp/manyo/xml/
このページから、以下のページにリンクが張られています。
http://www6.airnet.ne.jp/manyo/xml/xslt/home.html
この場合に、home.htmlを取得するだけでなく、その存在するディレクトリ
http://www6.airnet.ne.jp/manyo/xml/xslt/
も見に行き、(そこにindex.htmlなどが置かれていなくて)ディレクトリのファ
イル一覧が取得できたら、そのディレクトリのファイルを全部ダウンロードの
対象とする、という機能を持つツールを探しているのです。
このサイトでは、XMLファイルからXSLTファイルへのリンクがたくさん存在して
いて、通常のダウンロードツールだとXSLTファイルを取得することができませ
ん。しかしほとんどのディレクトリでファイル一覧を取得できるので、そこを
ダウンロード先に指定すれば、すべてのファイルをダウンロードできます。
今回は、巡集で www6.airnet.ne.jp/manyo/xml/ をまずダウンロード先に指定
し、ローカルに保存されたデータから、上記のxsltなどのサブディレクトリ名
を取得し(29個ありました)、それを全部、巡集に指定し、もう一度ダウンロー
ド行ないました。
しかしこれはかなり面倒なので、このような作業をすべてのサブディレクトリ
について自動的に行なってくれるツールがないかと思ったのです。
この機能は、外部JavaScriptやCSSから読み込まれるファイルの取得についても、
ある程度解決すると思うのですが、そういうツールはないでしょうか?
リンクをたどるだけでなく、ディレクトリの内容そのものを取得するダウンロー
ドツールはありませんか?
具体例を出しますと、
http://www6.airnet.ne.jp/manyo/xml/
このページから、以下のページにリンクが張られています。
http://www6.airnet.ne.jp/manyo/xml/xslt/home.html
この場合に、home.htmlを取得するだけでなく、その存在するディレクトリ
http://www6.airnet.ne.jp/manyo/xml/xslt/
も見に行き、(そこにindex.htmlなどが置かれていなくて)ディレクトリのファ
イル一覧が取得できたら、そのディレクトリのファイルを全部ダウンロードの
対象とする、という機能を持つツールを探しているのです。
このサイトでは、XMLファイルからXSLTファイルへのリンクがたくさん存在して
いて、通常のダウンロードツールだとXSLTファイルを取得することができませ
ん。しかしほとんどのディレクトリでファイル一覧を取得できるので、そこを
ダウンロード先に指定すれば、すべてのファイルをダウンロードできます。
今回は、巡集で www6.airnet.ne.jp/manyo/xml/ をまずダウンロード先に指定
し、ローカルに保存されたデータから、上記のxsltなどのサブディレクトリ名
を取得し(29個ありました)、それを全部、巡集に指定し、もう一度ダウンロー
ド行ないました。
しかしこれはかなり面倒なので、このような作業をすべてのサブディレクトリ
について自動的に行なってくれるツールがないかと思ったのです。
この機能は、外部JavaScriptやCSSから読み込まれるファイルの取得についても、
ある程度解決すると思うのですが、そういうツールはないでしょうか?
2009/04/05(日) 14:25:28ID:At+ZdFLO0
wiki取り込む方法見つかった?
2009/04/10(金) 22:39:16ID:vy87VD8G0
CGIページをきちんと保存、再生できるソフトないの?
巡集だと再生するときカオスになる・・・
巡集だと再生するときカオスになる・・・
2009/04/11(土) 15:12:26ID:FJDV+iB10
http://pc12.2ch.net/test/read.cgi/software/1239155686/l50
【RunAsData】シェアウェアの試用期限クラック【HookDate】
アプリケーション開発における時間のからむ処理にて簡単にテストできて便利かもw
まあ、簡単に思いつくのは、わるいことばっかりだねw
だめだよ、そういうことに利用しちゃ。うふふ
もうひとつ、似たようなツールがあったのでこっちも紹介。
http://blog.livedoor.jp/iceboy_kaz/archives/50403664.html
日時を誤解させた状態で起動させるツール「RunAsData」と「HookDate」
http://dsas.blog.klab.org/archives/51078742.html
Windows用フリーウェア「HookDate」を公開します
http://softplaza.biglobe.ne.jp/news_recom/experience-n.html
ソフトのジャンルから探そう!体験版ソフトコーナー
http://soft.sigi-jp.net/
体験版ソフト百貨
http://www.princess2.com/taiken.htm
無料で使える体験版ソフト一覧
#ただし中には「Adobe Acrobat」(PDF作成用)のように、やっても効果が無いソフトもある。
【RunAsData】シェアウェアの試用期限クラック【HookDate】
アプリケーション開発における時間のからむ処理にて簡単にテストできて便利かもw
まあ、簡単に思いつくのは、わるいことばっかりだねw
だめだよ、そういうことに利用しちゃ。うふふ
もうひとつ、似たようなツールがあったのでこっちも紹介。
http://blog.livedoor.jp/iceboy_kaz/archives/50403664.html
日時を誤解させた状態で起動させるツール「RunAsData」と「HookDate」
http://dsas.blog.klab.org/archives/51078742.html
Windows用フリーウェア「HookDate」を公開します
http://softplaza.biglobe.ne.jp/news_recom/experience-n.html
ソフトのジャンルから探そう!体験版ソフトコーナー
http://soft.sigi-jp.net/
体験版ソフト百貨
http://www.princess2.com/taiken.htm
無料で使える体験版ソフト一覧
#ただし中には「Adobe Acrobat」(PDF作成用)のように、やっても効果が無いソフトもある。
389名無しさん@お腹いっぱい。
2009/05/17(日) 13:23:31ID:/NzZAjoN0390名無しさん@お腹いっぱい。
2009/05/25(月) 14:50:50ID:03qdJTKV0 話題もないねえ…
2009/05/25(月) 16:29:47ID:Y24nZ+jT0
じゃあ、サイト丸ごと取り込みソフトが禁止されているサーバで、どうやってチェックをくぐり抜けてソフトで丸ごとDLするかとか考えるか。
UA規制程度なら各自で対処できるだろうし、ソレより上等な規制対象で。
UA規制程度なら各自で対処できるだろうし、ソレより上等な規制対象で。
2009/06/08(月) 10:51:52ID:AufSz18I0
t t p : / / g . e - h e n t a i . o r g /
ここ取り込める?
画像だけでもいいんだけど
向こうに知られるとまずいから
アドレスは切った
ここ取り込める?
画像だけでもいいんだけど
向こうに知られるとまずいから
アドレスは切った
2009/06/08(月) 11:34:03ID:8JvAcKuU0
Refererくらい理解してから書き込めよ
2009/06/08(月) 21:29:18ID:AufSz18I0
Refererは理解してる、が
取り込みソフト拒否されてるっぽいんだよねここ
取り込みソフト拒否されてるっぽいんだよねここ
2009/06/10(水) 19:59:37ID:/w+HilEi0
PCにあまり詳しくないんですが簡単な動画ダウンロードソフトでおすすめありますか?
2009/06/11(木) 09:32:33ID:CI9JV7KS0
とりあえずyahooの質問集でもクグッて質問しような?
ImageGeter使ってみな
サムネイル画像のリンク先に欲しい画像がある場合でも取ってくれる
使い方はyahoo見ろよ
ImageGeter使ってみな
サムネイル画像のリンク先に欲しい画像がある場合でも取ってくれる
使い方はyahoo見ろよ
2009/06/11(木) 10:13:00ID:CI9JV7KS0
ああ、それと。
場所によっては対ダウンロードソフトを敷いてるところもあるから、
リンク追跡は1個にしときなよ。
下手するとBANされて8時間待機とかなけるから。
設定は登録したリンクから変えられる。
場所によっては対ダウンロードソフトを敷いてるところもあるから、
リンク追跡は1個にしときなよ。
下手するとBANされて8時間待機とかなけるから。
設定は登録したリンクから変えられる。
2009/06/13(土) 01:37:45ID:HDt2gcxv0
wikiまるごと保存できるソフトなイノ?
2009/06/14(日) 01:10:44ID:7qssCspA0
400名無しさん@お腹いっぱい。
2009/06/23(火) 17:45:38ID:rUYeky/o0 >>398
フリーじゃないけど
A1 Website Download
javascriptリンクも変換して保存可能らしい
ttp://www.microsystools.com/products/website-download/
フリーじゃないけど
A1 Website Download
javascriptリンクも変換して保存可能らしい
ttp://www.microsystools.com/products/website-download/
401名無しさん@お腹いっぱい。
2009/06/27(土) 22:03:23ID:i2oYT4kJ0 巡集って
例えば今日ダウンロードしたページを明日ダウンロードしたら上書きされてしまいますよね?
そうしないように(日付ごとにページを分けるように)する方法って無いでしょうか?
例えば今日ダウンロードしたページを明日ダウンロードしたら上書きされてしまいますよね?
そうしないように(日付ごとにページを分けるように)する方法って無いでしょうか?
2009/06/27(土) 22:14:37ID:DjFTSHEj0
手作業でリネーム
取り込む先のフォルダの名前を指定する
好きなのを選べ
取り込む先のフォルダの名前を指定する
好きなのを選べ
2009/07/18(土) 09:37:45ID:fBBs6NrU0
波乗野朗使ってるんですが、スタイルシートに対応していないのか、最近のWEBサイトを取り込むとガタガタに崩れてしまいます。
フリーできちんと崩れず閲覧できる巡回ソフトがあれば教えてください。
フリーできちんと崩れず閲覧できる巡回ソフトがあれば教えてください。
404名無しさん@お腹いっぱい。
2009/08/01(土) 12:57:23ID:yPfvTWSQ0Bulk Image Downloader
これまでFree版を使用していたんだけど、有料onlyになったのかな?
CODEを入力しないと、起動しなくなった。FireFOXのアドオンもダメ。。。
便利だったのに、な。
http://antibody-software.com/web/index.php?option=com_content&task=view&id=33&Itemid=30
2009/08/07(金) 11:31:36ID:O6rKHi3B0
ブログの画像だけを取り込むソフトないですか?
web image hunterを使ってみましたが広告の画像まで取り込んで管理がししにくいのと
どっからきたかわからない変な画像まで取り込んでしまってうまくいきません
よろしくお願いします
web image hunterを使ってみましたが広告の画像まで取り込んで管理がししにくいのと
どっからきたかわからない変な画像まで取り込んでしまってうまくいきません
よろしくお願いします
2009/08/14(金) 01:11:21ID:g2iL4TTl0
VIPダウンろーだ
ttp://vdlspt.bob.buttobi.net/vipdownloda/
2chとGazouBBSの一部専用 Javaアプレット製
ttp://vdlspt.bob.buttobi.net/vipdownloda/
2chとGazouBBSの一部専用 Javaアプレット製
407名無しさん@お腹いっぱい。
2009/08/16(日) 15:42:19ID:F1VFlTYE0 >405
画像フィルタ使えばいいじゃん。
ブログの画像のURL見て、"http://xxx.com/images/xxx.jpg"とかだったら、
URL(含まれる)ってとこに"http://xxx.com/images"を追加する。
画像フィルタ使えばいいじゃん。
ブログの画像のURL見て、"http://xxx.com/images/xxx.jpg"とかだったら、
URL(含まれる)ってとこに"http://xxx.com/images"を追加する。
408名無しさん@お腹いっぱい。
2009/08/16(日) 15:49:36ID:F1VFlTYE0 >>405
追記。あと、広告なら大抵gifだからgifは外すとか、
わけわからん小さいサイズの画像取らないためにサイズを特定のサイズ以上にするとか。
web image hunterは検出力高いから、フィルタは必須。
追記。あと、広告なら大抵gifだからgifは外すとか、
わけわからん小さいサイズの画像取らないためにサイズを特定のサイズ以上にするとか。
web image hunterは検出力高いから、フィルタは必須。
2009/08/17(月) 23:27:34ID:zCh7YkeM0
javascript追跡に対応してるソフトってありますか?
2009/08/18(火) 19:59:35ID:QE4ZdWoG0
imgboard.cgiのページをブラウザで閲覧してるとき、アドレスバーの表記は変化しません。
gethtmlwのproxymode2を使っていると、ページごとに異なるファイルとして保存されていたと思うのですが、
ver8.0.0ではできなくなっています。
prohibit.lwsに*psvで指定してもできないのですが、どうすればできるようになるのでしょうか?
gethtmlwのproxymode2を使っていると、ページごとに異なるファイルとして保存されていたと思うのですが、
ver8.0.0ではできなくなっています。
prohibit.lwsに*psvで指定してもできないのですが、どうすればできるようになるのでしょうか?
2009/08/19(水) 15:14:37ID:qmXb8rBu0
> imgboard.cgiのページをブラウザで閲覧してるとき、アドレスバーの表記は変化しません。
ページをPOSTメソッドで取得しているんだな。
設定の「POSTmethodも保存する」をチェック。
これで無理なら諦める。
ページをPOSTメソッドで取得しているんだな。
設定の「POSTmethodも保存する」をチェック。
これで無理なら諦める。
2009/08/20(木) 14:50:28ID:gE/IvJew0
imagefap一括DLしたくして↓のページでやったんだけど
ttp://pictadicts.blog38.fc2.com/blog-entry-2242.html
ちゃんと展開してDLしてくれません。
他にお勧めの方法か解決策ってないでしょうか。
ttp://pictadicts.blog38.fc2.com/blog-entry-2242.html
ちゃんと展開してDLしてくれません。
他にお勧めの方法か解決策ってないでしょうか。
413410
2009/08/21(金) 02:07:18ID:kCD6o2M50 >>411
>設定の「POSTmethodも保存する」をチェック。
この設定で希望どおりの動作になりました。ありがとうございます
prohibit.lwsに*psvで指定してあって、ページが実際に違うのに保存してくれないってことは、
「拡張子がcgiの単なるHTML」という扱いではないようですね
>設定の「POSTmethodも保存する」をチェック。
この設定で希望どおりの動作になりました。ありがとうございます
prohibit.lwsに*psvで指定してあって、ページが実際に違うのに保存してくれないってことは、
「拡張子がcgiの単なるHTML」という扱いではないようですね
2009/09/13(日) 22:20:00ID:4oE3F4nr0
まとめサイト(blog)の広告部分を取り除いて保存してくれるソフトないもんかな
紙copiで保存して余計な部分を(ry
→サイズの大きなページで紙copiがザ・ワールド
BullzipやPrimoでPDFにして余計な部(ry
→サイズの大きな(ryで一般保護法ナントカ
mhtで保存しておいて余計な部分を手動で削除する方法
→mht編集ソフトが上手く読み込んでくれないサイトがある&サイズの大きな(ry
Wordにコピー&ペーストして(ry
→レイアウトが原形を留めてくれない
Proxomitronで広告をフィルタリング
→フィルタ設定した次の日に大量の広告アドレスが入れ替わってて萎えた
とりあえず普通に取り込みソフトで保存してそのまま表示してみるテスト
→オンライン状態になるとiframeの広告ページに保存フォルダをrefererにしてうわなにをするやめr
紙copiで保存して余計な部分を(ry
→サイズの大きなページで紙copiがザ・ワールド
BullzipやPrimoでPDFにして余計な部(ry
→サイズの大きな(ryで一般保護法ナントカ
mhtで保存しておいて余計な部分を手動で削除する方法
→mht編集ソフトが上手く読み込んでくれないサイトがある&サイズの大きな(ry
Wordにコピー&ペーストして(ry
→レイアウトが原形を留めてくれない
Proxomitronで広告をフィルタリング
→フィルタ設定した次の日に大量の広告アドレスが入れ替わってて萎えた
とりあえず普通に取り込みソフトで保存してそのまま表示してみるテスト
→オンライン状態になるとiframeの広告ページに保存フォルダをrefererにしてうわなにをするやめr
2009/09/14(月) 12:23:55ID:PB1HOZh+0
>>414
広告アドレスはアカウントID指定しないで、ワイルドカード指定してる?
広告消しだったら、置換ソフト(複数ファイル一括処理タイプでワイルドカード使用)で取り除くとか、
ダウンローダでCompleteGetterっていうのにDL後ファイルバナー広告削除機能ついてる。
広告アドレスはアカウントID指定しないで、ワイルドカード指定してる?
広告消しだったら、置換ソフト(複数ファイル一括処理タイプでワイルドカード使用)で取り除くとか、
ダウンローダでCompleteGetterっていうのにDL後ファイルバナー広告削除機能ついてる。
2009/09/24(木) 20:00:50ID:V1YBGQBI0
巡集使ってみたいのですがページが消えていてどこ探してもみつかりません。
どなたかDLできるサイト教えてください。もしくはUPお願いできませんか?
どなたかDLできるサイト教えてください。もしくはUPお願いできませんか?
2009/09/24(木) 22:31:22ID:n+r1nZD00
巡集消えてるね。
いいソフトだったのに残念だ。
いいソフトだったのに残念だ。
2009/09/25(金) 22:12:28ID:kaj3Edae0
消えてねえよ、ここで更新チェックしとけ
ソフトアンテナ > Windows > WWW > ダウンロード > 巡集
http://www.softantenna.com/lib/2305/index.html
ソフトアンテナ > Windows > WWW > ダウンロード > 巡集
http://www.softantenna.com/lib/2305/index.html
■ このスレッドは過去ログ倉庫に格納されています
ニュース
- 【速報】日本産牛肉の対中国輸出再開協議が中止 [おっさん友の会★]
- 【次の一手】台湾問題で小林よしのり氏が私見「まさに戦争前夜」「ただちに徴兵制を敷いて、高市支持者を最前線へ」… ★2 [BFU★]
- 【次の一手】台湾問題で小林よしのり氏が私見「まさに戦争前夜」「ただちに徴兵制を敷いて、高市支持者を最前線へ」… ★3 [BFU★]
- 高市首相答弁を“引き出した”立民・岡田克也氏が改めて説明「なぜ慎重な答弁をされなかったのか。非常に残念に思っている」 ★4 [ぐれ★]
- 毛寧(もう・ねい)報道官「中国に日本の水産品の市場は無い」 高市首相の国会答弁に「中国民衆の強い怒り」 [ぐれ★]
- 【速報】日本産牛肉の対中国輸出再開協議が中止 ★2 [おっさん友の会★]
- 日本人気付く「今思うとアメリカとも中国とも上手くやれてた安倍晋三ってガチで凄かったんだな」 [218488394]
- 【赤旗スクープ】維新・高木総務会長も公金還流。政策秘書の3会社に家賃など2726万円 [593776499]
- 【実況】博衣こよりのえちえち雑談🧪★2
- 高市コイン、ガチで156円突入へwwwwwwwwww [246620176]
- 高市早苗、こんな大事な時に雲隠れして一切表に出てこない。ネトウヨ「高市さんは天照大御神の生まれ変わり!」 [165981677]
- 中国政府、日本人のビザ免除停止、鬼滅の刃公開停止を検討へ [271912485]
