X



お勧めダウンロード(丸ごと取り込み)ソフト3
■ このスレッドは過去ログ倉庫に格納されています
0111名無しさん@お腹いっぱい。
垢版 |
2007/06/28(木) 17:58:02ID:BW5JcD+Y0
巡集、設定も簡単で良いんだけど、サイトによっては固まる事があるんで
もう少し安定性が欲しいね。
0115111,113
垢版 |
2007/06/28(木) 22:47:44ID:PaBI4yQU0
ちなみに固まるのは↓のサイトで、毎回同じページで止まる
フィルタも外してみたり、設定も一通り試してみたんだけどね

http://gamerssquare.kanpaku.jp/

処理が止まる時に表示されてる情報は↓

タイトル: -ゲーム攻略・いきなり許婚!〜姫様のお輿入れ〜(ハ
Referer: http://gamerssquare.kanpaku.jp/kouryaku1.html
推定残りファイル数: 8728
ダウンロード完了数: 1256
0119名無しさん@お腹いっぱい。
垢版 |
2007/06/29(金) 12:13:07ID:reaf/Fky0
>>166
問題が起きてる箇所を晒さなきゃ、他の環境でも同じ問題が起きるのか、
解決方法があるのか、って事が調べようがないと思うんだが
0120名無しさん@お腹いっぱい。
垢版 |
2007/06/29(金) 17:17:52ID:5XaCw8jN0
試しにデフォ設定で仕掛けてみたけど
No Responseのファイルが多いなあ
負荷がかかると弾くようになってるとか?
0121名無しさん@お腹いっぱい。
垢版 |
2007/06/29(金) 19:01:49ID:eQCjGEX50
>>120
検証thx!
やっぱり他の環境でも問題あるみたいですね
しかし、WebAutoだと上手く行くのは何か処理が違うのか…
出来れば巡集1本に絞りたいんだけど、しばらくは2本立てで行くしかないかな
0122名無しさん@お腹いっぱい。
垢版 |
2007/07/07(土) 17:08:31ID:Tb+R8x9h0
Flashの多重構造のページは、どうやっても落とせないのかな。
Flashの中に絶対パスが入ってると、どうやってもローカルだけでは無理だよね…
0125名無しさん@お腹いっぱい。
垢版 |
2007/07/16(月) 15:55:23ID:dH1p+oBA0
エロサイトのさ、動画だけを勝手にダウンロードしてくれるソフトある?
0127名無しさん@お腹いっぱい。
垢版 |
2007/07/17(火) 11:18:23ID:eiV0COaA0
W-ZERO3 esで50くらいRSSに登録してあるブログの未読記事をサクサク読みたいと思っています。(速度は×2です。)

まず母艦の巡集でDLしたものをmobisyncで同期して読もうと試みたのですが、
巡集でDL時に差分のみDLができない。
更新分だけ読みたいのに全部DL⇒全部同期
その結果、データ同期に非常に時間がかかる
フォルダ階層が複雑で見難い
ということで、上記問題をクリアしたダウンローダーはありますでしょうか。有償でも構いません。
0131名無しさん@お腹いっぱい。
垢版 |
2007/07/20(金) 02:24:59ID:jNElRSxC0
今、まともなのを有料でもいいから作ったら売れるはず

もう3種類ぐらいのツールをあれこれ使い倒してやっと
そこそこダウンロード出来るってのはいやすぎるwww
0132名無しさん@お腹いっぱい。
垢版 |
2007/07/20(金) 02:45:08ID:A3U8hVXH0
> 今、まともなのを有料でもいいから作ったら売れるはず

その「まともなの」の要件を定義してくれれば作ってやるぜ。
0134名無しさん@お腹いっぱい。
垢版 |
2007/07/20(金) 11:53:51ID:IJa0GjXb0
巡集がメタタグで巡回拒否するのをとっぱらって
ブログDLの機能を充実させてくれたら最強だと思うんだけどな
作者はまだ株にはまってんの?
0136名無しさん@お腹いっぱい。
垢版 |
2007/07/20(金) 17:39:00ID:D7l7CXE60
Ctrlキー押しながらってやつ?
METAタグを読まないことによる弊害があるってことだけど
そこんところはどうなの?
0139名無しさん@お腹いっぱい。
垢版 |
2007/07/20(金) 21:25:37ID:VkN+zF+r0
「まともなの」が具体的には言えないただの口先野郎ってことじゃね?

そういう俺もこの手のソフトは何種類も入れてるがなーw
0141名無しさん@お腹いっぱい。
垢版 |
2007/07/20(金) 21:43:06ID:VkN+zF+r0
後出しの釣り宣言は寒いっすよ先輩
まあ日本はこの手のソフトが無料ですばらしい物がゴロゴロ転がってるから
使い分けなんなりくらいすればと
0142名無しさん@お腹いっぱい。
垢版 |
2007/07/20(金) 23:57:02ID:jNElRSxC0
>>139
>「まともなの」が具体的には言えないただの口先野郎ってことじゃね?
>
>そういう俺もこの手のソフトは何種類も入れてるがなーw

かわいそうにw
0144名無しさん@お腹いっぱい。
垢版 |
2007/07/21(土) 23:46:00ID:eQqNd7ws0
ブログか…とりあえず取り込みたいページ挙げてみたら?(相手には迷惑だろうけど)
正直取りに行く興味はわかない
0147名無しさん@お腹いっぱい。
垢版 |
2007/07/22(日) 02:58:27ID:KKhFyJY+0
31 名前:名無しさん@お腹いっぱい。[sage] 投稿日:2007/03/12(月) 09:08:50 ID:totqC4Tr0
>Ctrlキーを押しながらダウンロードを開始することで回避することも可能ですが、
>サイト運営者の意向を尊重し、安全が確認されている場合以外は実行しないでください。

これって現バージョンでも有効なん?
0148名無しさん@お腹いっぱい。
垢版 |
2007/07/22(日) 08:39:41ID:AU6DfnCq0
606 :名無しさん@お腹いっぱい。 :05/02/25 17:11:33 ID:bGYEGCtk
>>181
Ctrlキーを押しながらダウンロードを開始することで回避することも可能ですが、


これ回避できなくなっていませんか?


612 :名無しさん@お腹いっぱい。 :sage :05/02/26 16:06:17 ID:kfZ3ja4M
>>606
Ctrlキー押しながらで回避できるのはrobots.txtによる巡回拒否
METAタグによる巡回拒否は設定の「METAタグを読まない」で回避


613 :名無しさん@お腹いっぱい。 :05/02/26 16:37:38 ID:4hlizvq6
>>612
ありが屯
>METAタグによる巡回拒否は設定の「METAタグを読まない」で回避
これでMeta読み込まないことによる副作用みたいなのはないですよね?


614 :名無しさん@お腹いっぱい。 :sage :05/02/27 00:47:19 ID:G9lGsa9x
当然ある。どこまで影響するかはMETAタグの内容次第。
0152名無しさん@お腹いっぱい。
垢版 |
2007/08/06(月) 00:41:28ID:j9RPW2Jd0
ここは>>125みたいなソフトの話ではないの?
ページを丸ごと保存する場合だけの話?
0155名無しさん@お腹いっぱい。
垢版 |
2007/08/06(月) 05:49:52ID:cR7sHFPq0
しかし、ダウンロードソフトって、いつからこんなに派手な行動をするようになったの?
ダウンロードできるものの上にポインターをおくと、
アイコンが立ち上がり、それをクリックすると、ダウンロードが始まるんだよね。
YouTubeなんかにはいって動画を見ていると、その誘うようなアイコンが
わずらわしくなってくる。ちなみにインストールしたとき、確かスタートアップに
いれるかどうか選択画面があったけど、スタートアップにはいれていない。
それなのに、常駐しているみたいに勝手にたちあがる。
ダウンオタにはたまらなく魅力的なソフトだろ。
ちなみにぼくがいま使っているのはorbitだけど、ほかのもみんな同じ機能を持っていると思うよ。
0158名無しさん@お腹いっぱい。
垢版 |
2007/08/06(月) 17:04:09ID:qUygctRD0
phpで書かれているサイトで気付いたんだけど、
phpそのものはルートディレクトリに置かれているように見えるけど、
画像の相対参照を見たら、実はもう1個下の階層で動いていた

scriptで動的にリンク先を指定してみたりとか、落としにくいサイトが増えてきたなあ
0161名無しさん@お腹いっぱい。
垢版 |
2007/08/06(月) 22:09:06ID:UW4kC6EQ0
>>160
>>107と同じ
0165名無しさん@お腹いっぱい。
垢版 |
2007/08/07(火) 22:53:48ID:8FY65nq50
株日記も消えてる・・・。
全然、金増えないから株辞める、といいつつ
何回も株再開して、いつまでも辞めないなぁと思ってたら・・・。
0167名無しさん@お腹いっぱい。
垢版 |
2007/08/15(水) 21:42:41ID:xF/zK2Ra0
>>163
ヘルプのページのミラーってあるの?
親にあるHPの保存を頼まれて、初めてこのソフトを落としてみたらこの状態… orz
0168名無しさん@お腹いっぱい。
垢版 |
2007/08/15(水) 22:32:55ID:HzWu+63s0
巡集はヘルプがいらないくらい初期設定そのままでいけると思うけど
変更が必要な箇所はオプションの項目を見ればわかるはず
0169名無しさん@お腹いっぱい。
垢版 |
2007/08/15(水) 22:43:51ID:k3HM8b2B0
サイトのヘルプはver1.6までしかなかったような気がしたけど。
俺、最新版はヘルプ見ないで使ってたよ。
0174名無しさん@お腹いっぱい。
垢版 |
2007/09/01(土) 16:53:11ID:UEbpedFs0
jugemの取り込みを巡集初めてやったけど、とりあえず対象URL以下全て許可にしたら
これいらないだろうな、と思うファイルも山ほど落ちてきた
月別のアーカイブを指定するだけで十分だったか
0175名無しさん@お腹いっぱい。
垢版 |
2007/09/15(土) 17:34:27ID:shGMdTNK0
巡集みたいにJavascriptを辿ってくれるソフトはないものか
0178名無しさん@お腹いっぱい。
垢版 |
2007/09/17(月) 11:22:10ID:wfwucYIg0
よくみたら開発停止してるソフトじゃないか
要望を出せないなら意味がないorz
現役でがんばってるソフトはないものか
0179名無しさん@お腹いっぱい。
垢版 |
2007/10/03(水) 21:43:58ID:pWzSNQy50
具体的に
http://news.livedoor.com/article/detail/3312533/
このページとそこから下の各画像ページを落としたいのですが、
可能なソフトはありますか?
0180名無しさん@お腹いっぱい。
垢版 |
2007/10/06(土) 10:56:58ID:2ZPpgW+10
このスレこんなに人がいないんだ・・・
0183名無しさん@お腹いっぱい。
垢版 |
2007/10/09(火) 22:54:00ID:uQB0ZqdW0
Irvineでエロサイトの画像をぶっこ抜こうとしたらプロトコルエラーがでます。
サイトのIDやパスを入れて認証設定をしたのですが、どうもダメみたいです。
(設定がちゃんとできていないのかも)
何が原因なのでしょうか。
もし、これがクリアできたら画像をみんなにあげてもかまいません。
サイトはここです。
http://www.g-area.org/pgmain.htm
よろしくお願いします。
0185名無しさん@お腹いっぱい。
垢版 |
2007/10/18(木) 23:24:07ID:7tXtR67v0
巡集は環境変数のUserAgentを自由に変えられるけど
これを今使ってるブラウザと同じにするにはどうすればいいですか
具体的に書くと
Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.0.3705; .NET CLR 1.1.4322)
にしたいんだけど、(当たり前だけど)巡集の選択肢にはないからコピペすると
Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.0.3705; .NET CL
で途中でぶち切れてちゃうんです

0186名無しさん@お腹いっぱい。
垢版 |
2007/10/18(木) 23:36:32ID:HXM7GKrN0
default.iniにUAのリストがあるから、そこに自分で追記したらいいんじゃないかな
それでも無理なら、Proxomitron経由にしちゃうとか
0187185
垢版 |
2007/10/19(金) 09:27:44ID:io5KB4Vk0
できました!
試しに風呂敷確認君で巡集を使ってみたら
chk_proxy3.cgiに書いてあるUserAgentがブラウザと同じになってました
ありがとうございました>>186
0188185
垢版 |
2007/10/19(金) 09:29:49ID:io5KB4Vk0
どうでもいいことですがちょと訂正
○落ちてきたchk_proxy3.cgiというファイルに
0189名無しさん@お腹いっぱい。
垢版 |
2007/10/25(木) 08:06:59ID:X9NjLM0s0
ttp://fantasticland.web.infoseek.co.jp/index.html

上記サイトを巡集1.7.1Aで初期設定保存したのですが
下のENTERと書いてあるリンクをクリックしても表示されません
取り込み設定がおかしいのでしょうか?
0191名無しさん@お腹いっぱい。
垢版 |
2007/10/25(木) 20:52:21ID:MXXrESKM0
落とせないのはたぶん↓これのせい

>ver 1.57 (2004/10/27)
>* 巡回が禁止されているサイトは辿れない仕様に変更。

取得設定のHTMLのタグを読まないにチェックを入れればいいはず
ちなみに1.56なら拒否されてもデフォ設定で落とせる
0193名無しさん@お腹いっぱい。
垢版 |
2007/11/20(火) 19:31:24ID:UO8+XWOH0
ページURLと、階層を指定するだけで
ただ単純にページのデータを落としてくれるのは何になりますか
難しい設定をしないとまともに動いてくれないものばかりで困ってます
0195名無しさん@お腹いっぱい。
垢版 |
2007/11/21(水) 18:58:15ID:TdDk4QuK0
すいません
不足してました
ページとしての体裁を保ってです

これまで何を使っても
ただ欲しいURLを入力しただけでも
繋がってるリンクどころかそのページだけすらも保存できないものばかりで・・・
0197名無しさん@お腹いっぱい。
垢版 |
2007/12/06(木) 21:50:51ID:R8U55YGP0
ttp://www.rolfinger.com/

みたいなflashバリバリのサイトを取り込みたいんだけど、何がいいかな
フラッシュがフラッシュじゃなくなっても構わないので
0198名無しさん@お腹いっぱい。
垢版 |
2007/12/19(水) 03:03:46ID:9yuHwmFr0
gethtml (コマンドラインの方)で
http://tv.yahoo.co.jp/radio/tokyo/2007121924.html
をDLするとなぜかちゃんとDLできない。
表がくずれる。右の方。ウチだけ?
0199名無しさん@お腹いっぱい。
垢版 |
2007/12/19(水) 08:26:38ID:rzYFr4Wu0
こちらはGUI版でオマケに7.12.0という古いバージョンなので
>>198とは関係ないかもしれないけど、参考程度に。

経験的にGetHTMLWはチャンクのデコード周りにバグがある。

チャンク転送の際のエンティティボディの終端記号である "0" + CRLF が
たまにファイル末尾にくっついていることがあるよ。(かなり異常)
その分途中のどこかが(時に数百バイトも)欠けちゃってたり。

HTMLファイル、殊にCGIで動的に生成されるようなHTMLページ
(これはHTTP/1.1では大抵"Transfer-Encoding: chunked"で送られてくる)は
GetHTML(W)では取得しないのが無難。俺の経験則。
0200名無しさん@お腹いっぱい。
垢版 |
2007/12/19(水) 08:36:06ID:rzYFr4Wu0
うはw

試しにGetHTMLW ver.7.12.0で>>198のページを取得してみたらこちらでも再現したw

HTTP/1.1クライアントを作るにしても、持続的接続ならともかく
チャンク形式への対応(必須)の実装は別段難しい部分じゃないんだけどね…。
0201名無しさん@お腹いっぱい。
垢版 |
2007/12/19(水) 11:15:42ID:9yuHwmFr0
すっごい詳しい説明をありがとう!
よそでも再現したってことである意味一安心^^
そんなデカいバグがあるなんて知らなかったよー
0202名無しさん@お腹いっぱい。
垢版 |
2007/12/25(火) 11:11:24ID:GbgG+v1L0
久しぶりに閉鎖するブログ保存するために巡集起動した
丸ごと落としたいサイトがなかなか出てこないというのもソフトの開発が停滞する一因かも
0203名無しさん@お腹いっぱい。
垢版 |
2007/12/25(火) 11:35:48ID:PwgleQS90
巡集に、Redirectするページにアクセスして1度No Responseになったら、
その後の読み込み全てがNo Responseになるバグがない?

ttp://www.stronger.jp/stronger_weblogs/diary_00/
ここのを全保存しようとすると、TrackbackのリンクでNo Responseが発生して、それ以降駄目になる
0204名無しさん@お腹いっぱい。
垢版 |
2007/12/29(土) 07:39:53ID:qxdx6dP80
83 名前:名無しさん@お腹いっぱい。[sage] 投稿日:2007/10/21(日) 17:13:54 ID:j/s/kjK00
サムネイルがたくさん並んでいるサイト上で、
サムネイルの先にある本画像だけをスマートにごっそり
ダウンロードできるツールを探しています。

このスレの達人たちなら、きっとなんらかの知恵を拝借できると
思い、おもいきって質問させていただきました。

どなたか良いアドバイスをお願いします。

84 名前:名無しさん@お腹いっぱい。[sage] 投稿日:2007/10/21(日) 23:38:58 ID:s6XkFniC0
ダウンローダー雨
ttp://downloader.sakura.ne.jp/dlame.htm

85 名前:名無しさん@お腹いっぱい。[sage] 投稿日:2007/10/21(日) 23:46:23 ID:j/s/kjK00
>>84
おぉ、こういった便利なツールがあったんですね。
助かりました。本当にどうもありがとうございました

こうあるんだけどこれってサムネイルの並んだ場所で右クリ、一括保存てわけにはいかないのかな?
やっぱりいちいちURL作成しないと駄目ですか?
0206名無しさん@お腹いっぱい。
垢版 |
2008/01/13(日) 17:24:55ID:IiRpxgag0
雨のウィンドウにタブをドラッグすればページ内全取得できるよ
IE6ならアドレスバー右のアイコンドラッグでもいい
0207名無しさん@お腹いっぱい。
垢版 |
2008/01/16(水) 15:18:18ID:ZuxFg1x40
巡集の取得設定で「クエリー」というのはチェックを入れることにより
どのファイルがダウンロードされるのでしょうか?

クエリー
データベースからデータを取り出すためのフォーマット

と意味を調べたのですが、いまいちピンと来ません
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況