Fiddler 2chプロクシ専用 Part1 [転載禁止]©2ch.net
■ このスレッドは過去ログ倉庫に格納されています
htmltodatByFiddler
要.NET Framework (webスクレイピング)
ttp://mukiyu.g.ribbon.to/ 【v1.05 v2.02 (v2系は差分取得対応)】
ttp://jbbs.shitaraba.net/bbs/read.cgi/computer/1929/1038409548/
(要参照 ttp://anago.2ch.net/test/read.cgi/software/1426589898/763
ttp://www.telerik.com/download/fiddler >>441-442 thx
Viewだと書き込めるかなあ 5chに書き換えると 読めるようになるけど書き込めない
2chのままだと読めないけど書き込める
なんだよこれ・・・ oh・・・
ReplaceStr.txtのせいで更に訳わからんことにw
5ちゃんねるに書き換えると 読めるようになるけど書き込めない
2ちゃんねるのままだと読めないけど書き込める jane style だけど読み書き問題ないが
過去ログみれない
更新待つしかないのかな
5chに手打ちで直しても取得失敗する >>455
すまんね
ReplaceStr.txtは
2ch.net【TAB】5ch.net
のほうがましかもしれない Chaika+FoxAge2ch+Feddler(2ch -> 5ch書き換え)+htmltodatByFiddlerでとりあえず使えている。
あとは旧URL開くときに手動で2chを5chに直したりhttpsのs抜いてから登録しなおす手間があるくらい。
読み込みも書き込みもできてる。 >>458
置換マネージャーかグリモンスクリプトで
グリモンならマウスオーバーで置換するように組むのがお勧め Jane Styleで読み書きできている人もいるんですね。。。うちのはダメぽ(´;ω;`) >>459
グリモン使ってるからやってみるわ。サンキュ。 5ch対応暫定版きたね
いつも迅速な対応ありがとうございます
ただ残念ながら、これで書き込みはできなかったけど
htmltodatByFiddler 2.24(8k byte)
[更新履歴]
2.24 (2017/10/02)
・5ch.net への暫定対応 htmltodatByFiddlerは読み込みだけで書き込みはタッチしてなかったんじゃなかったっけな
pinkには書けるんだけどなあXenoでも >>463
ソース見ればコメントアウトしてあるのがわかるかと
期待しすぎは駄目だけど ひゃほおおおJane Styleでも読み書きできるようになりましたー
//2chへの読み込みリクエストを5chへの読み込みリクエストに変換
ここのコメントを解除したらいけました
ありがとうございました XenoでhtmltodatByFiddler v2.24試したが読み込みは可能だけど書き込みはできなかった。
Xeno folderのcookie.txtを削除してみても変わらず。
Xeno+htmltodatByFiddler2.24で書き込みもできている人いる?
下のエラーメッセージがでるだけ。
現在、荒らし対策でクッキーを設定していないと書きこみできないようにしています。
(cookieを設定するとこの画面はでなくなります。)
この画面が繰り返し出る場合はcookieを削除してみてください。 >>465
いやぁ1時間更新に格闘してたわ
ホントにdクス >>462で読み込めるようになったけど、Xenoだと書き込めないぞ
あと、お気に入りに入れたリンクが全部機能しなくなってるな
URL変わったからだろうけど 問題でてきてたのか
スマホアプリ板なら読み書き込みできてたから気づいてなかった Viewだけど、>>442>>462>>465に加えてJane2ch.iniに下のを追記したら過去ログも開けた
[BBSMENU]
2chServers=.2ch.net,.5ch.net,.bbspink.com
参考 http://egg.5ch.net/test/read.cgi/software/1411872743/613 お気に入りはデータ開いてURL変換しても開かないな
全部張り直しか… Xeno+htmltodatByFiddler v2.24
ボード一覧を2ch.netに戻したら読み書きOKになった
dat落ちしたスレの過去ログも取得出来た ほんとだ書けた
けど過去ログ行きになってしまった…はて >>466 だけど>>473と同様にボード一覧取得URLを
http://menu.2ch.net/bbsmenu.html
に戻したら書き込みもできるようになった。
Xenoならボード一覧取得URLはいじらないほうがいいってことだな
http://menu.5ch.net/bbsmenu.html
だとJane Xenoでは書き込みはできなくなる。cookieのエラーが出る
Xeno150312 + htmltodatByFiddler v2.24 駄目だ
ボード2chに戻すと302になってしまう
他の変更点が引っかかってんだろうけどもうどこ直したかごちゃごちゃ弄りすぎた ボードそのまま
htmltodat更新
>>465やる
これで読み書き完璧っぽい感じか >>478
そっちか…読み込み問題ないからそこは弄ってなかったわ
ついでに5chに変換したfavorite.datも2chに戻して、やっと読み書きお気に入りリンク全部落ち着いて以前の状況に戻った >>465
ここのコメントアウトは解除必須だし初めから解除したほうがいいよね
なんでコメントアウトしてあるんだろ Fiddler2chExtensionとJaneStyle旧Ver の組み合わせだけど
暫定更新の2.24だと機能しないので、2.23のファイル内の2chを5chに置換
過去ログ用のurl置換のために、Replacestr.txt で .2ch【TAB】.5ch で書き込み過去ログ両立できるようになった。
置換する際に、2ch.net や 2ch だと、書き込み時にクッキー削除の警告が出てしまい無理だった。
ボード一覧取得はhttp://menu.5ch.net/bbsmenu.html 何も変えてないけど自分がみる板は読み書きできるわ・・・ コメントアウトしてるのは書き込みをFiddlerで偽装するかか
読み込みをFiddlerで偽装するか選べるようになってるからかなぁ
何にしても素早い更新ありがとうございます >>482
大人の事情、自己責任ってとこじゃねえかな >>471+ReplaceStr.txtに下のを追加で取得済みログのポップアップ
<rx2>h?t?tps://([-a-zA-Z0-9]++\.)([25]ch\.net|bbspink\.com)/【TAB】<font color=gray>[S] </font>http://$1$2/【TAB】msg
参考
http://jane2ch.net/test/read.cgi/community/1491802479/863,865,867,873 >>478やった後に過去ログ読みたいなら追加でjane2ch.iniにこれ追加が一番手軽な気がするわ
[BBSMENU]
2chServers=.2ch.net,.5ch.net,.bbspink.com 最新版fiddlerにしたらスタート時に毎回50.56.19.116へつなぎに行くんだけど止める方法ないかな? >>490
Options=>Connection tab
"Act as sytem proxy on startup" はdisableになってる?
Fiddler listens on port: は指定されてる?
これらの指定しておけば指定ポート以外、つまり専用ブラウザ以外の通信は
スルーしてくれると思ったけどな
動作も早くなる >>491 ありがとう。でもそうじゃなくて、
起動時にfiddler自身が”50.56.19.116”へ通信してるんですよ
50.56.19.116はfiddlerのサーバーなんですがなんか気持ち悪くて
今使ってる古い4.17.2017は通信なんてしないんですがね >>492
Fiddlerのserverとわかってるなら気持ち悪くないだろうし
ただupdate checkしてるだけじゃないの?
Options => General tabの
Notify me for updates on startup
あたり変えたら変わらない? >>490
ver4.6.20171.9220だけど更新チェックだよ、起動時のログに書いてあると思う
そのログをマウスオーバーでツールチップにコマンドが記述されてる(スペル間違ってるけど)
ショートカットに/noversioncheckを追記すればいい ver4.6.20173.38786最新版です
-noversioncheckはwww.fiddler2.com/UpdateCheck.aspxへの接続ですよね
それとは別に50.56.19.116、52.216.225.152へ繋ぎにいってますね 52.216.225.152もtelerik.comぽいので安全そうですが
結局止め方がわからなかったので
ver4.6.20171.26113をアーカイブで取ってきて使うことにしました 恐ろしいくらい今更だが
>>448の
>あとXenoのReplaceStr.txtの最後の行に
>2ch【TAB】5ch
>を入れておけば前スレとかのリンクがそのまま使えるようになるね
を行ったままの人、スレの文章の“2ch”が全部“5ch”になっているから気を付けてくれorz
ID:qgMCqJqe0氏が>>457で変えた方が良いと書き込んだのを無視してそのままにしたせいで大変な目にあった。
自業自得だな(苦笑)
ReplaceStr.txtの働きを十分理解してなかった自分への戒めついでに恥さらししておく(笑) Xenoで5ch.netのcookieを許可する方法
設定ファイルSimpleCookiePermission.txtをJane2ch.exeと同じフォルダに作成し、
クッキーを許可したいドメイン名を一行ごとに書く。外部板についても同様。
ドメイン名は後方一致。
例)5chと外部板のcookieを許可
-----------------
5ch.net
blogban.net
jbbs.livedoor.jp
-----------------
いずれ2ch.netへの書き込みが出来なくなった時用メモ >>499
参考までに今は以下の記述にしてる
これでURLだけに限定できて、変換していることもわかるので
・ReplaceStr.txt
<rx2>http://([-a-zA-Z0-9]++).2ch.net/【TAB】<font color=gray>[S] </font>http://$1.5ch.net/【TAB】msg
>>500
この設定をしておくと、最新のhtmltodatByFiddlerをそのまま適用すればよくなる
(コメントアウトを外す必要がなくなる)
完全に5chに移行した場合、このコメントアウトを外したことが原因で書き込みできなくなるかもしれないので注意(?) JaneXeno150312 + Fiddler + htmltodatByFiddler 2.24
今日あたりから新着チェックをするとログが取れずに
ログ破損の赤いマークがよくでるようになった。
「全タブの新着チェック」やるとすぐにログ破損になる。
5chの仕様変更で差分でログとれなくなったのかなぁ
>>502
htmltodatByFiddler 2.24の
コメントアウト解除は5ch.netからの読み込みのために必ず必要だったよ
>>500は書き込みに関連したワザ。やっておくと2ch.netの
ドメインがなくなっても書き込みができる。 >>503
当面これでしのげるということらしい
//スレのタイトルを取得
↑
このコメントを検索
その下の一行を
var title = oBody.match(/<title.*?>(.*?)\n?<\/title>/mi);
↓
var title = oBody.match(/<title.*?>(.*?)\s*?<\/title>/mi);
に書き換える。 >>504
ありがとう、ログ破損めったに出なくなった。
また仕様変更あるたびにログの読み込み直ししないと
いけないと思うとめんどうだな
みんなはやくopen2chとかに移住して欲しいわ 自分もログ取れなくなった
view+fiddleの方はどんな設定でやってる?
あらためて確認したいので頼みます http://leia.2ch.net/poverty/
が読み込めなくなったぞ
最新版htmltodat入れてる >>500をやったら書き込めるようになった
ありがとう
>>502も適用した ☆ 私たち日本人の、日本国憲法を改正しましょう。現在、
衆議員と参議院の両院で、改憲議員が3分の2を超えております。
『憲法改正国民投票法』、でググってみてください。国会の発議は
すでに可能です。平和は勝ち取るものです。お願い致します。☆☆ ほんとだ
他の串スレでpinkのログが壊れるとか言ってたけどそれに対応したものか ああ、確かにpink崩れてたな
あんま気にしてなかったけど あ、そうかコメントアウト消さないと駄目だった…忘れてるなあ 5chの一部板壊れた?更新できなくなったからwebブラウザでスレを開いても
白地の背景に「Gone.」としか表示されない goneはどうもこれ一部板を串通して見てるだけでipアクセス禁止にされてるっぽいな なるほど、牽制をかけてきてるわけか
今後安心できないな 単にread.cgiのリロード過多で規制かけてるだけだよ
過多と言っても普通に使ってるだけで過多と判断されちゃうわけだけど
別に串だから規制されてるわけじゃない そろそろAPIに乗り換える時か
>>248ってまだ使える? >>530
俺が作ったやつだけど、随分前にDropboxから消したんでスマソ。
もし消していなかったとしても、バグが有ったのとJaneStyleの設定が古いままなので
今じゃ直さないと使えない。
また、他の人よりFiddler用の外部DLLとして提供されているヤツも基本一緒ね。 Gone規制は非公式専用ブラウザの締め出し目的もありそう。
API使わずFiddlerでがんばってきたけどGone多発する仕様に
なったしもう限界だな
10スレッドくらい同時に更新チェックかけただけでもGone規制に入ってしまう > 10スレッドくらい同時に
こういうことするから規制するんだろ >>534
専用ブラウザで10スレッドはかなり少ないだろう
実況もオートリロードも使ってない
サーバへの負担減らしたければ
広告なしでもAPI使えるようにすればいいだけの話 >>535
>広告なしでもAPI使えるようにすればいいだけの話
何で自分の都合のいい方向で考えちゃうんだよ?
広告見せるためのAPIだし
広告無しにしたら意味ないでしょ運営的には
サーバにはアクセスすりゃ誰だって負荷かけてることになる訳だし
10スレッド同時にリロードすれば1スレッドの場合の10倍負荷がかかるのも事実だけど
こういうのはこれまでも皆普通にやってきたことだし
問題にされるような規模でもない筈
特定のターゲットがいるんじゃね?
アタック仕掛けてくる人とかscとか 読みもしないスレッドを複数読み込むって馬鹿じゃね?
それとも同時に複数スレッドを読めるとか特異効能者か?
要するに目的があってクローリングしてるんだろ
それを潰しに来てるんだからそりゃもっともな対応だわ まぁといっても、このスレは
・広告は悪、ゆえに、広告を消すのは正義
という趣旨のスレだからね
愚行であるのは確かだが、同じ穴の狢である自覚は持たないとね >>538
>読みもしないスレッドを複数読み込むって馬鹿じゃね?
読むからリロードするんだろ?
リロードして新着の有無確認して読み進めるのは普通の行為だわな
一個一個やってたら手間過ぎる 同時にリクエストが来ても串の方でずらして取得できないの >>536
同時更新とかいたのはJaneXenoのすべてのタブを更新機能だけど
これじゃなくても同じ板のスレッドを1個ずつすばやく読み込みすると
Goneになるはずだよ
手動ですばやく1個ずつチェックしても規制 >>537
通常のBrowserで使い物にならないほど醜いUIだからこそ
2ch専用ブラウザが使われてきた。
汎用ブラウザでもアプリのようなUIを実現する技術もある。
そういう努力をせずに、専用ブラウザ頼みにしているのが悪い。
例えばログイン制にすればよく見るスレッドの登録、ここまで読んだ機能など
専用ブラウザの基本機能は汎用ブラウザでも実現できる。
いつまでもIP address単位でアクセス管理をする20年以上前の発想から
抜け出せずにいる。 >>537
あと広告なくても掲示板は利益出るよ
掲示板のデータはひろゆき時代から外部の企業に売られてるしさらに
IP addressのように個人を特定しうるまで紐づけられてる可能性高い。
広告なし専用ブラウザでの利用が大半だった時代にも
ひろゆきは億単位の年収得ていたのはそういう仕組み >>544
主語無いから意味が分からん
>>545
ひろゆきの時代はね
今は違うしそもそもの騒動の理由分かってる? >>538
読みもしないスレッドを読み込むと解釈するほうがバカ。
定期チェックしてるスレッドは専用ブラウザのタブで残っているしそれの
新着レスを一括でチェックするだけ。
専用ブラウザのごく一般的な使い方だろう
API公開していれさえいれば最小限の負荷で差分だけ送信できる。 >>547
>API公開していれさえいれば最小限の負荷で差分だけ送信できる
それはお前の都合だ
この人思い込みだけで何も知らん人だな >>546
それは失礼、どの部分の主語なのかわからない。
UIが悪く、ログイン制なしは時代遅れっていうのは
ひろゆき時代、JIM時代で共通の話だよ
あと今の運営が掲示板データを売っていないという根拠は?
純正専用ブラウザでGoogle絡みのライブラリが入ってるんだから
個人情報と紐づけられてるのはほぼ確実
Googleは広告屋だから必ずやってる >>546
あなたのいう「騒動」とはなにかがわからない。 >>543
xenoだと
「全てのタブの新着チェック」だとタブの数ぶんread.cgi叩くけど
「全てのタブの更新チェック」だと板ごとのsubject.txtを読むだけだ
とりあえずそちらで運用してみてはどうだろう
自分もxenoで数十タブ開いてて日に最低一度は全タブ更新チェック使って
たまに実況もするけどGoneはまだ食らったことない ■ このスレッドは過去ログ倉庫に格納されています