2ちゃんねるスレッド全文検索・・・ThreadSearch

**名無しさん＠お腹いっぱい。** · 2008/02/27(水) 19:23:59

ttp://www.geocities.jp/cen_hp
他の2chブラウザと連携できるといいな

**名無しさん＠お腹いっぱい。** · 2008/02/27(水) 19:27:53

Styleの作者ならパクってくれると信じてる

**名無しさん＠お腹いっぱい。** · 2008/02/27(水) 19:37:05

取得してるdatから検索するだけじゃないか
つまりただのgrepソフトじゃないか
そうならそうと書いておけよファック！

**名無しさん＠お腹いっぱい。** · 2008/02/27(水) 19:38:24

よく見たらどの2chブラウザでもいいっぽいのかこれは

**名無しさん＠お腹いっぱい。** · 2008/02/27(水) 20:35:08

cenのソフトか
本人もいることだし、ここでいいでしょ
MonoView Part1
http://pc11.2ch.net/test/read.cgi/software/1120578352/l50

**名無しさん＠お腹いっぱい。** · 2008/02/27(水) 21:39:02

JaneNidaの検索部分を抜き出したようなソフトだ

**cen** ◆Am9xOgNMYE · 2008/02/27(水) 21:43:09

おや、こんなスレが。。
>>3
そうです。
取得済みdatから検索します。

>>4
datファイルのあるフォルダならブラウザは何でもいいです。

**名無しさん＠お腹いっぱい。** · 2008/02/28(木) 10:42:47

>>5
あきらかに趣旨が違うから、ここでもいい気が。

**名無しさん＠お腹いっぱい。** · 2008/02/28(木) 12:52:16

これ、まとめ屋さんに便利な気がする。
そういや、2chツール系はブラウザとかクライアントばっかでこういうのは少ないね
htmlに吐き出すことができればなおいいと思う。

**名無しさん＠お腹いっぱい。** · 2008/02/28(木) 17:20:43

地味に便利な予感

**名無しさん＠お腹いっぱい。** · 2008/02/28(木) 23:44:23

>>9
＞htmlに吐き出す
できたぞ

**名無しさん＠お腹いっぱい。** · 2008/03/06(木) 16:17:15

“2ちゃんねる”専用ブラウザで閲覧したスレッドを全文検索できるソフト｢スレッド全文検索｣v1.00公開
http://namidame.2ch.net/test/read.cgi/news/1204783364/

ボロクソ言われてんぞ

**cen** ◆Am9xOgNMYE · 2008/03/07(金) 00:33:43

>>12
どうもです
携帯で見てみましたが、.NET重いとか遅いとかありますね。
まあ確かにそうです。

こっちに記事がでてますね。
http://www.forest.impress.co.jp/article/2008/03/06/threadzenbun.html

**名無しさん＠お腹いっぱい。** · 2008/03/07(金) 00:48:15

まあ、2chブラウザ自体に検索機能あるしね

**名無しさん＠お腹いっぱい。** · 2008/03/07(金) 17:38:16

誰もマイクロソフトの.netに夢を見ていないから
独自で作ったほうがいいな

**名無しさん＠お腹いっぱい。** · 2008/03/07(金) 18:20:03

言い忘れたけどこのソフト名前変えたほうがいいと思いますよ。
おそらく勘違いされるんじゃないでしょうか。

**名無しさん＠お腹いっぱい。** · 2008/03/08(土) 03:15:59

専ブラのボードデータ読んで欲しいものだ

**名無しさん＠お腹いっぱい。** · 2008/03/08(土) 11:46:41

似たようなソフトが二つあるけど、その違いは？

**名無しさん＠お腹いっぱい。** · 2008/03/08(土) 11:47:04

>>18
もう一つは？

**名無しさん＠お腹いっぱい。** · 2008/03/08(土) 16:19:56

スレッド全文検索
http://www.geocities.jp/cen_hp/threadsearch.html

datファイル全文検索ソフト
http://www.geocities.jp/cen_hp/program2.html

**名無しさん＠お腹いっぱい。** · 2008/03/08(土) 17:24:55

Googleデスクトップでdatが検索できればいいんだけどなぁ

**名無しさん＠お腹いっぱい。** · 2008/03/08(土) 23:36:26

>>20
>>1のトップ見ると、スレッド全文検索は
datファイル全文検索ソフトの次のバージョンだって

**名無しさん＠お腹いっぱい。** · 2008/03/12(水) 22:39:18

age

**名無しさん＠お腹いっぱい。** · 2008/03/18(火) 16:58:40

板名の項目と正規表現が欲しい。
あと、スレタイ･日時を指定した場合、一致しないdatは検索しないようにして欲しい。

**名無しさん＠お腹いっぱい。** · 2008/03/23(日) 05:48:21

>>21
使えるかは知らんが

Jane Log Indexer
ttp://www.geocities.jp/hiko_bae/janelogindexer.html

**名無しさん＠お腹いっぱい。** · 2008/03/23(日) 12:44:05

>>25
おおー、これはすばらしい！

ついでに質問したいんだけど・・・
見つかったdatを簡易ブラウズするいい方法ってあるかな？
dat2htmlを内部的にやってくれて、サクっと表示してくれればうれしいんだけど

**名無しさん＠お腹いっぱい。** · 2008/03/23(日) 19:28:22

バッチ書けばなんとかなりそう。
やってみるべさ。こういうのはあまり得意ではないけど。

思いっきりスレ違いだけど、このスレあまり活動してなさそうだから別にいいか。

**名無しさん＠お腹いっぱい。** · 2008/03/23(日) 19:49:45

あっ、バッチじゃダメか…(^^;

**名無しさん＠お腹いっぱい。** · 2008/03/23(日) 19:56:23

レジストリか…さじ投げする。
すまない。NGしてくれい。

**名無しさん＠お腹いっぱい。** · 2008/03/23(日) 22:39:39

index作成型じゃないの？
すごくのろい。

**cen** ◆Am9xOgNMYE · 2008/03/23(日) 23:42:41

>>24
板名で絞込みをどうしようかと思いましたが、ブラウザによって管理方法が
違うので迷いました。
今はどのフォルダでも同じように検索できるようになってます。

日時ではしてないですが、スレタイを指定して一致しない時は検索しない
ようになってます。

**cen** ◆Am9xOgNMYE · 2008/03/23(日) 23:44:03

>>25
へえ。こういうのあるんですね。

>>30
なるほど。
index作れば速くなりそうですね。
あまり考えないで作ってました。

**名無しさん＠お腹いっぱい。** · 2008/03/24(月) 16:48:56

>32
最初のﾛｸﾞ容量次第でindexの作成にﾊﾞｶ時間食いそうだけど、
その後がﾁﾏﾁﾏ増えたﾛｸﾞのindex作成はたいして時間かからないだろうし
快適な気がしますです。

**名無しさん＠お腹いっぱい。** · 2008/03/26(水) 00:32:25

NamazuとかPerlとかkakasiとか判らないので
ﾏｼﾞindex作成型もお願いします。

**名無しさん＠お腹いっぱい。** · 2008/03/26(水) 10:35:29

そんな数検索するなよって話なんだろうけど
約15000個あるdatから全文検索かけたら凄い時間かかったから消した。

この機能は凄いありがたいんでどうにか高速化して欲しい

**名無しさん＠お腹いっぱい。** · 2008/03/31(月) 04:45:41

これ結構便利だ

**名無しさん＠お腹いっぱい。** · 2008/04/01(火) 22:43:05

cenさんありがとう、これ物凄い便利です

要望ってここで書いちゃっていいのかな？

追加を検討してほしい機能があります
検索後の結果でレスが読めますがやっぱり周辺のレスやら流れが読みたい事があります
そこで検索結果表示のスレタイをクリックしてそのスレ全部表示できたら良いなぁと

最近bbs2chreaderに乗り換えたのですが検索が無い、板フォルダ名がJaneと非互換なので
検索、後で読む、用にJaneにインポートさせるのも面倒だったりします
しかも現在bbs2chreaderは管理が変わり他専用ブラウザからのインポートもできません。。。

御一考頂ければなぁ、と思います

**cen** ◆Am9xOgNMYE · 2008/04/03(木) 00:51:35

>>33-35
インデックス作るのには時間かかるかもしれないですが、
それがあると検索が速くなりそうですね。
考えてみます。

**cen** ◆Am9xOgNMYE · 2008/04/03(木) 00:53:32

>>37
なるほどです。
結果の前後のレスも気になるといえば、なる時もありますね。
そういうのがあれば便利かもしれないですね

**名無しさん＠お腹いっぱい。** · 2008/04/03(木) 02:36:58

>>39
レスありがとうございます
需要がありそうでしたら御一考くださいませ

**名無しさん＠お腹いっぱい。** · 2008/04/08(火) 17:41:43

期待age

**名無しさん＠お腹いっぱい。** · 2008/04/11(金) 01:39:36

index作成型　期待

ついでに各ﾌﾞﾗｳｻﾞから板ﾘｽﾄ持ってきて、ﾄﾞﾛｯﾌﾟﾀﾞｳﾝﾘｽﾄっていうのかな？
検索する板も指定出来るといいな。
現行だと検索板を指定したくてﾌｫﾙﾀﾞ指定しようとすると大量ﾛｸﾞがあるせいで
なかなかﾌｫﾙﾀﾞが開かないです。

まあindex作成型なら板指定なんかする必要は無いとも思いますが。

**名無しさん＠お腹いっぱい。** · 2008/04/11(金) 09:45:28

index作成には特別興味ないけど、スレやレスのurlが分からないのは困る。
せっかく結果をファイルで保存できるのもったいない。

**cen** ◆Am9xOgNMYE · 2008/04/20(日) 23:26:55

>>42
インデックス方式は方法をぼちぼち考えて、テストのプログラム作っています。
板を選べるのもいいと最初思いましたが、ブラウザによってログの管理方法が
違うので対応をどうしようかと思い、結局はその機能はつけませんでした。

>>43
確かにそうですね。
後で見たときにその方がわかりやすいですね。

**名無しさん＠お腹いっぱい。** · 2008/04/24(木) 14:17:31

>インデックス方式
楽しみーに待ってるです

**名無しさん＠お腹いっぱい。** · 2008/04/26(土) 17:16:31

あげ

**名無しさん＠お腹いっぱい。** · 2008/04/27(日) 09:23:11

インデックスは独自？
それともnamazuとか使うの？

**cen** ◆Am9xOgNMYE · 2008/04/27(日) 22:42:01

>>47
独自の方法でする予定です。

**cen** ◆Am9xOgNMYE · 2008/05/04(日) 06:42:57

おはようございます。

スレッド全文検索を更新しました。
Ver 1.50になりました。
http://www.geocities.jp/cen_hp

更新点は以下です。
・インデックス方式にしました。
・結果にログファイルのパスを表示しました。

**cen** ◆Am9xOgNMYE · 2008/05/04(日) 06:49:10

インデックスを使うことで高速に検索できるようになりました。
http://www.geocities.jp/cen_hp/threadsearch.html#7

HPに載せている結果の場合、約3倍・約34倍高速になっています。
検索語句によって速度がかなり変わります。
ユニークな言葉だと速く検索できます。

**cen** ◆Am9xOgNMYE · 2008/05/04(日) 07:01:09

それから、検索結果はVer1.00と同様の結果が出ます。

**cen** ◆Am9xOgNMYE · 2008/05/04(日) 18:32:08

あと、方法は独自と書きましたがほぼngram法です。

**名無しさん＠お腹いっぱい。** · 2008/05/04(日) 19:57:44

Vista SP1(64bit)で動かしてみたんだけど、
ステータスバーに

「インデックス作成中・・・ファイルリスト作成中」

と表示されたまま、CPU使用率も上がらず、HDDアクセスも無いまま
インデックス作成が終わらない・・・

**cen** ◆Am9xOgNMYE · 2008/05/04(日) 21:21:24

>>53
どうもです。
一度終了して、インデックスを削除しても同じですか？
それと、検索フォルダにログのフォルダを指定して、作成していますか？
それでも出来ないならフォルダのパスを変えてみてください。

一応、動作確認として、Vista SP1(32bit)と、XP SP2(32bit)でしています。
あと、正常にインデックスが出来たら、「index」の名前のフォルダに
以下のファイルができます。
・file_list.txt
・index_0.txt　～ index_xx.txt(xxは数字)
・path.txt

**cen** ◆Am9xOgNMYE · 2008/05/04(日) 22:35:21

>>53
さっき調べてみましたら、dllを作成するコンパイラが64bitに
対応していませんでした。
ですので、すみませんが64bitの環境では動作しません。

**名無しさん＠お腹いっぱい。** · 2008/05/05(月) 02:14:03

>>50
ｷﾀ━━━━━━(ﾟ∀ﾟ)━━━━━━ !!!!
とても乙です！

うちの非力2chノートでのレポ
CeleronM1.3G/Mem1.2G/XPSp2
DATフォルダサイズ 3.09G
DATファイル数 48902
INDEX作成時間 2時間
(↑他のそこそこ重い作業しながら、あんまり目安にもならないw)

検索はかなり速くなりました、ヌルヌルとヒットが出てくる感じ
検索結果からDATへのリンクですぐ該当DATにアクセスできるので相当便利です

**名無しさん＠お腹いっぱい。** · 2008/05/05(月) 13:50:16

>>55
.dat ファイルのパスをダブルクリックで「メモ帳」や>>nn 等の右クリックで開く場合
「IE 」とキメウチされているようですが任意の（テキスト）ビュアーや
既定のブラウザーを使うか、各自指定できる様になると使いが手がより良いと思います。

57 · 2008/05/05(月) 14:37:31

>>56
失礼「メモ帳」は Win の設定によるのでした．．．失礼しました。
ブラウザーに関しては「規定のブラウザー」を IE 以外にしていても
ヤハリ IE で開いてしまいます。

**名無しさん＠お腹いっぱい。** · 2008/05/05(月) 23:34:43

>>55
あと、ウインドウ・サイズも覚えておいて欲しい。

.NET Framework ソフトとしては軽いので結構期待してる。

**名無しさん＠お腹いっぱい。** · 2008/05/06(火) 00:22:40

うほっ
index版　ｷﾃﾀ-
なにやらまだ不完全ぽいですが、さっそく使わせてもらいます。

祭日中にとっても乙

**名無しさん＠お腹いっぱい。** · 2008/05/06(火) 00:25:19

>>60
＞不完全ぽい
ｋｗｓｋ

**名無しさん＠お腹いっぱい。** · 2008/05/06(火) 01:24:52

>>50
本文を含まない場合インデックスが利かないので一寸実用に耐えないなあｌ．

**名無しさん＠お腹いっぱい。** · 2008/05/06(火) 23:28:52

index作成開始2時間半後で45%
まだまだ先は長いな。

**cen** ◆Am9xOgNMYE · 2008/05/07(水) 00:23:43

使って頂いてありがとうです。

>>58
検索結果の部分はＩＥコンポーネントなので、そこから開くものはＩＥになります。
結果を保存したときのHTMLは任意のブラウザで見れます。

>>59
それもいいかもしれないですね。

>>62
本文でしかインデックスは考えてませんでした。
そういえば、本文以外で名前とかメール欄とかは、スレでほとんど
一緒で、それで何かできそうな気もします。

**名無しさん＠お腹いっぱい。** · 2008/05/07(水) 02:01:18

5万1千程のdatで4時間半かかった。

**名無しさん＠お腹いっぱい。** · 2008/05/07(水) 23:27:54

初回indexを作ってからちゃんﾌﾞﾗでﾛｸﾞ取得して又indexを作らせて
みたら、初回と同じ位に時間が掛かっちゃいますね。

indexを作るってのはどのindex型でも、対象の追加があったらindexは
ｾﾞﾛから作り直しになっちゃうのでしょうか？

**cen** ◆Am9xOgNMYE · 2008/05/07(水) 23:37:48

>>66
他の方法はそこまで詳しく知らないのです。
今のバージョンは、indexの作成と読み込みが出来ることを目指してたので、
更新まで力が及びませんでした。
なので、更新=作成になります。
次は更新も考えて見ます。

**名無しさん＠お腹いっぱい。** · 2008/05/07(水) 23:48:26

乙です
確かにそれはちょっと欲しい、ぜひご一考を
そうすれば常に専ブラのフォルダダイレクト読める。。。

もっとわがまま書かせて頂くと複数フォルダパス設定をiniに書く形でも良いので欲しいです
一つのthreadseaerchから退避フォルダと現行専ブラフォルダを読めると最高です

66 · 2008/05/08(木) 00:23:43

>67
今でもﾊﾝｸﾞｱｯﾌﾟしてんじゃないか？ほんとに検索してんのかよ？
って他の検索と比べたらとってもありがたいです。(-人-)

58 · 2008/05/08(木) 13:38:01

>>64
成る程、IE のメニューが出てるんですものね．．．
IE 側に別のブラウザでリンクを開くコンテクストメニューを追加する事で
>>XX を IE 以外で見れるようになりました。

**名無しさん＠お腹いっぱい。** · 2008/05/08(木) 21:44:59

>>68
設定読み込みで、iniファイルを選べるからそれでしてみたら？

**cen** ◆Am9xOgNMYE · 2008/05/08(木) 23:26:19

どうもありがとうです

>>68
iniは任意の名前で保存できて、読み込めますが、そうではなくて、
一度の検索で２つのフォルダを設定したいということですか。

>>70
そういう方法もあるとは

**cen** ◆Am9xOgNMYE · 2008/05/08(木) 23:32:00

あと、窓の杜で記事が掲載されました。
http://www.forest.impress.co.jp/article/2008/05/08/threadzenbun150.html

**名無しさん＠お腹いっぱい。** · 2008/05/09(金) 00:14:47

>>71
>>72
ありがとうございます、任意ini読み込みさえ気付いてなかった。。。
とりあえず、それで分けます

>一度の検索で２つのフォルダを設定
です、退避フォルダと現行専ブラのフォルダと記憶が曖昧だったりするときに
使いたいなと思いました、bbs2chreaderはgrepをかけるくらいしか全文検索が無いですんで。。。

>>73
窓の杜も細かく拾いますねw

**名無しさん＠お腹いっぱい。** · 2008/05/09(金) 23:17:30

俺も3つの2chブラウザ使ってるから、順番に検索してくれたら助かるな

**名無しさん＠お腹いっぱい。** · 2008/05/09(金) 23:39:32

ああ、よく考えたらログフォルダ作って全部その下に移動させればいいのか

**名無しさん＠お腹いっぱい。** · 2008/05/11(日) 01:14:04

.NETじゃなくVCじゃ無理なの？
起動時、糞重くてしょうがないんだが

**名無しさん＠お腹いっぱい。** · 2008/05/11(日) 02:16:35

VCは.NETに比べて手間が10倍くらいに増えるからな。

起動速度だけのためにそんな手間はかけてられないって感じじゃね？

**名無しさん＠お腹いっぱい。** · 2008/05/11(日) 18:51:41

8.4ｷﾞｶﾞ程のﾛｸﾞで3ｷﾞｶﾞ程のindexが出来ますた。

**名無しさん＠お腹いっぱい。** · 2008/05/11(日) 19:14:25

DesktopHE
ttp://freemind.s57.xrea.com/desktophe/index.html
↑datはサポート外で、datファイルの表示は固まるかと思うほど遅いすが
探してくるのは速いしインデックスの作り方とか参考にならないでしょうか

**cen** ◆Am9xOgNMYE · 2008/05/18(日) 23:15:54

>>74 >>75
ログフォルダが複数あるときですか。
それは思いつきませんでした。

>>77
大体>>78さんの通り、重いですが作るのが割と楽なので.NETを使っています。

>>80
そういうのもあるんですか。
ちょっと見てみます。

**名無しさん＠お腹いっぱい。** · 2008/05/23(金) 20:17:03

age

**名無しさん＠お腹いっぱい。** · 2008/06/01(日) 14:35:57

+　　　+　　　ﾜｸﾜｸﾃｶﾃｶ
　 ∧＿∧ 　+
　（0゜・∀・）
　（0゜∪ ∪ +　　　index追加型、急かしてないよ？　　　　　　　
　と＿_）__）　+

**名無しさん＠お腹いっぱい。** · 2008/06/01(日) 23:46:08

急がせてるｗｗｗｗｗｗｗｗｗｗｗｗ

**名無しさん＠お腹いっぱい。** · 2008/06/02(月) 22:00:16

+　　　+　　　ﾜｸﾜｸﾃｶﾃｶ
　 ∧＿∧ 　+
　（0゜・∀・）
　（0゜∪ ∪ +　　　急かしてないよ、ﾎﾝﾄだよ？　　　　　　　
　と＿_）__）　+

**名無しさん＠お腹いっぱい。** · 2008/06/03(火) 14:01:04

Janeログをインデックス化して高速検索する「dat検索」 :教えて君.net
ttp://www.oshiete-kun.net/archives/2008/05/janedat.html
Datファイル全文検索ソフト DatE
ttp://frozenlib.net/DatE/

こっちが2.0ならむこうは3.5か…
誰かユーザーの事考えたC++製の全文検索ソフト作れよ

**名無しさん＠お腹いっぱい。** · 2008/06/03(火) 14:31:24

Jane系に限定するならJaneViewでも使ってりゃいいじゃない
インデックスサーチなら他の100倍は早い

**名無しさん＠お腹いっぱい。** · 2008/06/03(火) 20:13:08

ずっとJane使ってたら、メモリ使用量が300Mになった…
V2Cくらいメモリ使用量決められたらいいんだけどなぁ

**名無しさん＠お腹いっぱい。** · 2008/06/07(土) 15:31:32

週末きたけどそろそろﾊﾞｰｼﾞｮﾝくる？

**名無しさん＠お腹いっぱい。** · 2008/06/13(金) 22:02:47

週末くるけどそろそろﾊﾞｰｼﾞｮﾝくる？

**名無しさん＠お腹いっぱい。** · 2008/06/13(金) 22:13:22

「ﾊﾞｰｼﾞｮﾝくる」の意味が分からなかったのでグッてみた

ver・sion

━━ n. 翻訳, 訳書; （時にV-）（聖書の）…訳［版］; 解釈; 異説; （個人的な観点からの）説明; 翻案, 編曲.

**名無しさん＠お腹いっぱい。** · 2008/06/17(火) 00:56:18

たぶん「そろそろバージョン」っていう新しいバージョンが来るんじゃマイカ？

**名無しさん＠お腹いっぱい。** · 2008/06/21(土) 00:53:55

>86
ﾊﾞｰｼﾞｮﾝこないから試してみようとしたけど起動しないや・・・

**名無しさん＠お腹いっぱい。** · 2008/06/22(日) 14:26:00

俺は白鴎院理人（はくおういんりひと）。御茶ノ水に事務所を構える私立探偵だ。
俺は帝都を騒がす怪人物、蜘蛛男を追っている。奴が目撃され始めたのは数週間前のこと。
はじめは酔客の間で交わされる噂話に過ぎなかった。夜の帝都を飛び回る不気味な怪人物がいる。
路地裏で人を喰らっているところを見た。こうした噂話は、帝都では珍しいものではない。
近代化を成し遂げ、震災から復興しても尚、人々は夜の闇に怯え、怪しげな噂を作り出す。
だが、蜘蛛男の噂は一時に止まらず増え続けた。それが低級雑誌で取り上げられるようになり、
最近では大新聞までもが蜘蛛男の記事を載せている。こうなると警察も黙ってはいない。
多くの人員を割いて捜査に当たっているらしい。しかし、今のところ蜘蛛男の逮捕には至っていない。
それどころか奴が何者で何の目的があるのかさえも、未だ判明していないのだ。
奴が何者であったとしても、帝都を騒がす怪人物を放っておくことはできまい。
そこで私立探偵である俺もまた、蜘蛛男を追っていた。この俺が蜘蛛男を捕えてみせる。
＼＿＿＿＿＿　＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿／
　　　　　　　　 ∨
　　　　　　　　　＿＿＿　　　　　　　　　　　　　　　　＿
　　　　　　　／　＿＿＿＿ヽ　　　　　　　　　／￣　　￣＼
　　　　　　　|　 | /, －､, -､ｌ　　　　　　　　 /､　　　　　　　　ヽ　きみ頭だいじょうぶ？
　　　　　　　| _|　-|○　|　○||　　　　　　　 |･ |―-､　　　　　　 |
　　 , ―-､　(6　＿ｰっ-´､}　　　　　　　ｑ -´　二ヽ　　　　　 |
　　 |　-⊂)　＼ヽ_ ￣￣ﾉﾉ　　　　　　　　ﾉ＿　ー　 |　　　　　|
　　 |￣￣|／（_ ∪￣ / ､　＼　　　　　　　＼.￣｀　 |　　　　/
　　ヽ　　｀　,.|　　　￣　　|　　|　　　　　　　　O＝＝＝＝＝ |
　　　｀－ ´ |　　　　　　　| ＿|　　　　　　　　/　　　　　　　　 |

【　南極堂...断罪アイアンメイデン　】　　http://www42.atwiki.jp/ironmaiden/

**cen** ◆Am9xOgNMYE · 2008/06/24(火) 19:11:24

どうもです。

ちょっと忙しくてできていないですが、
今はインデックスの方式を考え直しているところです。

**名無しさん＠お腹いっぱい。** · 2008/06/25(水) 00:16:50

待ってます

**名無しさん＠お腹いっぱい。** · 2008/06/25(水) 00:18:37

待っています。

**名無しさん＠お腹いっぱい。** · 2008/07/06(日) 13:26:22

みみずん検索とかは一瞬に近い状態で検索結果が出るけど
これは意外と時間かかるよね？

これってﾊｰﾄﾞｳｪｱ性能の違い？それともindexの方式違い？
どっちが原因として大きいんだろ。

indexをRAMﾃﾞｨｽｸに置いて、DATをRAID0・5・6に置いても
とても一瞬じゃ表示出来なそうだけど。

あ、従来の検索と比べたら遥かに恩の字ですから
ｹﾁ付けてるんじゃなく素朴な疑問です。

**名無しさん＠お腹いっぱい。** · 2008/07/06(日) 19:54:39

>>98
何言ってる

**cen** ◆Am9xOgNMYE · 2008/07/06(日) 23:14:28

>>98
どうもです。

このソフトでは保存してる全てのログから、検索語を漏らすこと無く
検索するので他のものより遅いのではと思います。
ソフトの性能かもしれないです。
みみずん検索の仕組みがどういうものか知りませんが・・・

**名無しさん＠お腹いっぱい。** · 2008/07/07(月) 00:57:51

>100
あ、そっか。
みみずん検索は検索板を指定しましたね。
長期使ってないから全板検索だと勘違いしてました　orz

**名無しさん＠お腹いっぱい。** · 2008/07/08(火) 18:45:38

>>98
一般的なWebサーチエンジンは単語単位の検索結果をあらかじめ作ってる。
新しく見つけたページに｢2ch｣｢モナー｣という単語があったときは、2ch.txtとモナー.txtにそのページのアドレスを追加する。
｢2ch　モナー｣で検索されたときは2ch.txtとモナー.txt両方に載っているアドレス一覧を表示するといった感じ。
ただし、ここでいう｢単語｣とはあらかじめリスト化されたものと機械的に認識されたものなので
でたらめな文字列で検索した場合は表示されない可能性もある。

**名無しさん＠お腹いっぱい。** · 2008/07/09(水) 00:47:48

>102
なるほど。
そうしちゃうと今より高速化はしてもindexが肥大しそうですね。

今は8.5Gのﾛｸﾞに対しindexが3.2Gです。

**名無しさん＠お腹いっぱい。** · 2008/07/13(日) 21:04:23

>>103
日本語対応の全文検索インデックスはでかいよー。
特に完全検索用のN-Gramインデックスは、たとえば「本日は晴天なり」って書いてあるテキストが
あったとすると
　本日
　日は
　は晴
　晴天
　天な
　なり
というそれぞれの文字列についてインデックスを作成する。
検索時には、たとえば「本日は」で検索されたら「本日」「日は」の両方にのっているファイルを
検索結果に表示する、という方式。
確実なんだけどでかい。

**名無しさん＠お腹いっぱい。** · 2008/07/15(火) 15:00:25

みみずん氏でこんなもんか。
ttp://mimizun.com/spec.html

**名無しさん＠お腹いっぱい。** · 2008/07/20(日) 02:22:48

「Windows Vista の検索において、語句が検索されない場合がある」
http://support.microsoft.com/kb/952003/ja

「アクセスコントロールリスト」があるのに　"コントロール"を検索できません。
これは仕様です。日本人はfindとかfindstrを使いなされ。
　

**名無しさん＠お腹いっぱい。** · 2008/07/21(月) 01:11:23

テキストのフィルタが駄目すぎだなあ
IMEの件といい、ほんとMSは日本語に弱くなったな

**名無しさん＠お腹いっぱい。** · 2008/07/29(火) 11:45:39

そんなんだからMS社員がATOK使いたいとか言い出すんだ。

**名無しさん＠お腹いっぱい。** · 2008/07/29(火) 18:21:33

中国優先だからな

**名無しさん＠お腹いっぱい。** · 2008/07/29(火) 19:00:16

優先というか、メイドインチャイナ

**cen** ◆Am9xOgNMYE · 2008/07/31(木) 01:33:49

こんばんは

>>104
このソフトのインデックス方法もそういう方法使ってますね。

**名無しさん＠お腹いっぱい。** · 2008/08/02(土) 23:36:16

屑HDにﾛｸﾞ移行したんだけど、残り容量少なくてINDEX作りきれなかった　orz

**cen** ◆Am9xOgNMYE · 2008/08/03(日) 23:09:35

今のところ、新しいindexの形式で、index作成と読み込みのテストが
できています。
更新部分を作る前に公開するかもしれません。
何時になるかは不明ですが。

>>112
実験では現在と比べて約40%のindex容量が削減できています。
今よりも多少はディスク容量を使わなくて済む予定です。

**名無しさん＠お腹いっぱい。** · 2008/08/03(日) 23:16:21

>>113
乙です
四割もすか、わくわくしながら待っています。

**名無しさん＠お腹いっぱい。** · 2008/08/05(火) 00:44:24

　 ∧＿∧　ttp://www.geocities.jp/cen_hp/
　（　・∀・）ﾄﾞｷﾄﾞｷ
　（　∪ ∪
　と＿_）__）

**名無しさん＠お腹いっぱい。** · 2008/08/05(火) 07:05:18

禁断の壷のDATが検索できないようですが未対応ですか？

**名無しさん＠お腹いっぱい。** · 2008/08/05(火) 19:08:19

　　　　∧＿∧
　　　（　・∀・）ﾜｸﾜｸ
　　oノ∧つ⊂）
　　(　（　・∀・）ﾄﾞｷﾄﾞｷ
　　∪（　∪ ∪
　　　と＿_）__）

**名無しさん＠お腹いっぱい。** · 2008/08/08(金) 17:59:32

　　　　∧＿∧
　　　（　・∀・）　ドキドキ
　　oノ∧つ⊂）
　　(　（　・∀・）　ワクワク
　　oノ∧つ⊂）
　　(　（　・∀・）
　　∪（　∪ ∪
　　　と＿_）__）

**名無しさん＠お腹いっぱい。** · 2008/08/09(土) 06:06:28

　　　　　　　　　　　　　　　　　　　　　　　 ,､ｧ
　　　　　　　　　　　　　　　　　　　 ,､ '";ｨ'
_＿_＿＿___　　　　　　　　　　　　　／::::::/l:l
─- ､::::;;;;;;;;;｀ﾞﾞ''‐ ､　　 __,,,,......,,,,_／:::::::::/: !|
　　. : : : : : : ｀ﾞ'ヽ､:::ﾞヾ´::::::::::::::::::::::｀ﾞﾞﾞ'''‐'､. l|
､､ . : : : : : : : : r'":::::::::::::::::::::::::,r':ぃ::::ヽ::::::::ヽ!
.ヽ:ﾞヽ; : : : : : :ノ::::::::::::::::::::-=･=-､ﾞ::: 　 -=･=-:'､
.　＼::ﾞ､: : : :./::::::::::::::;､-''"::::::::::　　　,...,:::,::.,　:::':､
　　　ヽ:ヽ､ /:::::::::::::::::::::::::　　　_　　｀ﾞ''‐''"　 __,,',,,,___
　　　　｀ヽ､:::::::::;;;､､--‐‐'''''',,iﾆ-　　　 _|　　､-l､,},,　￣""'''￢-
　　　_,,,､-‐l'''"´:::::::'　　,､-'" ,.X,_,,､-v'"''ﾞ''yr-ヽ / ﾞﾞ'ヽ､,　ｺﾞﾘｺﾞﾘｺﾞﾘ・・・
,､-''"　　　.l:::::::::::;､-''"　 ,.-'　　ﾞ､"| 　　 /　　冫、　　ヽ､
　　　　　　　l;､-'ﾞ:　　 ,／　　　　 `| /|　| 　　/.　＼
　　　　　,､‐ﾞヽ:::::..,.r'ﾞ　　　　(( //　| |　　/　　　ヽ.　　ﾏｽﾞｯ・・・
　　 ,､‐'ﾞ　　　ﾝ;"::::::.　　　　　Ｕ　 .Ｕ　 /　>>118
　　'　　　　　／/:::::::::　　　　　　　　　　　　{.
　　　　／ ./:::::::::::::　　　　　　　　　　　　',
.　　　　／　 /:::::::::::::::::.　　　　　　　　　　　　',.

**cen** ◆Am9xOgNMYE · 2008/08/10(日) 02:40:10

>>116
どうもです。
検索できるのは、2chのサーバにあるそのままのdatファイル
のみになっています。
こんな感じのファイルです。
http://pc11.2ch.net/software/dat/1204107839.dat

**名無しさん＠お腹いっぱい。** · 2008/08/10(日) 02:51:18

壺のdatは少しだけ違うよな。生datではない

**名無しさん＠お腹いっぱい。** · 2008/08/10(日) 05:29:10

>>120
そうですか･･･
壷はファイルの先端に今取得した時間と前取得した時間とレス数追記して
生DATとは違うファイルになってるから対応するのは面倒そうですね・・・

**名無しさん＠お腹いっぱい。** · 2008/08/10(日) 05:36:29

壷のDAT見た限り0x88(136バイト)目まで壷DAT用のヘッダー？に上のレスで書いたやつを追記してるみたいですね。

**名無しさん＠お腹いっぱい。** · 2008/08/10(日) 05:56:58

今手元の壷用DATの先端0x88(136バイト)を削ってDATでThreadSearchを使用して検索できた事を報告しておきます。
使用する時はこれでいきます。
素晴らしいソフトありがとうございます。

**名無しさん＠お腹いっぱい。** · 2008/08/10(日) 22:06:13

へぇ
Jane系だとメタ情報はidxファイルに分けるけどね

>>120
1行目の読み出し時に自動認識できそうな気がしますがいかがでしょうか？

**cen** ◆Am9xOgNMYE · 2008/08/11(月) 18:37:08

できそうな気もしますが、壷を入れてdatをいろいろ見てみないと
いけないので、ちょっとめんどうかも。
それに今作ってるのやつがあらかた出来上がっているので。

**名無しさん＠お腹いっぱい。** · 2008/08/13(水) 02:41:42

乙です
>あらかた出来上がっているので
わくわく

**cen** ◆Am9xOgNMYE · 2008/08/13(水) 19:08:16

スレッド全文検索を更新しました。
Ver 1.60になりました。
http://www.geocities.jp/cen_hp

更新点は以下です。
　インデックスを改良して高速に作成、検索できるようにしました。
　ウインドウサイズを記憶するようにしました。
　検索結果の下ペインに上ペインのリンクを追加しました。

インデックス化の方法を変えたので、今までのものより
約２～３倍高速に検索できます。
場合によりそうでない時もありますが。
あと、インデックス作成時間も短くなりました。

詳しくはこちらを
http://www.geocities.jp/cen_hp/threadsearch.html

**名無しさん＠お腹いっぱい。** · 2008/08/13(水) 21:16:58

ｷﾀ━━━ヽ(ﾟ∀ﾟ)ﾉ━( ﾟ∀)ﾉ━(　　ﾟ)ﾉ━ヽ(　　)ﾉ━ヽ(ﾟ　　)━ヽ(∀ﾟ )ﾉ━ヽ(ﾟ∀ﾟ)ﾉ━━━!!
　　　　　　　へ　)　　 (　　ノ　　(　　)ﾉ　　 (　　)　　　へ　)　　　へ　) 　　へ　 )
　　　　　　　　　>　　　　>　　　　<　　　　　 <　　　　　　　<　　　　　 >　　　　　 >

**名無しさん＠お腹いっぱい。** · 2008/08/13(水) 21:25:48

えーすまん。
>詳しくは
と、readme.txtを見たけど、INDEXの追加作成は可能になったの？

**cen** ◆Am9xOgNMYE · 2008/08/13(水) 22:55:06

>>130
すみません。
書いてなかったです。
今回のバージョンでは追加（更新）の機能は付いていないです。
次回で付ける予定です。

**名無しさん＠お腹いっぱい。** · 2008/08/13(水) 22:56:38

>131
ありゃ残念。
でも次回更新を楽しみに待ちながらVer1.6使わせていただきます。

**名無しさん＠お腹いっぱい。** · 2008/08/17(日) 17:23:51

age

**名無しさん＠お腹いっぱい。** · 2008/08/28(木) 20:58:59

sage

**名無しさん＠お腹いっぱい。** · 2008/09/01(月) 16:11:16

アイコンぐらい作って

**cen** ◆Am9xOgNMYE · 2008/09/02(火) 00:34:17

>>135
そういえば、誤反応スクリプト無効化ソフトはアイコン作ってましたが、
これは作って無かったですね。

とりあえず、ぼちぼち更新部分作ってます。
ちょっとトップの説明変えてみた。
http://www.geocities.jp/cen_hp/threadsearch.html

**名無しさん＠お腹いっぱい。** · 2008/09/07(日) 19:48:17

>136
楽しみにしてます。

**cen** ◆Am9xOgNMYE · 2008/09/14(日) 01:18:55

どうもです。

とりあえず、今のところこんな感じです。
http://sakuratan.ddo.jp/imgboard/img-box/img20080914011755.jpg

**名無しさん＠お腹いっぱい。** · 2008/09/14(日) 08:47:05

ログの結果が、「日付+時間」のフォルダではなく、指定したフォルダに毎回上書きができるとありがたいです

**名無しさん＠お腹いっぱい。** · 2008/09/14(日) 09:29:58

要望追加で
検索日付範囲が固定されてしまうとバッチ処理には不便なので
今日のみ　とか　何日前まで　などができるとありがたいです

**cen** ◆Am9xOgNMYE · 2008/09/17(水) 00:19:34

レスと意見をどうもです。
ちょっと考えて見ます。

**名無しさん＠お腹いっぱい。** · 2008/09/17(水) 13:20:48

あのねあのね
ﾃﾞｽｸﾄｯﾌﾟにｼｮｰﾄｶｯﾄ作って置いてるんだけど、
次のﾊﾞｰｼﾞｮﾝｱｯﾌﾟでｱｲｺﾝ付けて。

**cen** ◆Am9xOgNMYE · 2008/09/21(日) 00:10:11

スレッド全文検索を更新しました。
Ver 1.70になりました。
http://www.geocities.jp/cen_hp

更新点は以下です。

インデックスを更新できるようにしました。
板で絞込みができるようにしました。
検索結果を保存するフォルダ名を指定できるようにしました。
アイコンを付けました。
検索語句を半角スペースで区切ることでAND検索ができるようにしました。
→「AAA BBB」だとAAAかつBBBがあるレスを検索します。

**cen** ◆Am9xOgNMYE · 2008/09/21(日) 00:15:00

インデックス方法は1.60と同じですので、検索速度はほぼ同じです。
多少インデックス作成時間が短くなりました。

あと、アイコンが下手なのはセンスがないからです。

**名無しさん＠お腹いっぱい。** · 2008/09/21(日) 02:17:22

乙

**名無しさん＠お腹いっぱい。** · 2008/09/22(月) 02:38:15

ｳﾋｮｰ
更新乙です。

**名無しさん＠お腹いっぱい。** · 2008/09/22(月) 23:51:55

index作成中もしくはindex一覧？(最初にﾌｧｲﾙ一覧作るやつ)作成中に
janeで新たにﾛｸﾞを取得しちゃっても問題無いのでしょうか？
index作り損ねたﾛｸﾞは次回のindex更新に回るから平気？

作成開始から4時間で9%ほどなのでついついjane起動して2ちゃん
巡回始めちゃいました。
もちろん作成終了までｿﾌﾄ停止するつもりはないのですが。

**cen** ◆Am9xOgNMYE · 2008/09/23(火) 13:02:36

どうもです。

>>147
問題ないです。
インデックス作成では下の流れになります。
１．インデックス化するファイルリスト作成
２．インデックス作成（ファイルリスト使用）

１が終わってから取得したスレッドは２で反映されませんが、
次回のインデックス更新には反映されます。

**名無しさん＠お腹いっぱい。** · 2008/09/23(火) 13:53:13

>148
了解しますた。

夕べ19時半から始めて現時刻92%
ﾊｧﾊｧあと少しだ。

**名無しさん＠お腹いっぱい。** · 2008/09/23(火) 14:12:45

>>149
どんだけ時間かけてるんだｗｗ
がんばれー

**名無しさん＠お腹いっぱい。** · 2008/09/23(火) 16:29:19

買い物から帰ってきたらおわってたー。

ｽﾚｯﾄﾞ全文検索による計上でdatﾌｧｲﾙが765,875個あった場合
24時間は掛からないと参考までに。
index作るのに掛かった時間をその回だけでいいから
どこかに記録残してくれると他者の参考になりそうなんだけどね。

**cen** ◆Am9xOgNMYE · 2008/09/23(火) 22:53:10

>>151
随分沢山ありましたね。
一応自分の分の結果は参考程度に小さく書いてみてます。
http://www.geocities.jp/cen_hp/threadsearch.html#7

**cen** ◆Am9xOgNMYE · 2008/09/23(火) 23:50:43

一応ですが、インデックスを更新する時には、
現状のインデックスと同じくらいのディスク容量が必要です。
ちょっと気をつけてください。

**名無しさん＠お腹いっぱい。** · 2008/09/24(水) 13:54:08

>153
ﾃﾝﾎﾟﾗﾘですかね？
CﾄﾞﾗｲﾌﾞにOS
DﾄﾞﾗｲﾌﾞにJaneﾛｸﾞ
Dﾄﾞﾗｲﾌﾞにﾏｳﾝﾄした実質別ﾄﾞﾗｲﾌﾞにthreadsearch本体&INDEX
なんですが、どのﾄﾞﾗｲﾌﾞで空き容量が必要になりますか？
もっともCとﾏｳﾝﾄしたﾄﾞﾗｲﾌﾞにはINDEX以上の空き容量はあるのですが。

**cen** ◆Am9xOgNMYE · 2008/09/25(木) 00:30:22

>>154
そうです。
一時的に必要な領域です。
インデックスを参照するので、threadsearch.exe と同じディレクトリに
インデックスとほぼ同じ領域が必要です。

上ならDドライブです。

**名無しさん＠お腹いっぱい。** · 2008/09/25(木) 00:38:24

やっと規制解除。。。
とても、乙です

新バージョン1.70楽しみー
さぁ、寝てる間に動かそう

**名無しさん＠お腹いっぱい。** · 2008/09/26(金) 01:34:43

>155
了解っす。

**名無しさん＠お腹いっぱい。** · 2008/09/29(月) 19:17:01

うーむ、全板のINDEXが17.6GBあり、ｽﾚｯﾄﾞ全文検索ver1.70内で
指定したﾀｰｹﾞｯﾄの板ﾛｸﾞが4.75GBでﾌｧｲﾙが47,182個の中から
「IPv6」って単語を検索し始めて18時間位経ったけどまだ「ｲﾝﾃﾞｯｸｽ読み込み中」
表示でﾊﾞｰがﾋﾟﾛﾋﾟﾛしてる　orz

**cen** ◆Am9xOgNMYE · 2008/09/29(月) 23:08:41

>>158
どうもです
まだ検索中ですか？
量が多くてもそれは遅いと思います

他の１０文字や２０文字などの文字数が多い
言葉でも遅いですか？

そうならバグがあるかもしれないです。

それからインデックスを使うと、検索時に全ての
インデックスを流し読みします。

**名無しさん＠お腹いっぱい。** · 2008/09/29(月) 23:51:45

結局ﾊﾞｰはﾋﾟﾛﾋﾟﾛ動いているのですが、検索が終了しないので中止しました。
IPv6を指定した板は見た記憶があった程度で本文をと思い検索させたのですが、
今回は一端あきらめて、今度は自作板を指定して必ず検索ﾜｰﾄﾞがある「HighPoint Technologies」を
検索したところ検索終了されるまでは、23時25分52秒開始で23時50分00秒で「ｲﾝﾃﾞｯｸｽ読み込み中」
あ、あれ？落ち着いて考えﾀｽｸﾏﾈｰｼﾞｬを開いたところCPU使用率0%でﾒﾓﾘも32,296Kのまま何も動いて
ないです・・・

indexﾌｧｲﾙ・17.6GB・ﾌｧｲﾙ数2247個、自作板ﾛｸﾞ・620MB・ﾌｧｲﾙ数5507個

**cen** ◆Am9xOgNMYE · 2008/09/29(月) 23:57:45

>>160
どうもです。
多分バグがあると思います。
インデックスの作成か読み込みにバグがあるのではと思います。
インデックス化する範囲を狭くするとうまくいくかもしれません

**cen** ◆Am9xOgNMYE · 2008/09/30(火) 00:05:33

CPU100%で無限ルーうかと思いましたがちょっと意外です。
調べてみます。
>>160
threadsearch.exeのあるフォルダの中のindexのフォルダにある、
read_list.txtは検索時に出来ていますか？
あるなら最後の行は何になっていますか？

**名無しさん＠お腹いっぱい。** · 2008/09/30(火) 00:09:09

AOpenﾏｻﾞｰi855GMEm-LFS
PentiumM 1.5G
windowsXP SP3
OSの入ってるHDはﾏｻﾞｰIDEﾏｽﾀに繋いだｼｰｹﾞｰﾄST3320620A
janeﾛｸﾞはﾏｻﾞｰIDEｾｶﾝﾀﾞﾘに繋いだｼｰｹﾞｰﾄST3500630A
threadsearch.exeとindexﾌｫﾙﾀﾞにあるのはﾏｻﾞｰｵﾝﾎﾞの
Promise PDC20579のSATAﾎﾟｰﾄに繋いだMaxtorの6L200P0をSATA変換で
Dﾄﾞﾗｲﾌﾞ空きﾌｫﾙﾀﾞにﾏｳﾝﾄって環境です。

**名無しさん＠お腹いっぱい。** · 2008/09/30(火) 00:18:21

00時10分現在「HighPoint Technologies」も検索されなかったので中止。
で、ご指摘のread_list.txtを見ると、そのﾌｧｲﾙ無いです・・・

indexﾌｫﾙﾀﾞには
file_list_0.txt～file_list_747.txt、file_time_0.txt～file_time_747.txt、
maked_path.txt、memory_0.txt～memory_747.txt、path.txt、search.txt
だけです　orz

動作中にもread_list.txtは作成されていません。
(本文のみのﾁｪｯｸ、本文と板指定にﾁｪｯｸのいずれも)

**名無しさん＠お腹いっぱい。** · 2008/09/30(火) 00:29:40

とと、みなさん何も言ってないのであくまで私の環境のみの現象
なんでしょうね。
どうぞごゆっくりお休みください。
当方もindexﾌｫﾙﾀﾞを消し再度index作成等やってみますので、何かﾌﾟﾛｸﾞﾗﾏ的に
気が付いたら又お願いします。

**cen** ◆Am9xOgNMYE · 2008/09/30(火) 00:33:05

>>164
レスをありがとうございます。
read_list.txtはインデックスを読み込む際に作成されます。
正しくインデックスを読めていません。
プログラムのバグではないかと思います。

とりあえず、インデックス作成フォルダを別のフォルダにしてみて、
インデックスの容量を小さくしてみてください。
想定外のdatファイルをインデックス作成時に読んでいるかもしれません。

**cen** ◆Am9xOgNMYE · 2008/09/30(火) 00:35:19

>>165
せっかく時間かけてプログラム動かして頂いたのに
すみません

**名無しさん＠お腹いっぱい。** · 2008/10/01(水) 15:02:00

つー事で、ﾛｸﾞ容量はそのままにしてindex削除→再度indexを作成、
DﾄﾞﾗｲﾌﾞﾏｳﾝﾄをやめてFﾄﾞﾗｲﾌﾞﾚﾀｰ割り当てでもっぺん自作板指定で
「HighPoint Technologies」を検索しながらindexﾌｫﾙﾀﾞを見てますが、
やはりread_list.txtというﾌｧｲﾙは作成されませんです。

ｲﾝﾃﾞｯｸｽ読み込み中・・・　すぐじゃ作られない？と思い、読み始め10分後に見ても
read_list.txtは作られてないです。

なので今度はINDEXﾌｫﾙﾀﾞから手作業で
file_list_0.txt～file_list_299.txtまでを残し、以降file_list_748.txtまで削除。
file_time_0.txt～file_time_299.txtまでを残し、以降file_time_748.txtまで削除。
memory_0.txt～memory_299.txtまで残し、以降memory_748.txtまで削除。
で、再検索後ﾌｫﾙﾀﾞを見ながら10分待って最新の情報に更新してもread_list.txtは
ﾌｫﾙﾀﾞに出てこないので検索中止・・・

なので、各99.txtまで残し手作業で削除。
read_list.txt出来ない orz

やけっぱちで各09.txtまで残し以降削除。
read_list.txt出来たー
が削除した各10～748までのﾘｽﾄの内容までは知らんかったので
read_list.txtの中身は真っ白のﾌｧｲﾙ。

各10.txtを戻してもread_list.txt出来る。
各50.txtまで戻す、read_list.txt出来る。
各70.txtまで戻す、read_list.txt出来ない&CPU使用率99%から0%になっても「ｲﾝﾃﾞｯｸｽ読み込み中」

**名無しさん＠お腹いっぱい。** · 2008/10/01(水) 15:02:39

しょうがないので各.txtを70から一つずつ減らして確かめたところ
各52.txtまでread_list.txt出来ました。(各53.txtを戻したり消したりで2回確認)
各53.txtにするとCPU99%から25秒ほどで0%になりread_list.txtも出来ないまま「ｲﾝﾃﾞｯｸｽ読み込み中」表示

PC搭載実搭載ﾒﾓﾘ2GB、windowsxp sp3 NTFSｵﾌﾟｼｮﾝﾃﾞﾌｫﾙﾄﾌｫｰﾏｯﾄ
file_list_0.txt～52.txt=4,739,593(4,820,992)ﾊﾞｲﾄ、file_list_53.txt=89,455(90,112)ﾊﾞｲﾄ
file_time_0.txt～52.txt=651,264(651,264)ﾊﾞｲﾄ、file_time_53.txt=12,288(12,288)ﾊﾞｲﾄ
memory_0.txt～52.txt=1,409,772,627(1,409,880,064)ﾊﾞｲﾄ、memory_53.txt=20,298,710(20,299,776)ﾊﾞｲﾄ
括弧()内はｴｸｽﾌﾟﾛｰﾗでﾌｧｲﾙのﾌﾟﾛﾊﾟﾃｨを見たときのﾃﾞｨｽｸ上のｻｲｽﾞって方です。
各52.txtまでで1.31GB、53.txtを増やしても1.33GB。

自分で書き出してみたけど搭載ﾒﾓﾘ容量はread_list.txtが作られないのに関係無さそう。
古いDATは9桁とかjaneのﾛｸﾞﾌｫﾙﾀﾞにあったりますが関係ないんでしょうね。
file_list_52.txt・53txtとfile_time_52.txt・53txtに9桁DATは出てきてないですし、
memory_52.txt・53txtは中見ても何々が書いてあるとは言えない暗号文ですね。

素人の書き出し&試しですが、何かの参考になれば幸いです。

**名無しさん＠お腹いっぱい。** · 2008/10/01(水) 15:20:26

私の環境では現状使えませんが、ｸﾞｰｸﾞﾙの個人情報取得利用などを
ようつべだったかな？にｱｯﾌﾟされてたのを見ちゃうと、ﾈｯﾄに繋がってる
検索ﾊﾞｰでﾛｰｶﾙﾃﾞｨｽｸを検索するのはちょっと嫌なので、cenさんが作って
くれてるのはとてもありがたいです。>167

ま、ﾈｯﾄ検索はｸﾞｰｸﾞﾙを使ってますが^^;

**cen** ◆Am9xOgNMYE · 2008/10/01(水) 22:41:35

>>168-170
調べて頂いてありがとうございます。
インデックス読み込み時のバグだと思います。
おそらくなのですが、以下の原因によりバグが出ています。

・インデックス読み込み時
　「HighPoint Technologies」を検索語として分解すると次の19の部分に分解されます。
　「Hi,ig,gh,hP,Po,oi,in,nt,Te,ec,ch,hn,no,ol,lo,og,gi,ie,es」

　分解した検索語ごとにインデックスを読み、バッファに保存します。
　バッファの必要数は以下の式で出ます。
　必要なバッファ＝バッファ「分解した検索語×インデックス数」
　
　バッファの最大数は１０２４となっています。
　これを超えるとバグになってしまいます。

この場合
　分解した検索語＝１９
　インデックス数＝５３(0～52)
　１９×５２＝１００７（1024以下なので正常に読み込み完了）

　分解した検索語＝１９
　インデックス数＝５４(0～53)
　１９×５３＝１０２６（1024以上なのでバッファを超えてしまう）

バッファが不足している場合を考慮してなかったために、
正しく検索出来ていなかったと思います。
もしかしたら別の原因のバグもあるかもしれません。
次の更新時に修正しようと思います。
バッファは多分１０２４もあれば十分だと思ってました。すみません

**cen** ◆Am9xOgNMYE · 2008/10/01(水) 22:44:50

必要なバッファ＝バッファ「分解した検索語×インデックス数」
↓
必要なバッファ＝「分解した検索語」×「インデックス数」

でした

**cen** ◆Am9xOgNMYE · 2008/10/02(木) 22:02:21

なので上の場合だと、500近くインデックスがあるので、
検索語が一文字か二文字なら今のバージョンでも
うまくいくはずです

**名無しさん＠お腹いっぱい。** · 2008/10/02(木) 23:12:15

ごみ箱から戻したつもりだった各○○.txtが全部戻ってなかったー・・・
いや、新ﾊﾞｰｼﾞｮﾝが来たら再度最初からindex作成するつもりだったので
それは良いのですが。

>検索語が一文字か二文字なら今のバージョンでも
>うまくいくはずです
で、各99.txtまで戻っていたので「HighPoint Technologies」ではなく
「IP」と二文字検索させたらちゃんと検索終了しread_list.txt作成されました。

ご報告まで。

**cen** ◆Am9xOgNMYE · 2008/10/05(日) 22:11:36

>>174
レスどうもです。
了解しました

**cen** ◆Am9xOgNMYE · 2008/10/12(日) 21:07:43

スレッド全文検索を更新しました。
Ver 1.80になりました。
http://www.geocities.jp/cen_hp

更新点は以下です。
・インデックスの構成と検索語により、検索できない場合がある
　不具合を修正しました。
・７日間以上インデックス更新をしなかった場合にメッセージを
　表示するようにしました。
・指定したスレッドをHTML化して表示できるようにしました。

インデックス方法は1.60、1.70と同じです。

**名無しさん＠お腹いっぱい。** · 2008/10/12(日) 23:31:41

>>176
乙です！
>・指定したスレッドをHTML化して表示できるようにしました
めちゃくちゃうれしいです

**名無しさん＠お腹いっぱい。** · 2008/10/13(月) 23:26:24

>176
乙っす

**名無しさん＠お腹いっぱい。** · 2008/10/20(月) 22:18:49

あげ

**名無しさん＠お腹いっぱい。** · 2008/10/20(月) 23:50:13

使ってる人少ないんかね？
まぁｵﾚもVer 1.80は即日落としたけど、PC作業中だったので
ついさっきからindex作成し始めたから出来上がりは明日の
19時くらいだな。

**名無しさん＠お腹いっぱい。** · 2008/10/21(火) 00:15:23

index生成時間がさすがに長すぎる・・・
便利そうなんだけどなぁ

**名無しさん＠お腹いっぱい。** · 2008/10/21(火) 18:53:28

馬鹿ｶｷｺだけど、誰かのindexファイルをフォルダごと貰って使ったらどうなんだろう？
indexをあげる人と貰う人の所持ログ次第だとは思うけど、巡回板がほぼ同じ趣味同士なら
index更新だけでうまくすれば短時間で生成？

**名無しさん＠お腹いっぱい。** · 2008/10/21(火) 21:38:20

>176
>インデックスの構成と検索語により
あー、その張本人っす。
今回は無事に検索出来ました。
が、indexの更新が出来ないような・・・
勿論当方のログフォルダ内容構成等の問題はあるかもしれませんが、
プログラマ的にindexが更新出来ない理由が有るかもしれないので
ご報告しておきます。

相変わらず素人の報告で申し訳ありませんが、下記のようになってます。

renewフォルダが作られ、中にfile_list.txt
中身
D:\Program Files\Accessories\2ch\2chjanelog\Logs\2ch\AA\AAサロン\1041132902.dat 1204642027 0
のようなテキストが766,859行ありfile_list.txt全容量79,437,535 バイト

index_file_list.txt
中身
D:\Program Files\Accessories\2ch\2chjanelog\Logs\2ch\AA\AAサロン\1041132902.dat 1204642027 0
のようなテキストが766,817行あり、766,818行目から766,976行目まで
NULL NULL 748
となりindex_file_list.txt全容量79,435,120 バイト

renewnow.txt中身
0
が一文字で
「インデックス更新中・・・0%」のままバーがピロピロしてますがCPU使用率0%のまま　orz

indexフォルダ17.7 GB
indexフォルダがある単独Fドライブ空き容量94.2GB

**名無しさん＠お腹いっぱい。** · 2008/10/29(水) 00:00:20

質問なんですが
「ここ」と示されているリンクをクリックするとdatファイルが開くのですが
ここをクリックするとjaneが開くようにする方法はありますか？
ttp://vip.cmdap.com/cgi-bin/uploader/pic/file/vipnion-pic_0385.jpg

**名無しさん＠お腹いっぱい。** · 2008/10/29(水) 02:32:16

>>184
今の最新バージョンだとスレをHTML化できるけど、それは？

**uIJbfUPhSWCqkR** · 2008/10/29(水) 02:34:56

**LyFkieLUiVQBKOtrceh** · 2008/10/29(水) 02:39:02

**MZrAwKodlsV** · 2008/10/29(水) 02:42:29

**London** · 2008/10/29(水) 02:43:51

LR96TG <a href="http://nagaijdojsvp.com/">nagaijdojsvp</a>, [url=http://gqrusmyjkato.com/]gqrusmyjkato[/url], [link=http://yvimpabntkdc.com/]yvimpabntkdc[/link], http://ylwxnscqpeqg.com/

**名無しさん＠お腹いっぱい。** · 2008/10/29(水) 18:58:24

>>185
レスthx
その機能で代用します
今後janeで簡単に開く機能を搭載することができたらお願いしたいです

**cen** ◆Am9xOgNMYE · 2008/10/31(金) 23:28:10

>>181
どうもです。
長いと思いますか。
自分もたまに思います。

マルチコアで作成できるなら、速くなるかと思ってます。
できるかは分からないですが。

**cen** ◆Am9xOgNMYE · 2008/10/31(金) 23:35:00

>>182
インデックスをあげる人と貰う人が
インデックス化したdatと同じものを持っていればできます。

その場合、datのパスも同一でないといけないので、
他の人から貰うのは難しいと思います

**cen** ◆Am9xOgNMYE · 2008/10/31(金) 23:46:09

>>183
教えて頂いてありがとうです

その現象は更新時に、インデックスのファイルと
現在のファイルを比較する時に起きているバグだと思います。

想定外のファイル数だったので、メモり確保できなかったのだと思います。
datファイルが１万個程度で考えていました。
多分１０～２０万個のdatなら更新できるのではと思います。

バグなのでプログラムを見直します。

**cen** ◆Am9xOgNMYE · 2008/11/01(土) 17:35:24

インデックス作成のアルゴリズムを見直そうかな。

**名無しさん＠お腹いっぱい。** · 2008/11/02(日) 00:45:58

製作者が想定してない&動作実験出来ない環境でインネンつけてごめんなさい。

**cen** ◆Am9xOgNMYE · 2008/11/02(日) 01:03:20

>>195
いえいえ
このくらいは想定すべきでした

**名無しさん＠お腹いっぱい。** · 2008/11/16(日) 17:48:57

ほ

**名無しさん＠お腹いっぱい。** · 2008/11/16(日) 23:31:53

も

**名無しさん＠お腹いっぱい。** · 2008/11/18(火) 06:56:35

さ

**名無しさん＠お腹いっぱい。** · 2008/11/18(火) 14:34:17

ぴ