2ちゃんねるスレッド全文検索・・・ThreadSearch

**名無しさん＠お腹いっぱい。** · 2008/02/27(水) 19:23:59

ttp://www.geocities.jp/cen_hp
他の2chブラウザと連携できるといいな

**cen** ◆Am9xOgNMYE · 2008/10/01(水) 22:41:35

>>168-170
調べて頂いてありがとうございます。
インデックス読み込み時のバグだと思います。
おそらくなのですが、以下の原因によりバグが出ています。

・インデックス読み込み時
　「HighPoint Technologies」を検索語として分解すると次の19の部分に分解されます。
　「Hi,ig,gh,hP,Po,oi,in,nt,Te,ec,ch,hn,no,ol,lo,og,gi,ie,es」

　分解した検索語ごとにインデックスを読み、バッファに保存します。
　バッファの必要数は以下の式で出ます。
　必要なバッファ＝バッファ「分解した検索語×インデックス数」
　
　バッファの最大数は１０２４となっています。
　これを超えるとバグになってしまいます。

この場合
　分解した検索語＝１９
　インデックス数＝５３(0～52)
　１９×５２＝１００７（1024以下なので正常に読み込み完了）

　分解した検索語＝１９
　インデックス数＝５４(0～53)
　１９×５３＝１０２６（1024以上なのでバッファを超えてしまう）

バッファが不足している場合を考慮してなかったために、
正しく検索出来ていなかったと思います。
もしかしたら別の原因のバグもあるかもしれません。
次の更新時に修正しようと思います。
バッファは多分１０２４もあれば十分だと思ってました。すみません

**cen** ◆Am9xOgNMYE · 2008/10/01(水) 22:44:50

必要なバッファ＝バッファ「分解した検索語×インデックス数」
↓
必要なバッファ＝「分解した検索語」×「インデックス数」

でした

**cen** ◆Am9xOgNMYE · 2008/10/02(木) 22:02:21

なので上の場合だと、500近くインデックスがあるので、
検索語が一文字か二文字なら今のバージョンでも
うまくいくはずです

**名無しさん＠お腹いっぱい。** · 2008/10/02(木) 23:12:15

ごみ箱から戻したつもりだった各○○.txtが全部戻ってなかったー・・・
いや、新ﾊﾞｰｼﾞｮﾝが来たら再度最初からindex作成するつもりだったので
それは良いのですが。

>検索語が一文字か二文字なら今のバージョンでも
>うまくいくはずです
で、各99.txtまで戻っていたので「HighPoint Technologies」ではなく
「IP」と二文字検索させたらちゃんと検索終了しread_list.txt作成されました。

ご報告まで。

**cen** ◆Am9xOgNMYE · 2008/10/05(日) 22:11:36

>>174
レスどうもです。
了解しました

**cen** ◆Am9xOgNMYE · 2008/10/12(日) 21:07:43

スレッド全文検索を更新しました。
Ver 1.80になりました。
http://www.geocities.jp/cen_hp

更新点は以下です。
・インデックスの構成と検索語により、検索できない場合がある
　不具合を修正しました。
・７日間以上インデックス更新をしなかった場合にメッセージを
　表示するようにしました。
・指定したスレッドをHTML化して表示できるようにしました。

インデックス方法は1.60、1.70と同じです。

**名無しさん＠お腹いっぱい。** · 2008/10/12(日) 23:31:41

>>176
乙です！
>・指定したスレッドをHTML化して表示できるようにしました
めちゃくちゃうれしいです

**名無しさん＠お腹いっぱい。** · 2008/10/13(月) 23:26:24

>176
乙っす

**名無しさん＠お腹いっぱい。** · 2008/10/20(月) 22:18:49

あげ

**名無しさん＠お腹いっぱい。** · 2008/10/20(月) 23:50:13

使ってる人少ないんかね？
まぁｵﾚもVer 1.80は即日落としたけど、PC作業中だったので
ついさっきからindex作成し始めたから出来上がりは明日の
19時くらいだな。

**名無しさん＠お腹いっぱい。** · 2008/10/21(火) 00:15:23

index生成時間がさすがに長すぎる・・・
便利そうなんだけどなぁ

**名無しさん＠お腹いっぱい。** · 2008/10/21(火) 18:53:28

馬鹿ｶｷｺだけど、誰かのindexファイルをフォルダごと貰って使ったらどうなんだろう？
indexをあげる人と貰う人の所持ログ次第だとは思うけど、巡回板がほぼ同じ趣味同士なら
index更新だけでうまくすれば短時間で生成？

**名無しさん＠お腹いっぱい。** · 2008/10/21(火) 21:38:20

>176
>インデックスの構成と検索語により
あー、その張本人っす。
今回は無事に検索出来ました。
が、indexの更新が出来ないような・・・
勿論当方のログフォルダ内容構成等の問題はあるかもしれませんが、
プログラマ的にindexが更新出来ない理由が有るかもしれないので
ご報告しておきます。

相変わらず素人の報告で申し訳ありませんが、下記のようになってます。

renewフォルダが作られ、中にfile_list.txt
中身
D:\Program Files\Accessories\2ch\2chjanelog\Logs\2ch\AA\AAサロン\1041132902.dat 1204642027 0
のようなテキストが766,859行ありfile_list.txt全容量79,437,535 バイト

index_file_list.txt
中身
D:\Program Files\Accessories\2ch\2chjanelog\Logs\2ch\AA\AAサロン\1041132902.dat 1204642027 0
のようなテキストが766,817行あり、766,818行目から766,976行目まで
NULL NULL 748
となりindex_file_list.txt全容量79,435,120 バイト

renewnow.txt中身
0
が一文字で
「インデックス更新中・・・0%」のままバーがピロピロしてますがCPU使用率0%のまま　orz

indexフォルダ17.7 GB
indexフォルダがある単独Fドライブ空き容量94.2GB

**名無しさん＠お腹いっぱい。** · 2008/10/29(水) 00:00:20

質問なんですが
「ここ」と示されているリンクをクリックするとdatファイルが開くのですが
ここをクリックするとjaneが開くようにする方法はありますか？
ttp://vip.cmdap.com/cgi-bin/uploader/pic/file/vipnion-pic_0385.jpg

**名無しさん＠お腹いっぱい。** · 2008/10/29(水) 02:32:16

>>184
今の最新バージョンだとスレをHTML化できるけど、それは？

**uIJbfUPhSWCqkR** · 2008/10/29(水) 02:34:56

**LyFkieLUiVQBKOtrceh** · 2008/10/29(水) 02:39:02

**MZrAwKodlsV** · 2008/10/29(水) 02:42:29

**London** · 2008/10/29(水) 02:43:51

LR96TG <a href="http://nagaijdojsvp.com/">nagaijdojsvp</a>, [url=http://gqrusmyjkato.com/]gqrusmyjkato[/url], [link=http://yvimpabntkdc.com/]yvimpabntkdc[/link], http://ylwxnscqpeqg.com/

**名無しさん＠お腹いっぱい。** · 2008/10/29(水) 18:58:24

>>185
レスthx
その機能で代用します
今後janeで簡単に開く機能を搭載することができたらお願いしたいです

**cen** ◆Am9xOgNMYE · 2008/10/31(金) 23:28:10

>>181
どうもです。
長いと思いますか。
自分もたまに思います。

マルチコアで作成できるなら、速くなるかと思ってます。
できるかは分からないですが。

**cen** ◆Am9xOgNMYE · 2008/10/31(金) 23:35:00

>>182
インデックスをあげる人と貰う人が
インデックス化したdatと同じものを持っていればできます。

その場合、datのパスも同一でないといけないので、
他の人から貰うのは難しいと思います

**cen** ◆Am9xOgNMYE · 2008/10/31(金) 23:46:09

>>183
教えて頂いてありがとうです

その現象は更新時に、インデックスのファイルと
現在のファイルを比較する時に起きているバグだと思います。

想定外のファイル数だったので、メモり確保できなかったのだと思います。
datファイルが１万個程度で考えていました。
多分１０～２０万個のdatなら更新できるのではと思います。

バグなのでプログラムを見直します。

**cen** ◆Am9xOgNMYE · 2008/11/01(土) 17:35:24

インデックス作成のアルゴリズムを見直そうかな。

**名無しさん＠お腹いっぱい。** · 2008/11/02(日) 00:45:58

製作者が想定してない&動作実験出来ない環境でインネンつけてごめんなさい。

**cen** ◆Am9xOgNMYE · 2008/11/02(日) 01:03:20

>>195
いえいえ
このくらいは想定すべきでした

**名無しさん＠お腹いっぱい。** · 2008/11/16(日) 17:48:57

ほ

**名無しさん＠お腹いっぱい。** · 2008/11/16(日) 23:31:53

も

**名無しさん＠お腹いっぱい。** · 2008/11/18(火) 06:56:35

さ

**名無しさん＠お腹いっぱい。** · 2008/11/18(火) 14:34:17

ぴ

**名無しさん＠お腹いっぱい。** · 2008/11/18(火) 20:03:38

え

**名無しさん＠お腹いっぱい。** · 2008/11/19(水) 00:22:46

び

**名無しさん＠お腹いっぱい。** · 2008/11/19(水) 04:12:08

どんなエビだよ

**名無しさん＠お腹いっぱい。** · 2008/11/23(日) 21:23:27

更新ﾏﾀﾞ？

**名無しさん＠お腹いっぱい。** · 2008/11/30(日) 23:23:29

ﾏ

**cen** ◆Am9xOgNMYE · 2008/12/01(月) 01:16:23

どうもです
今はMonoViewの方を更新中ですので、こちらは少し待っててください。

**名無しさん＠お腹いっぱい。** · 2008/12/01(月) 15:36:00

　 ∧＿∧
　（　・∀・）
　（　∪ ∪
　と＿_）__）

**名無しさん＠お腹いっぱい。** · 2008/12/01(月) 18:11:46

スレタイだけで検索すると、キーワードに該当するスレのすべてのレスをリストアップしようとするんだけど
スレ(もしくはスレの>>1)だけリストアップするようにならないかな

内容検索のソフトだからお門違いだとは思うんだけど…

**名無しさん＠お腹いっぱい。** · 2008/12/04(木) 11:14:51

ttp://poiu.jp/
スレタイ検索しかできないけど、こういうので全文できるようになったらよさそう。

**名無しさん＠お腹いっぱい。** · 2008/12/08(月) 00:06:37

>151以降のインネン付けてるバカ本人ですが、当時ペンM1.5G で24時間ちょい切る
程度だったのがQ6600だと多少ログ増えてるにも関わらず8時間程でindex新規再作成終了。
(当環境だとver1.8でindex更新出来なかった為新規作成)

>193の件はまったりverｱﾌﾟ街ん子

**名無しさん＠お腹いっぱい。** · 2008/12/15(月) 20:01:41

ほしゅ

**名無しさん＠お腹いっぱい。** · 2008/12/25(木) 23:26:47

ログ容量とか検索ワード数とか、しょーもない制限しないで。

**名無しさん＠お腹いっぱい。** · 2008/12/27(土) 17:49:06

無制限て項目は必須だよな

**名無しさん＠お腹いっぱい。** · 2008/12/31(水) 21:10:09

正規表現を使っての検索があったらすごくうれしいです

**名無しさん＠お腹いっぱい。** · 2009/01/08(木) 13:28:44

このスレが落ちたら更新されなくなる？

**名無しさん＠お腹いっぱい。** · 2009/01/09(金) 18:50:04

落ちたらここ
http://pc11.2ch.net/test/read.cgi/esite/1173355555/

**vCunucBaZEIINywiR** · 2009/01/09(金) 18:54:12

**cen** ◆Am9xOgNMYE · 2009/01/10(土) 00:00:51

保守どうもです。
すみませんが次のバージョンはまだ手がついて無いです。

一応、作るつもりではいます

**名無しさん＠お腹いっぱい。** · 2009/01/12(月) 06:05:48

気長に待ってます

**名無しさん＠お腹いっぱい。** · 2009/01/16(金) 03:41:34

こんにちは。
数少ないインデックス検索型の過去ログ検索ソフトということで期待しております。

>>190でも出ているのですが、
Jane等2chブラウザに簡単にURLを渡す方法はないでしょうか？

**名無しさん＠お腹いっぱい。** · 2009/01/16(金) 08:17:09

現時点での検索精度はいかほどでしょうか？

例えば"きりたんぽ"で検索した場合、
文中に"きりたんぽ"という語句を含むスレを
何％程度抽出可能ですか？

**cen** ◆Am9xOgNMYE · 2009/01/17(土) 16:51:19

どうもです。

>>220
今のところは無いですね。
代わりで>>185の方法があります。

>>221
１００％抽出できます。
インデックス化したログのみ検索しますが、インデックス化すれば
検索語句を１００％抽出できます。

**cen** ◆Am9xOgNMYE · 2009/01/18(日) 01:18:37

補足
インデックス化は全文に対して行います。
なので、検索は一瞬ではできませんが全部の文章から検索できます。

**名無しさん＠お腹いっぱい。** · 2009/01/18(日) 13:03:28

>>222-223
ありがとうございます。
これではかどる

**cen** ◆Am9xOgNMYE · 2009/01/20(火) 02:07:24

>>213
ファイル数の制限は付けると思います。
今のところ、ファイルパス＋ファイル名が平均１２８文字なら１００万ファイル
程度まで使えるようにしようかと思ってたり。

**cen** ◆Am9xOgNMYE · 2009/01/28(水) 15:22:11

スレッド全文検索を更新しました。
Ver 1.81になりました。
http://www.geocities.jp/cen_hp

更新点は以下です。
ファイル数が大量にある場合にインデックスを更新できない不具合を修正しました。

とりあえず、その１点だけです
他はまたぼちぼちやります

**名無しさん＠お腹いっぱい。** · 2009/01/29(木) 18:50:23

>226
更新乙です
ﾋｬﾎｰｲ

**名無しさん＠お腹いっぱい。** · 2009/01/30(金) 00:20:31

あげ

**名無しさん＠お腹いっぱい。** · 2009/02/01(日) 06:44:08

VistaUltimate x64なんだけどどうもインデックスが作成できない模様
path.txtのみ生成されファイルリスト作成中のまま

**名無しさん＠お腹いっぱい。** · 2009/02/01(日) 11:26:40

>>229
>>55

**名無しさん＠お腹いっぱい。** · 2009/02/01(日) 15:23:41

WebサイトとReadmeに64ビット環境では動作しないって明記しておいてくれよ
だいぶ前から分かってたみたいだけど作者は64ビットに対応する気はないの？

**名無しさん＠お腹いっぱい。** · 2009/02/01(日) 15:26:12

これってexeの設定がおかしいんじゃない？

dllが32bitモード専用なのに、
「64bitOSでも32bitモードで動かして下さい」
とせずに、
「64bitOSでは64bitモードで動かして下さい」
って設定になってる気がする。

**名無しさん＠お腹いっぱい。** · 2009/02/02(月) 14:57:39

索検文全ドッレス

**cen** ◆Am9xOgNMYE · 2009/02/05(木) 00:11:45

どうもです。

>>231
すみません。
対応する気というか忘れていました。

>>232
その通りです。
http://blogs.msdn.com/nakama/archive/2008/11/06/part-2-net-framework-2-0-64.aspx

**151** · 2009/02/11(水) 17:27:12

とりあえず
当方の機器構成で不具合無しで使わせてもらってます。

**名無しさん＠お腹いっぱい。** · 2009/02/12(木) 10:56:26

インデックスを使用しない検索はどいうしくみなんだろう
何度か試したけど、janeやgrep系ツールで15分くらいで終わる検索が
1時間以上かかる・・・

**名無しさん＠お腹いっぱい。** · 2009/02/13(金) 21:17:35

ramdiskに置くとちょっぱやで終わるで

**cen** ◆Am9xOgNMYE · 2009/02/14(土) 19:01:57

>>236
1スレッド1レスごとに、名前や本文などに分解して検索します。
他のツールより遅いかもしれません

**cen** ◆Am9xOgNMYE · 2009/02/14(土) 19:02:46

それから、スレッド全文検索を更新しました。
Ver 1.811になりました。
http://www.geocities.jp/cen_hp

更新点は以下です。
64bit Windowsで動作しない不具合を修正しました。

**名無しさん＠お腹いっぱい。** · 2009/02/14(土) 23:51:01

乙

**名無しさん＠お腹いっぱい。** · 2009/02/16(月) 00:23:25

64bitは使ってないけど　乙

**名無しさん＠お腹いっぱい。** · 2009/02/23(月) 17:42:48

あげる

**名無しさん＠お腹いっぱい。** · 2009/02/24(火) 06:13:36

教えて
他のスレから貼り付けてあるレスのIDから
その元のスレッドはどこで検索したらわかりますか？

**cen** ◆Am9xOgNMYE · 2009/02/26(木) 02:31:04

>>243
探したいスレをログに持っていれば、ID欄にIDを入れればできます。

**名無しさん＠お腹いっぱい。** · 2009/03/02(月) 11:59:07

V2Cとか外部コマンドにも対応してほしい。

**名無しさん＠お腹いっぱい。** · 2009/03/06(金) 20:08:53

わけあって２ちゃんブラを2種類使用してます。2個以上の検索フォルダを作るようにできないでしょうか・・・

**cen** ◆Am9xOgNMYE · 2009/03/07(土) 10:27:43

>>245
V2Cを見てみましたが、何か外部コマンドがいろいろあるようですね。
使えると面白いかもしれないです

>>246
ドライブが同じなら「C:\」とか設定してみてください。
2chのdatファイルのみを検索するようにしていますので、
C:\とかでも大丈夫だと思います。

**246** · 2009/03/08(日) 05:30:53

>>247
ありがとうございます。

**名無しさん＠お腹いっぱい。** · 2009/03/17(火) 02:11:05

要望なのですが、
ネットワークパスへの対応をお願いできないでしょうか
検索フォルダが他のPCにあるもので。
今はネットワークドライブを割り当てれば大丈夫なようなのですが
できればネットワークパスのまま検索を行いたいです。

**cen** ◆Am9xOgNMYE · 2009/03/18(水) 01:45:30

>>249
ネットワークごしで使うとは意外でした。
そういう要望があるとは。

あと、検索フォルダを２つ以上という要望が割と多いような気がします。

**名無しさん＠お腹いっぱい。** · 2009/03/19(木) 00:02:57

janeログがDドライブ
スレッド全文検索実行ファイル他&indexがEドライブ
o2onログもEドライブ

なので今はjaneのDドライブだけ検索。

**cen** ◆Am9xOgNMYE · 2009/03/28(土) 00:24:10

こんばんは

スレッド全文検索を更新しました。
Ver 1.82になりました。
http://www.geocities.jp/cen_hp

・更新点は以下です。
　・追加検索フォルダを指定できるようにしました。
　・更新日が～日前以降のみのファイルを検索できるようにしました。
　・インデックス作成・更新の進捗表示を変更しました。

こんな感じです。
http://www.geocities.jp/cen_hp/threadsearch180/top.png

**名無しさん＠お腹いっぱい。** · 2009/03/28(土) 20:26:28

更新乙です。

作業後に新しいのに入れ替えて4日ぶりにindex更新しようと思います。

**cen** ◆Am9xOgNMYE · 2009/03/30(月) 00:21:51

どうもです。

そういえば、追加検索フォルダで長いフォルダ名だと
全部表示されないですね。
作るときに気がつかなかったです。

**名無しさん＠お腹いっぱい。** · 2009/03/30(月) 23:01:24

ちょっとお尋ねしたい事が。
index作成中及び更新中に待ちきれずにjane起動しログを追加取得しちゃった
場合ですが、threadsearch.exe実行中のピロピロ動いてるバー終了間際で
パソコンがリブートしちゃう気がするのですが、threadsearch的プログラムで
PCリブートなんてありえる事なんでしょうか？

Ver1.82ではindex更新中にログ取得は控えているのですが、
前のバージョンでは待ちきれずログ追加した場合に何度か
リブート食らったものでちょっと疑問に思いました。

もちろん更新中にログ取得しなければ今のところリブートしていないので
とっても愛用させていただいてます。

**cen** ◆Am9xOgNMYE · 2009/04/01(水) 02:26:36

>>255
使って頂いてありがとうございます。
リブートですが、再起動するようには作っていません。
threadsearch.exeのせいかも知れないですが、原因は不明ですね。
更新中や作成中にログの追加削除をしても、こちらの環境では再起動する
ことはありませんでした。
そういう現象もあることを覚えておきます。
伝えて頂いてどうもです。

**255** · 2009/04/01(水) 13:22:32

>256
承知しました。

**名無しさん＠お腹いっぱい。** · 2009/04/05(日) 14:16:04

index作成及び更新が終わったらPCの電源を切るって
オプションは付けられないでしょうか？(何時でも取り消し可能で)

一応こゆフリーウエアはありますが、自前で機能を持っててくれたらうれしいなと。
ttp://trendy.nikkeibp.co.jp/article/tec/online/20020724/101278/
ttp://homepage3.nifty.com/t-sugiyama/

**涼宮ハルヒ** · 2009/04/06(月) 04:31:09

乙！

**名無しさん＠お腹いっぱい。** · 2009/04/07(火) 22:43:36

>>258
コマンドラインで「index作成したら終了って機能」があれば、バッチで処理できない？
PCの電源きる方法なんていくらでもあるので

**名無しさん＠お腹いっぱい。** · 2009/04/08(水) 14:43:32

>260
ｽﾏﾝ、馬鹿なオレにはマウス使ってチェックボックス・チェックマークがいいんだ・・・

**名無しさん＠お腹いっぱい。** · 2009/04/08(水) 22:03:34

>>256
窓最大化したとき次回も最大化状態でお願いん。
適度な大きさで使いたいときと最大化で使いたいときとあるので。

**名無しさん＠お腹いっぱい。** · 2009/04/10(金) 08:53:24

見終わるとすぐログ消す俺には関係ないソフトか

**cen** ◆Am9xOgNMYE · 2009/04/12(日) 12:37:55

ご意見ありがとうです。

インデックスが大きい場合は、時間がかかるのでPC自動オフが便利かもしれないですね。

ウィンドウの状態は最大化して使わないので、気がつかなかったです。

**名無しさん＠お腹いっぱい。** · 2009/04/12(日) 17:01:09

今って全体検索壊れてるんでsky?

**cen** ◆Am9xOgNMYE · 2009/04/21(火) 00:23:15

こんばんは

スレッド全文検索を更新しました。
Ver 1.83になりました。
http://www.geocities.jp/cen_hp

・更新点は以下です。
　追加検索フォルダが長い場合にパスが見えない不具合を修正しました。
　最大化した場合のウインドウサイズを記憶するようにしました。
　インデックス作成速度が約１５％高速化しました　　(旧バージョン比 1.15倍）
　インデックス更新速度が約１００％高速化しました（旧バージョン比 2倍）

インデックス更新が速くなったので、PCの自動オフは付けていません。
インデックス形式やiniファイル形式は同じなので、
解凍して上書きして貰えればおｋです

**cen** ◆Am9xOgNMYE · 2009/04/21(火) 00:30:48

そういえば、使い方をもう少し詳しく書くのもいいかもしれない。

**cen** ◆Am9xOgNMYE · 2009/04/21(火) 00:32:43

>>265
他のサイト？

**名無しさん＠お腹いっぱい。** · 2009/04/21(火) 01:45:35

何か引っかからないと思ったらjaneに自分で追加した板のログは対象にならないんですね
一応インデックスは作ってるように見えるけど

**名無しさん＠お腹いっぱい。** · 2009/04/21(火) 19:30:01

>266
更新　乙
19:30 index更新開始