元スレ
1 :MYFILER.NET:05/02/03 02:55:10 ID:kEID5XWW.net
はじめまして。MYFILER.NETをはじめました。
詳細は、http://www.myfiler.net/
現在、どこにでもありそうな検索エンジンっす。
というか、自宅サーバーでロボット型の検索エンジンはスペック的に
無理がある!絶対ある。実際ある。
そこで、賛同者の自宅サーバーを連携させて他の検索エンジンに
負けないシステムを作ろうと考えたのですが、
馬鹿なので、何も思いつきません。というわけで、先輩方の
アイデアを募集!!ぜひよろしくお願いします!!
10 :DNS未登録さん:05/02/04 00:35:58 ID:BkBtQ1pe.net
19 :DNS未登録さん:05/02/04 13:35:45 ID:???.net
そもそも、ロボット型やるなら、
・クロール用ボットを走らせるマシン
・DBサーバ
・Webサーバ
の3つはいると思うんだけど、どれもそれなりの数がいると思う。
とりあえず、Webサーバの部分をインターネット経由でいろんなサーバに分けることを考えると、
ロードバランサーよりもDNSラウンドロビンの方が手軽じゃないかと思う。
クロール用ボットを走らせるマシンは、UDとかFolding@Homeのような分散コンピューティングのように、
ある程度(例えば10サイト)クロールしたら、中央サーバにそのデータを送信する見たいな形がいいかもしれない。
16 :DNS未登録さん:05/02/04 01:06:49 ID:???.net
>>15
あなたの努力次第です。
1年で30台前半から70台までageた人もいます。
32 :DNS未登録さん:05/02/12 11:21:22 ID:???.net
38 :DNS未登録さん:05/02/13 09:55:29 ID:???.net
>>1
どうでもいいけど、アフ「ィ」リエイトな。
後広告出したいんだけど受け付けてもらえる?
その場合の料金の目安もおしえて。
13 :DNS未登録さん:05/02/04 00:53:20 ID:???.net
11 :MYFILER.NET:05/02/04 00:39:24 ID:6QRb5MwT.net
DNS未登録さん厳しいね。。。
うざがらないで!!
58 :DNS未登録さん:05/03/05 18:25:09 ID:???.net
58 :DNS未登録さん:05/03/05 18:25:09 ID:???.net
52 :MYFILER.NET:05/02/17 01:16:42 ID:3DfWmHZA.net
50さん>違いますが、非常にお世話になってます。アクセス解析する際はぜひ。
47さん>Like文ではなくNグラムで検索しています。
性能についてですが、検索スピードは他には劣りますが、ADSL+サーバー1台で
やってる割には速いほうかと思っています。
何より問題は、HPの評価方法ですね。。。
Googleと検索しても、Googleは後ろの方にしかでてきません。。。
実際にほしい情報を検索するために使用するというよりは、
なんか面白そうなホームページないかな〜〜くらいの時に使って
いただくと便利かもしれません。。。
61 :DNS未登録さん:05/03/14 21:58:28 ID:???.net
>>1 さん。応援してます。
>>60 さん同様に俺も協力しますよ。公開してくれれば。
34 :DNS未登録さん:05/02/13 02:27:07 ID:f2cPbV3t.net
>↑は、どうしようか悩んでいます。。。
単に@を付けてエラーを抑制しておいて
裏側でエラー取得して回避すりゃいいだけじゃないかと。
12 :DNS未登録さん:05/02/04 00:52:17 ID:???.net
全国2ch・PINKちゃんねる共催模試 実施結果:
受験者数:1642016人
合計点:900点
最高点:894点
最低点:11点
平均点:564点
MYFILER.NETの国語の偏差値:28.4
29 :DNS未登録さん:05/02/12 10:59:28 ID:Il/eX79R.net
3 :DNS未登録さん:05/02/03 16:15:21 ID:???.net
googleにゃ勝てないし2ch過去ログ検索くらいが現実的で実用的じゃまいか
50 :DNS未登録さん:05/02/16 19:36:10 ID:BPv3xUiL.net
9 :MYFILER.NET:05/02/04 00:28:08 ID:6QRb5MwT.net
というか全体的にぼろぼろですね。
日本語から勉強します!
46 :DNS未登録さん:05/02/16 13:30:56 ID:???.net
自分で検索エンジン作ったの?性能うんぬんはおいといて
俺にはできないから、素直に尊敬するよ。がんばってね。
59 :DNS未登録さん:05/03/14 18:11:53 ID:???.net
でも、Yahoo!とかググールとかは大手だから、今作っても使われないとおもわれ。。。。。
25 :DNS未登録さん:05/02/06 20:47:05 ID:???.net
P2P型の検索ロボット は面白そうだね (ー。ー)ボソォ
23 :DNS未登録さん:05/02/06 18:05:30 ID:???.net
2 :DNS未登録さん:05/02/03 04:11:07 ID:???.net
スレタイと内容が違うスレッド立てるな氏ね。
それとクラスタリングくらい勉強して来い。
51 :DNS未登録さん:05/02/17 00:16:02 ID:yE9WZj1L.net
22 :MYFILER.NET:05/02/05 04:29:21 ID:6IKxeKRc.net
怒られるのが恐くて18以降見てませんでした。
返信ありがとうございます。
19さん>
現在、クロール用マシン/Web+DBサーバ の2台で動いています。
金銭的な問題で2台になってます。。。
なので、自宅サーバー郡で何とか他の検索サイトに匹敵するものを
作りたかったのですが。。。難しそうですね。
20さん>
スポンサー広告はとりあえず張ってみたというのが現状です。
今、検索キーワードに合わせた広告表示機能の作成に加えて
配置を考えています。20さんの意見を元に配置を考えてみます。
ありがとうございます。
21さん>
バグバグですが、なんとか一人でやってます。
皆様に認めて頂けるようなサイトを目指して頑張ります。
35 :MYFILER.NET:05/02/13 02:34:09 ID:Iby1Vd1g.net
34さん>返信有難うございます。
「@」←でエラーを制御出来るのですね。まだPHPは始めてまもないため
恥ずかしながら、それほど詳しくありません。
「@」について調べてみます。有難うございます。
31 :DNS未登録さん:05/02/12 11:14:14 ID:???.net
オマケに3347899078978660715 件 – 0.111569秒とか出てるし^^;;;
39 :DNS未登録さん:05/02/13 10:30:54 ID:???.net
62 :DNS未登録さん:2007/07/02(月) 18:14:09 ID:???.net
26 :DNS未登録さん:05/02/06 20:58:45 ID:???.net
>>3 同意
もっと対象を絞ったほうがよいと思うよ。
2ch検索とか、RSS検索とか、アイディア勝負で。
んでユーザ増えて負荷が上がったら分散なりなんなりやればよい。
って落ちてるのか。
56 :DNS未登録さん:05/03/01 00:30:33 ID:DJ636/hP.net
43 :DNS未登録さん:05/02/15 01:56:50 ID:???.net
54 :MYFILER.NET:05/02/18 00:45:27 ID:1pCnG7OC.net
53さん>
なるほど、26さんもおっしゃっていましたが、検索対象を特殊分野に絞った
方が良さそうですね。
検索対象についてじっくり考えてみます。
>私のサーチエンジンは放置しております。笑
ぜひURLを!参考にさせてください!
55 :DNS未登録さん:05/02/18 01:51:58 ID:???.net
47 :DNS未登録さん:05/02/16 16:31:17 ID:???.net
Likeしてたら1000件くらいで重くなるから検索方法を考えないときついよね
45 :MYFILER.NET:05/02/16 02:42:03 ID:4vqe6F9e.net
バナーの種類など詳細を教えてください!!
myfiler_net@yahoo.co.jp
上記までお願いします。
ただ、現状はあくまでBETA版なので、システムがしょっちゅう止まる情况です
ので、ご期待に添えないかとおもいます。
PVは、TOP頁のアクセスログを参照してください。(あまり詳しくは私もわかりません)
49 :DNS未登録さん:05/02/16 18:14:06 ID:???.net
>>48
phpSiteAnalyser −サイトアクセス解析システム− TOP
ぐぐるだけでアクセスはせんw
64 :電脳プリオン:2011/11/13(日) 15:52:09.52 ID:???.net ?2BP(1960)
57 :DNS未登録さん:05/03/01 07:14:05 ID:???.net
8 :MYFILER.NET:05/02/04 00:26:39 ID:6QRb5MwT.net
あっ。何度もすみません。
自宅サーバの底時からは ではなく
自宅サーバーの底力でした。。。
ブラインドタッチから勉強します。
37 :MYFILER.NET:05/02/13 05:08:26 ID:Iby1Vd1g.net
48 :DNS未登録さん:05/02/16 16:36:52 ID:BPv3xUiL.net
42 :DNS未登録さん:05/02/14 23:33:58 ID:???.net
>>41
遠慮せずに800×600くらいいっとけ。
男は勢いが大事だ。
36 :DNS未登録さん:05/02/13 03:14:53 ID:???.net
よーしパパ有り金はたいてWayback Machine作っちゃうぞ。
4 :DNS未登録さん:05/02/03 21:13:48 ID:???.net
28 :DNS未登録さん:05/02/09 17:58:05 ID:???.net
20 :DNS未登録さん:05/02/04 13:36:43 ID:???.net
あと、スポンサー広告ちょっとでかすぎない?
テキストリンクにするか、右側に移したほうが見やすそう。
7 :MYFILER.NET:05/02/04 00:25:07 ID:6QRb5MwT.net
あぁぁぁ また怒られてしまいました…
反論はまったくありません…すみません。
自宅サーバの底時からは、他社の検索サイトと同等の
検索サイトが自宅サーバー郡でできれば面白いかと
思ってつけました。。いずれにしても、わかりづらかったですね。
すみません…
クラスタリングよいですね。ロードバランサーを導入して
賛同者(いればれすが)と実際に行ってみるのもよいかもしれません。
ただ、ロードバランサーの負荷は結構なものになりそう…
インターネット経由でクラスタリングってできるのでしょうか。
ちょっと調べてみます。
データベースについては、現在考え中。。。
データの量が膨大すぎて、自宅サーバ1台では、およそ
ページ10000000分がやっとといった感じです。
なんで、レプリケーションではなく、NASか、NFSをインターネット
経由で行うのが良いかと思ってるんですが、調査不足で
とにかくインターネット経由で上記のようなことがスムーズに
行えるか調査してみます。
しばらくは、ちびちび1台の自宅サーバーでがんばります…
最後に、改めまして失礼しました!!
18 :MYFILER.NET:05/02/04 01:10:36 ID:6QRb5MwT.net
了解です。ありがとうございました。
まだまだバグバグの状態ですが、努力して、偏差値上げます。
では、メンテして今日は寝ます!
33 :MYFILER.NET:05/02/12 18:07:18 ID:/Z/o3EgL.net
あぁぁ ご指摘ありがとうございます。
Warning: mysql_fetch_assoc(): supplied argument is not a valid MySQL result resource in /usr/local/apache2/htdocs/lib/action/default/search2Action.php on line 143
↑は、どうしようか悩んでいます。。。
検索結果が0件の場合、でてしまいます。というのも、検索SQLに
SQL_CALC_FOUND_ROWS(MySQL) を使用して検索しているのですが、
mysql_fetch_assocする前に、SELECT FOUND_ROWS()で検索結果の件数を
取得すると、当然、検索結果はクリアーされてしまいますので、
0件の場合、mysql_fetch_assocしないという処理が、できません。。
たぶん回避方法はあるので、勉強して直します!
accelerator調べてみますね!ありがとうございます。
24 :( ‘.’) ◆nftMKBxOs. :05/02/06 20:29:03 ID:???.net
レスを投稿する(名前省略可)