佐藤渡辺通信 No.21 検索ロボットの勤務評定
今日はよく来るロボットについて書いてみました。最近4カ月に来たロボットが収集したファイル数のトップ10を並べてみます。
Slurpというのが断然トップです。Inktomiというデータ収集を行うロボットで集めたデータは検索エンジンに売っているようです。Inktomi自身も検索エンジンですが。gooもこのロボットに頼っているようです。あと、Hotbotもそうです。
Gulliverはカナダの検索エンジン・Nothernlightのロボットですが、ここを検索してくる人は月に10人もいません。集めたデータはどこかに売っているのでしょう。Googleは自分のロボット・Googlebotを持って、結構、データ収集していますが、検索エンジンのあの強大さを考えると、ほかからのデータも使っているようですから、多分、そのあたりでしょう。 SlurpとGulliverはほとんど毎日やってきます。
ScooterはAltaVistaのロボットです。しかし、データを持っていく割にはAltavistaで検索してくる訪問客は月に百数十人程度です。これもデータは他の検索エンジンに売っているのでしょう。
Googlebotは言うまでもなくGoogleのデータ収集ロボットです。1週間から10日くらいの間隔で来て、数日かけてほとんど全部のファイルを持っていきます。
Lycos_Spiderはもちろん、Lycosのロボットですが、頑張っている割には、ここからの検索ヒットは月 300程度です。メジャーになろうと頑張っているのでしょう。
mogetは gooのロボットです。大きな検索エンジンはよそのロボットの収集データにたよるだけでなく、自前のロボットも持っているようです。ときどき来て、どかんとさらえていきます。先月は一度も来ませんでした。
sukeは黒田さんというひとがやっているRignringという検索エンジンのロボットです。月に1、2度きて、さらえるようにもっていきます。これだけ頑張って、たまにヒットがあるだけです。
libwwwはロボットソフトの名前のようです。これを使っている検索エンジンはかなりあって、Hotbotもそのようです。
FAST-WebCrawlerはFASTという検索エンジンのロボットらしいのですが、検索結果ではまだ1度しか見掛けません。
PowerTCP これはどこのロボットかよくわかりません。
こうしたロボット達のおかげで、世界中のサイトから、驚異的な速さで、目的のサイトが探せるというわけです。ほかに何十、何百とロボットがあるようですが、個人的にロボットソフトを使って、定期的に関心のあるサイトの情報を取っている人もあるようで、それらしいのが、かなりあります。
佐藤渡辺サイトの近況
先月は、前々回に紹介した世界の祭り/ケルトの祭り/インボルクだけが新しいアップロードです。実はこまごまとして動きはあって、建設用語小辞典は、ちょこちょこと更新を繰り返しており、動きが重くならないよう、ファイルを分割したりと、作業としてはかなりの量をこなしています。
先日、数えてみたら、見出し語で2,500語以上ありました。小辞典とも言えぬ感じになってきましたが、動きは、小辞典のままでおれるよう、目に見えないところで工夫しています。ほかにも建設用語辞典を名乗るところは多いのですが、収録数てばNo.1のようです。
実は分野別の記述に対して見出し語が複数あるという仕組みになっており、実体はフロッピー1枚でゆうに収まる程度のものです。英和の機能をつけたので、それも含めると厳しいかもしれませんけど。
先月はトップページの訪問者数で2,675人と前月から若干の減ですが、ページビュー・つまり見られたページ数は119,939と新記録になりました。一年に倍以上と急カーブを描いて増えてきましたが、少しカーブの傾斜がゆるくなってきたようです。とどこおっている世界文化の紹介などを頑張らねばと思っています。
同時多発テロ
小泉さん、先頭に立ちたがっているようだけど、へっぴり腰で、あとからついていく方がいいと思うけど。日本は戦いよりは援助とかで頑張った方がいいと思うけど。これに関連してアメリカからわけのわからないメールがきました。The flagという題名とURLだけというメールで、このテロに関する意見をネットに発表したところ、非難ごうごうで、その言い訳らしいのですが、どんな意見だったかはさっぱり分かりません。一種のスパムのような感じです。
最近はブルーベリーはぽつぽつと数粒ずつは熟れているようですが、小鳥にまかせています。今は毎朝、アサツキがサラダに、オムレツに、目玉焼きのトッピングにと、大活躍です。このネギは、ほとんど雑草という繁殖力でばらまいておくとどんどん増えて、芝の中でもどんどん育ちます。となりが梅林で下は藪になっていますが、そこに球根をぶん投げておいたら、笹にも負けず、育っています。
チューリップも意外に強くて、これもぶん投げておいたのが、藪の中で季節には花を咲かせています。
しばらくはアサツキです。これを朝、調理するのは私の役目、家内が十数年前に大病を患ってからは朝食は私ということで、卵料理だけは熟達しました。
今回のお知らせはこの程度です。
2001/10/02発行 発行部数 115部目次へ このホームページの更新状況などのお知らせをご希望の方がありましたら、下記の申し込みのフォームでお申し込み下さい。私どもからのお知らせのほかに、「まりんにゅうす」というメールマガジンも届くことになります。 | |
|