Posted by ケンサクちゃん | Posted in クローラーとは?, 検索エンジンとは? | Posted on 29-01-2010
以前、検索エンジンの種類は「ディレクトリ型」と「ロボット型」の2種類があるとお話ししましたね。
それらの違いはデータベースの構築方法にあるとお話ししましたが、そういった違いから登録されるホームページにも違いがあるんですよ。
というわけで、ディレクトリ型とロボット型、2種類の検索エンジンについて、もう少し詳しく説明してみたいと思います。
ホームページを検索!というと、おそらくロボット型の方がイメージが強いことでしょう。
「ロボット型検索エンジン」なんて名前は聞いたことがなくても、きっと皆さんけっこうな頻度でホームページ探しのために利用していることでしょうからね。
ロボット型検索エンジンといえば、「Yahoo」「Google」「goo」「MSN」などが挙げられます。
ポータルサイトでもあり検索エンジンでもある、代表的なホームページですね。
これらはどれも、トップページの目につきやすいところに検索窓が設置されています。
そこにキーワードを打ち込んで決定すると、そのキーワードに関係するホームページが検索され、次のページに表示される・・・と。
そうして表示されるホームページは膨大な量です。
それもそのはず、ひとつひとつのホームページを登録しているのは人間ではなく、ロボット、クローラー、スパイダーなどと呼ばれるプログラムなのですからね。
プログラムで自動的にホームページの収集が行われるので、登録されるホームページは実に様々です。
企業のホームページもあれば個人のホームページもあり、特定のキーワードに特化して詳しく説明しているホームページもあればテーマが定まっていないブログもあります。
・・・おっと、長くなりそうなので、続きは次回に(汗)
Posted by ケンサクちゃん | Posted in クローラーとは? | Posted on 01-10-2009
自分の周りにホームページを作成している人が本当に多いので、そんなに簡単にできるものなのか?と思い自分もホームページを作成してみることにしたんです!
参考にしようと思って友人のホームページをいろんな検索方法で検索しても一向にヒットしないのです。
私の検索方法に何か重大な欠点があるのか?!なんて思っていたんです!
でも、どうやら違ったようです・・・。
Yahoo!にしろGoogleにしろ、クローラーと呼ばれるロボットがいろんなホームページに行きこのホームページはどんな内容か?とかそのホームページの文章中に含まれるリンクをたどって別の文書を収集するという動きをしているそうなんです!
要するに、友達のホームページにこのクローラーと呼ばれるロボットがまだ1度も来ていないからホームページが認識されていなくて、インターネット上に表示されないようになるそうです。
このクローラーというものにもいろんな種類があるそうなので調べてみました!
グーグルボット (Google)
Yahoo! Slurp (Yahoo!)
MSNBot (MSN)
Yetibot (ネイバー)
InfoSeek Sidewinder (インフォシーク)
Slurp (Inktomi)
Scooter (AltaVista)
Baiduspider(百度)
インターネットNinja
これらのクローラーに自分のホームページを認識してもらうことによって、検索結果に表示されるようになるそうです!!
ということは、自分のホームページも完成してインターネット上に公開したらまずは、クローラーを呼びこむことが大切になるんですよね!
まぁその前に、サーバーをどれにするかって言うことを決めなくちゃいけないんですけどね!!
サーバーって言うように検索してみたら、サーバー販売をしている会社のホームページだったり、1Uサーバーをお勧めしてます!!って言うようなブログが本当にたくさん検索結果に表示されるんです!
どれにしようか迷っちゃいますよね!!