Re: ロボット型検索エンジン ( No.1 ) |
- 日時: 2003/08/01 14:19
- 名前: aimix <aimix@mbh.nifty.com>
- 参照: https://aimix.jp/
- ロボット型検索エンジンは、申請するか、どこかに
自分のサイトへのリンクが貼ってあれば自動的に 収集していきます。
よく使われるのは、Yahoo! ですが、Yahoo!のキーワ ード検索にはロボット型検索エンジンである Google の情報が使われています。 Yahoo!内のカテゴリでマッチしたサイトを表示→ Googleの情報からマッチしたサイトを表示となって います。
取得させるかどうかはロボットに指示を出す robots.txt を置く事で指示を出す事ができますが、全てのロボット が同じ動きをするわけでは無いようです。 詳細について詳しく知りませんので、検索エンジンで robots.txt を検索してみて下さい。
|
|