検索した用語に一致する記事が1個見つかりました。

1. robots.txt - 用語辞典

読み方：ロボットテキスト
robots.txtとは、Googleやgooなどのロボット型検索エンジンのクローラに対する指示を記述したファイルのことである。 クローラが各Webサイトを巡回（クローリング）する場合、まず、ターゲットとなるWebサイトのルートディレクトリにrobots.txtが配置されているかどうかを確認する。配 ...

検索した用語を含む記事が3個見つかりました。

1. robots.txt - 用語辞典

robots.txtとは、Googleやgooなどのロボット型検索エンジンのクローラに対する指示を記述したファイルのことである。 クローラが各Webサイトを巡回（クローリング）する場合、まず、ターゲットとなるWebサイトのルートディレクトリにrobots.txtが配置されているかどうかを確認する。 ...

2. yetibot - 用語辞典

yetibotとは、NAVERが運用している検索エンジン用ロボット（クローラ）の名称である。 YetiBotのユーザーエージェント名は「Yeti」の後ろにバージョン名がつく。2010年2月現在、ユーザーエージェント名は「Yeti/1.0 (+http://help.naver.com/robots ...

3. Googleウェブマスターツール - 用語辞典

Googleウェブマスターツールとは、Googleの検索エンジンのクローリング状況などをWebサイトの運営者が確認し、Google向けにWebページの最適化を図ることができるツールのことである。Googleが提供している。 Googleウェブマスターツールでは、Webページに対するGoogleの評 ...