- A+
所属分类:SEO基础知识
根据具体情况,robots写作语法分别如下:
(1)允许所有搜索引擎抓取网站的所有内容:
User-agent:*
Allow:/
(2)禁止所有搜索引擎抓取网站的所有内容:
User-agent:*
Disallow:/
(3)禁止搜索引擎访问网站的某些目录,比如禁止访问admin:
User-agent:*
Disallow:/admin/
(4)仅限于访问某一目录,可以用“$”加后缀目录,比如仅限于访问asp目录:
User-agent:*
Allow:.asps
Disallow:/
以上介绍的是robots 的基本用法,SEO人员可以根据具体情况综合使用。
- 我的微信
- 技术支持添加二维码
-
- 我的QQ二维码
- 教程下载请扫二维码
-