seo网站优化:网站robots文件写作语法

  • A+
所属分类:SEO基础知识

  根据具体情况,robots写作语法分别如下:

  (1)允许所有搜索引擎抓取网站的所有内容:

  User-agent:*

  Allow:/

  (2)禁止所有搜索引擎抓取网站的所有内容:

  User-agent:*

  Disallow:/

  (3)禁止搜索引擎访问网站的某些目录,比如禁止访问admin:

  User-agent:*

  Disallow:/admin/

  (4)仅限于访问某一目录,可以用“$”加后缀目录,比如仅限于访问asp目录:

  User-agent:*

  Allow:.asps

  Disallow:/

  以上介绍的是robots 的基本用法,SEO人员可以根据具体情况综合使用。

  • 我的微信
  • 技术支持添加二维码
  • weinxin
  • 我的QQ二维码
  • 教程下载请扫二维码
  • weinxin
马找钱

发表评论

:?::razz::sad::evil::!::smile::oops::grin::eek::shock::???::cool::lol::mad::twisted::roll::wink::idea::arrow::neutral::cry::mrgreen: