经典案例
  • 厦门网站优化案例:年代文化传播公司
  • 厦门网站优化案例:117企业联盟
  • 厦门网站优化案例:爱家环保科技

Robots.txt 文件应放在哪里?

发布于:2018-03-27 09:55来源:www.sseoo.cn 作者:厦门SEO 点击:139次
robots.txt文件放在哪里robots.txt文件应该放置在网站根目录下。举例来说,当spider访问一个网站(比如 )时,首先会检查该网站中是否存在htt

robots.txt文件放在哪里robots.txt文件应该放置在网站根目录下。举例来说,当spider访问一个网站(比如 )时,首先会检查该网站中是否存在这个文件,如果 Spider找到这个文件,它就会根据这个文件的内容,来确定它访问权限的范围。

tag标签:
------分隔线----------------------------
------分隔线----------------------------