Robots.txt文件应放在网站的根目录,还是子目录

-
Robots.txt文件应放在网站的根目录,还是子目录简要概括:站长做好网站,通常都会做一个Robots.txt文件来限制某些文件不被搜索引擎抓取,那么Robots.txt文件应放在网站的根目录,还是子目录呢?23406小编分享讲解:...
- 本文网址:http://www.23406.com/bk/1142.html
- 简略名称:网站目录
- 相关解析:Robots.txt文件
- 归属分类: 网站 目录 文件 子目录
Robots.txt文件应放在网站的根目录,还是子目录正文-->
站长做好网站,通常都会做一个Robots.txt文件来限制某些文件不被搜索引擎抓取,那么Robots.txt文件应放在网站的根目录,还是子目录呢?23406小编分享讲解:
根据各搜索引擎的指引规则,Robots.txt文件必须放在网站的根目录,如果是放在网站的子目录, Robots.txt文件搜索引擎不能爬取到,所以不会起任何作用。
举个例子:
http://域名/robots.txt 有效
http://域名/web/robots.txt 无效
如果你不能控制根目录的 robots.txt,则你可以通过在子目录网页中使用标签阻止网页被收录。
- 简介
- 收录
- 分类
Alexa排名/搜索流量占比
最新收录
热门查阅
浏览过本站的站长还浏览了以下栏目
- 万年历查询
- 天气查询工具
- 邮编区号查询
- 域名WHOIS查询
- mail邮箱图标制作
- 压力换算工具
- 网页颜色代码查询
- qq临时会话小工具
- 五笔编码查询
- 计算器小工具
- ip地址查询工具
- 繁简字转换工具
- 密码安全检测
- 汉字查拼音工具
- 二维码生成工具
- js加密解密工具
- js/html美化工具
- 网页编辑器工具
- 网站权重查询工具
- Alexa排名查询
- html转js工具
- 脑筋急转弯大全
- 手机号码估价查询
- 歇后语查询工具
- 字母大小写转换
- 索引收录查询
- CSS格式化
- 一分钟倒计时
- 在线练习打字
- 人民币大写转换
- 去除重复工具
- 汉字笔划结构
- 在线字数统计
- 网站测速查询
- 在线文字替换
- 文章排版工具
- 姓名生成工具
- json工具大全
- 颜色代码对照表
- 在线ps软件
- 网址域名提取
- 网页html加解密
- 本机ip查询
- 跳转代码生成
- 特殊符号大全
- 批量打开网址
- 批量查询网站
- 电脑练习钢琴
- 随机数字生成
- 周公解梦查询
- 亲戚称呼查询
- 火星文字转换
- 汉字谜语大全
- 俗语谚语大全
- 名言语句查询
- 绕口令大全
- QQ号码评估
- 站长工具箱
- 23406站内友链
- 搜索引擎入口
- 年龄计算器
- 站长工具