Search

由于特殊的附加组件和插件允许您直接从

对于 CMS,管理面板进行更改,因此简化了流程。 设置文件时,遵守语法规则并遵循某些建议和特征非常重要,这会影响文档的正确操作。例如: 文件名为 robots.txt。不允许使用大写字母、西里尔字母和各种符号。 1 个站点 – 1 个文件。您不能对单个资源使用 2 个或更多文本文档。 robots.txt 的位置是根文件夹。例如,要控制对http://site.ru/所有页面的扫描,文件应位于:http://site.ru/robots.txt。

禁止将文档放置在子目录如果您无

法访问根文件夹,则需要联系您的提供商。重要的是要考虑到该文件可以通过带有子域和非标准端口的 URL 放置、 。 # 符号后面出现的任何文本的 香港 手机 号 解释均表示“注释”。这允许优化器在指令上留下注释,让人想起影响索引关闭文件或打开对某些部分和页面的访问的原因。该文件以 UTF-8 编码的文本文档格式创建,其中包括 ASCII 字符代码。

规名称以拉丁文大写例

电话号码

具体拼写是Allow,而不是ALLOW。 指令中缺少结束字符。禁止在规则末尾添加句号等。 robots.txt 文件包含允许在单独的行上写入多个 比利时 电话号码列表 指令的组。每个指令都包含有关指令是为哪个用户代理编写的信息、哪些目录被授予访问权限等信息。组中的指令是从上到下读取的。 搜索机器人不关心指令的顺序。例如,如果“允许”和“禁止”相互冲突,则第一个优先。 不建议为文件中的每一页编写说明。

Leave a Reply

Your email address will not be published. Required fields are marked *