打开用于索引的文档如图中蓝色箭头所示
由于某种原因,这些文档位于从机器人关闭的目录中(如图中红色箭头所示)。 有必要考虑使用指令的规则,即相应组中的Allow和Disallow按URL前缀的长度排序并按顺序使用。 允许 该指令告诉机器人 XML 站点地图的位置。建议您指定完整的 URL 路径。如果资源上有多张卡,则允许注册相同数量的地址。例如: User-agent: * Sitemap: https://сайт.ru/sitemap-1.xml Sitemap: https://сайт.ru/sitemap-2.xml 指令中写入的特殊字符含义如下: “*” – 任意字符序列(默认添加在每个指令的末尾); “$”——取消规则末尾的“*”符号; “#” […]