购买 订购 等相关关键字 则其他页面链接到该特定产品的方式可能有问题。确品也存在于每个相关的子类别中 以便用户无需浏览复杂的链接层次结构即可轻松购买。 你有 个推荐循环 重定向循环 重定向循环是阻止索引的另 个常见问题。它们通常是由简单的拼写错误引起的 可以按照以下步骤修复 找到导致重定向循环的页面。如果您使用的是 请在此页面或您的 文件中找到您的 篇帖子的 源代码 然后搜索 重定向 以查看它试图从哪个页面发送流量。还值得修复所有 重定向并确保将它们设置为。 在 资源管理器中使用 查找 如果是 则使用 搜索所有包含 重定向 的文件 直到找到问题所在。 更正任何错误 以便没有重复的 指向它自己 然后使用如下所示的重定向代码 等状态代码并不总是显示在 中使。
用 等外部扫描仪 您可以找到 和其他错误的状态代码。 如果 切正常 请使用 再次抓取网站并重新提交以供索引。如果有需要您注意的新警告 请等待 周左右 然后再次访问。 没有时间每天更新他们的索引 但他们尝试每隔几个小时更新 次 这意味着有时您的内容可能不会站的功能 比利时 WhatsApp 号码列表 和即显示 即使您知道它已更新。忍受我 它将很快被索引。 您使用阻止 抓取您网站的插件。 阻止您的网站被抓取的插件 这种插件的 个例子是 插件。如果您使用此插件将 文件设置为禁止将您的网站编入索引 将无法抓取它。 配置您的 文件并按照以下步骤操作 创建它时 将其公开 以便爬虫可以不受限制地访问它。确保您的 文件没有以下行 用户代理 不允许 斜杠表示 文件会阻止站点根文件夹中的所有页面。 如果拒绝行是空的 它告诉抓取工具他们可以不受限。

制地抓取和索引您网站上的每个页面 前提是您没有将某些页面标记为未编入索引。 您的站点使用 来显示内容 使用 本身并不总是导致索引困难的难题。没有 条规则说 是唯 导致问题的东西。您应该查看各个站点并诊断其状况以确定这是否是 个问题。 当 作为 个问题发挥作用时 即通过做有问题的事情来防止爬行 类似于伪装的技术。 如果您呈现的是 而不是原始 并且原始 中有 个链接不在已处理的 中 则 无法抓取或索引该链接。由于此类错误 识别呈现的 和原始 之间的问题至关重要。 如果你想隐藏你的 和 文件 请不要。谷歌提到它希望在抓取时看到你所有的 和 文件。 希望你支持所有 和 的抓取。如果这些文件中的任何 个被阻止 您可以取消阻止它们并允许进行全面扫描 以便 了解您网站所需的信息您还没有在 中添加。
|