|
Post by account_disabled on Dec 4, 2023 4:08:26 GMT
最好将文本添加到网页的 <HTML> 标记中。 搜索引擎可以跟随网站导航吗? 正如爬虫需要通过其他网站的链接发现您的网站一样,它也需要您自己网站内的链接路径来从一个页面导航到另一个页面。 如果您希望搜索引擎找到某个页面,但它没有链接到其他页面,则该页面是完全不可见的。 许多网站以搜止了某个 URL,或者您的站点地图中包含了重复的 URL,而不是首选的规范版本(我将在第 5 章中提供有关规范化的更多信息),则不应在站点地图中包含该 URL。 如果没有其他网站链接到您的网站,则可以通过将 XML 站点地图提交到 Google Search Console 将您添加到索引中。 无法保证他们会将提交的 URL 包含在索引中,但值得一试。 尝试访问浏览器 URL 时出现错误? 抓取工具在抓取您网站上的 URL 的过程中可能会遇到错误。 您可以查看 Google Search Console 的“抓取错误”报告,以确定可能发生这种情况的网址。 该报告将向您显示服务器错误和 电话号码清单 未找到的错误。 服务器日志文件也可以揭示这一点以及其他信息的宝库,例如浏览频率,但由于访问和检查服务器日志文件是一种更高级的策略,因此我们不会在初学者指南中详细讨论它。 不过,您可以在这里了解更多信息。 在针对爬网错误报告采取行动之前,了解服务器错误和“未找到”错误非常重要。 创建自定义 404 页面。 通过添加指向网站上重要页面的链接、网站搜索功能甚至联系信息来自定义您的 404 页面。 这使得访问者在遇到 404 错误时最不可能离开您的网站。 4xx代码:当搜索引擎爬虫由于客户端错误而无法访问内容时 4xx 错误是客户端错误,意味着请求的 URL 包含不正确的语法或无法实现。 最常见的 4xx 错误之一是“404 – 未找到”错误。 这些问题的发生可能是由于 URL 拼写错误、页面被删除或重定向损坏(仅举几个例子)。 当搜索引擎遇到404时,它们无法访问该URL。
|
|