用于搜索引擎索引的XML站点地图
我们有一些用户请求100万页爬虫限制或更多,所以我认为这将是一个伟大的主题,以解决我们的博客。无论你是在创建站点地图来改进你的搜索引擎优化,还是为了网站项目规划的目的而创建它,都有尺寸限制要考虑。根据站点地图作为XML站点地图的官方协议,它们不应该包含超过50000个网站URL,并且不超过10MB大小。谷歌、雅虎和Bing也遵循同样大小的XML站点地图限制。如果站点的页面计数大于此,则需要使用。多站点地图并把它们链接起来站点地图索引文件它将识别搜索引擎中的每个站点地图文件以进行更有效的索引。
项目发现与规划的可视化站点地图
类似地,如果站点地图包含许多页面和级别,那么巨大的视觉站点地图也很难查看。由于这些原因,DyNO映射器有几种管理企业级网站的选项,所以我们想向您展示我们创建多个站点地图的过程。
步骤1:创建一个SITEMAP
您的第一步将是从URL点击创建,并做一个一般的爬行你的网站。最好是这样做,即使你认为你知道你的层次结构的内容。让我们面对现实吧,你可能在你的鼻子底下漏掉了一些东西。
宁波建站爬行你的网站发现你网站的层次结构。在爬过你的网站之后,你会想制定一个计划,在你对你所做的工作的总体概述之后,你将如何分割你的站点地图。您将希望每个站点地图包含不超过50000页,并包含网站的部分。
步骤2:创建计划
每个站点地图应该由你建立的网站URL层次划分。见下面的网站示例分成两个站点地图。如果你的网站是由URL组织的,你可以在下一个步骤中即刻将页面分组在一起。
|
Sitemap 1www. www.yourdomain.com/blogs 您的产品/产品 | Sitemap 2www. www.yourdomain.com/locations 您的会员/会员/会员 |
步骤3:创建多个位置
在你有了你的计划之后,现在是时候创建你的站点地图了。单击URL创建,并为省略路径字段打开高级设置。
输入您的URL后,使用省略路径字段来限制目录。在上面的示例中,您将希望省略第一站点地图中的服务、位置和成员。
前任/服务-将跳过URL中的/服务。\/服务$-只跳过以服务结束的URL。
您将希望用新的行分隔多个规则。
宁波建站现在使用OMIT函数创建您的第二站点地图,但这次您希望排除根URL、目录、博客和产品目录。输入\/$将排除来自第二站点地图的主页URL。
步骤4:创建一个SITEMAP索引文件
通过访问每个站点地图菜单并点击下载站点地图,然后选择XML站点地图来下载XML站点地图文件。现在你需要做的就是把你的站点地图上传到你的主机帐户,并把它们连接起来。站点地图索引文件.
STEP 5: UPLOAD SITEMAP TO SERVER
宁波建站在使用DyNo映射器创建站点地图之后,爬行器设置被存储,这样您就可以通过单击SITMAMAP菜单中的“刷新站点地图”来重新刷新站点地图并重新上传到服务器。你可以选择每周或每月安排你的站点地图爬行。你可以用2500000页的网站来管理网站地图。最热门订阅使用上述策略,同时无缝地使用我们的内容清单,审计,关键字跟踪,和可访问性测试功能,创造非凡的网站用户体验。