包含大量链接/ URL的站点地图

我目前正在与采购/公共拍卖网站合作。 作为顾问进行SEO工作的引人注目的事件是敦促为互联网网站上列出的每个单独的项目组合创建URL,下面列出的实例。 我觉得每个项目/群组网页目前都有经过批准的网页链接,这对我来说实际上并不合适,因此我实际上确定新网站地图肯定会获得多少收益。 当然,一个人会谈论这个选择,并在提供的背景下提供指针/推荐吗? 非常感谢。

实例:

  • www.mywebsite.com/CPU
  • www.mywebsite.com/CPU/Intel
  • www.mywebsite.com/CPU/Intel/Core2Duo
  • www.mywebsite.com/CPU/AMD
  • www.mywebsite.com/CPU/AMD/Phenom
  • www.mywebsite.com/RAM
  • 等等。
0
2019-05-13 02:37:21
资源 分享
答案: 2

我认为只有获得批准的变体才能获得站点地图。 坚持:

  • www.mywebsite.com/CPU
  • www.mywebsite.com/CPU/Intel
  • www.mywebsite.com/CPU/Intel/Core2Duo
  • www.mywebsite.com/CPU/AMD
  • www.mywebsite.com/CPU/AMD/Phenom

如果所有这些网站链接只是指示www.mywebsite.com/CPU,那么只需将此网址添加到网站地图。 如果每个网页都是各种各样的网页(如果它只是标题),那么您需要将它们全部添加到网站地图,但要注意复制网页内容。

0
2019-05-17 11:48:50
资源

在您的询问中没有足够的细节来提供“优秀”的解决方案。 我经常倾向于认为你可能会咆哮不正确的树,但我这样做是通过思考几点来坚持的。

我认为:

  • 你现在有很多(单独的)项目网页,谷歌还没有全部(大于100,000?)
  • 物品肯定会再次出现这样的规律性,即蜘蛛是一个永远不会完成的问题,也是必不可少的
  • 如果没有站点地图,您可能无法抓取所有项目网页,因此您依靠站点地图显示您需要的所有网页

我的指示:

  • 为爬虫的优势设计一个可浏览的动力结构(只是); 当然,它可以被客户点击,但它的目标只是让爬虫爬行
  • 浏览权力结构要求每个项目不超过4个网页深度
  • 构建你的URL修改以遵守爬行(即第一个目录site = item - 小册子(或类似的表达式),第二个目录site =穿入第一个项目唯一性(即“存储空间”),最后一个目录站点=搜索短语,连字符和项目ID,最后一个小URL字符串是Product - Name.html)
  • 布局 - 明智,将可浏览的目录网站链接显示给客户; 你实际上是为爬虫做了这个,而且从使用角度来看,如果你的客户通过现有的用户界面点击它会好得多
  • 通过将所有其他内部Web链接标记为NoFollow来引导爬网程序(有些人可能声称没有 所有 各种其他内部网络链接; 无论跟随/ nofollow策略如何,您都需要敦促爬虫在非常简单的有序课程中旅行,也不要在网站上使用各种其他全天然网络链接跳转

回顾一下,我所声称的是你需要的 为每一个项目组合制作一个网页,毕竟,这是一个无限的数字,也是一项艰巨的工作。 在专业方面,我与你的SEO个人和@Eric不同。 相反,我当然会特别设计一个可浏览的“小册子”以利用抓取工具的优势,并且还可以通过向下钻取点击来修改您的URL修改推理,并在爬行器向下钻取时支持您的支持消息。 我当然乐意向您展示一个URL作为此讨论论坛之外的实例(电子邮件:chris @ adragna.com)。

如果您仍在考虑组合网页,您创建的现有网址推理以及网站地图,请与此数学协作:每个地图最多可包含50,000个网址,还有大约1000个网站地图。 最多有5000万个网页......如果你打算以相反的方式运作,你可以利用它来确定抽出的项目混合量的上限。

0
2019-05-17 11:42:44
资源