我正在考虑使用如下的url模式:
example.com/item/r6B0PmUmx07O/just-one-item
example.com/item/r6B0PGgwPJWl/yet-another-itemslug之前的部分是项的唯一且不可预测的id。
与类似的url进行比较
example.com/item/1001/just-one-item
example.com/item/1002/yet-another-item这对搜索引擎优化有坏处吗?
或者这对搜索引擎的抓取是不好的?(因为爬虫不能“猜测”下一项的id)
发布于 2012-01-12 16:59:47
我不确定有多少流行的爬虫试图增加URL中的数值来命中页面。它们通常尝试通过链接进行遍历。
但是考虑对恶意用户隐藏一些信息。如果你能找到任何关于你的用户的信息(通过example.com/user/1001),那么使用顺序的UID通常是错误的,这并不意味着它是安全的一部分,但有时很难访问你的数据是很好的。因此,在猜测您的库存中有多少产品时,竞争将会有一些困难:)
考虑提供动态站点地图,并提供指向所有产品的链接。这使您确保每个爬虫将命中您的所有项目,无论它有什么关键字。
https://stackoverflow.com/questions/8832089
复制相似问题