我们都知道网站的url层次结构直接影响蜘蛛抓取的难易程度,那么怎样的url结构才更容易被百度蜘蛛爬取呢?我们通过三幅图来了解下利于百度收录的url结构规范:
规范url案例解读:
根据百度的最新算法规则,网站url采用扁平化结构的效果是最好的,如果网站本身内容不是很多,建议通过目录的形式进行构建;如果内容过多的话,建议采用二级域(子域名)的方式独立开来
错误url案例解读一:
url层次结构不易过深,过深会导致百度蜘蛛难以抓取
错误url案例解读二:
全部的内容都堆积主域下,不做任何区分,这样也是不利于百度蜘蛛抓取的