网站层级设置

网站层级与外链都是影响搜索引擎蜘蛛频繁抓取页面的主导因素

每次蜘蛛爬行，它都会存储页面数据。假设第二次爬网发现该页收录与次爬网齐全相反的内容，则示意该页尚未更新