固然理论上蜘蛛能匍匐和抓取一切页面，但实践上不能、也不会这么做。 SEO人员要想让本人的更多页面被收录，就要想方设法吸收蜘蛛来抓取。既然不能抓取 一切页面，蜘蛛所要做的就是尽量抓取重要页面。哪些页面被以为比拟重要呢？有几方面影响要素。

网站和页面权重。质量高、资历老的网站被以为权重比拟高，这种网站上的页面被 匍匐的深度也会比拟高，所以会有更多内页被收录，页面更新度。蜘蛛每次匍匐都会把页面数据存储起来。假如第二次匍匐发现页面与 次收录的完整一样，阐明页面没有更新。

屡次抓取后蜘蛛会对页面更新频率有所了 解，不常更新的页面，蜘蛛也就没有必要经常抓取。假如页面内容经常更新，蜘蛛就会 愈加频繁地访问这种页面，页面上呈现的新链接，也自然会被蜘蛛更快地跟踪，抓取新 页面。

导入链接。无论是外部链接还是同一个网站的内部链接，要被蜘蛛抓取，就必需有 导入链接进入页面，否则蜘蛛基本没有时机晓得页面的存在。高质量的导入链接也经常 使页面上的导出链接被匍匐深度增加。

SEO优化师-颜艳珍介绍

本人于2010年毕业于湖南工业大学电子商务系，同年5月21日进入百业网长沙分公司，至今第十一个年头，是百业网SEO网络优化工程师。熟悉百业网平台的产品百业通、独立建站、站群营销等一系列的SEO推广，在毕业实习期间进入阿里巴巴学习了3个月，在具体的工作中接触到其他分类信息平台的后台管理与运营以及SEM百度推广与运营。在网络优化方面拥有10年的丰富经验，包括SEO、SEM、站群推广、全网营销等。全国各地合作的大小中企业、个体户达上千家。如果您有网络推广需要帮助咨询的请随时联系我，提供免费咨询、网络优化服务，先试用满意后再谈合作。期待与你共创辉煌。