蜘蛛程序
来自站长百科
蜘蛛程序[ ]
蜘蛛程序(spider):就是爬行程序,是搜索引擎的一部分,复杂在互联网上定位的和收录网页,这样就能够响应搜索者的请求,成功的搜索引擎营销取决于爬虫程序能够发现网站上几乎所有的网页。
蜘蛛程序通道[ ]
蜘蛛程序通道(spider paths):用于站点导航的轻松通道,例如站点地图、分类地图、国家地图,或者在关键网页底部的文本链接,蜘蛛通道包括能使蜘蛛程序轻松找到你站点所有网页的方法。
蜘蛛程序陷阱[ ]
蜘蛛程序陷阱(spider trap):是阻止蜘蛛程序爬行网站的障碍物,通常源于那些网页显示的技术方法,这些手段能很好的配合浏览器,但,对蜘蛛程序就构成了阻碍,蜘蛛陷阱包括JavaScript下拉菜单以及有些种类的重定向