可不可以通过蜘蛛的访问来触发更新缓存，避免由浏览者访问而更新,该怎么解决

可不可以通过蜘蛛的访问来触发更新缓存，避免由浏览者访问而更新

如果可以的话，
会有什么缺点

同时请教蜘蛛的工作原理，谢谢

------解决方案--------------------
可以的吧，通过进入的IP来判断就可以了
蜘蛛也就是一个通过链接一层层的进入来抓取页面的程序吧
抓取到的页面存起来就可以提供搜索了