spider(三) 我们是一只礼貌的爬虫
摘要：
互联网的信息是共享的，任何人在一定的权限范围下都可以主动的去获取互联网上的资源。不过网络上的资源都存在着多多少少的限制，比如说服务器资源有限，网络资源有限，所以在我们获取资源的同时尽量的不过多的占用资源，从而导致别人无法正常获取。爬虫也是一样，爬虫可以方便快捷的获取网络资源，但是不能因为如此，我们就滥用爬虫获取资源，我们需要遵循一定的规则，这样才能和资源提供方更友好的合作。 阅读全文
posted @ 2010-10-21 16:02 CoderOnRails 阅读(718) 评论(1) 推荐(0) 编辑